WHOAMI
Xu Jiang
技术人的日常.
  • apache-hive1-vs-hive2-llap-performance

    本测试硬件环境是在比较老旧的 Dell R710 机器上测试的,具体配置参考下面内容,我们在这里主要测试和探讨的是对Spark2、Hive2、Spark1、Hive1进行跑同样的TPCDS测试用例、比较它们的性能有多大差别,其中也会测一组最早期的 Hive on MR 的性能。 硬件 ...

    • Hive
  • 宣布Apache Hive 2查询性能提升25倍以上

    Apache Hive 2.1发布于一个月以前, 这是一个回顾Hive2如何彻底改变Hadoop 上的SQL 引擎的机会。 Hive 有很多新的改变,很难说具体的亮点, 但是以下有几个: Hive LLAP的交互式查询,Hive 2.0就介绍了LLAP,LLAP 在Hive 2.1得...

    • Hive
  • Impala - Hive 性能测试和查询优化

    版本信息 Hadoop 2.6.0-cdh5.4.7 impalad version 2.2.0-cdh5.4.7 hive 1.1.0-cdh5.4.7 Impala SQL 方言编写的表创建语句 CREATE EXTERNAL TABLE books( id BIGINT,...

    • Hive
  • set hive-map-sum for hive

    1、增加map数量 首先调整上一步reducer生成文件数据,下面可以把reduce设置为160,即生成160个文件 set mapred.reduce.tasks=160; create table test as select * from temp distribute by rand...

    • Hive
  • hive install

    1、安装mysql-5.5 ** From server2 (1)、rpm包安装mysql 1 2 3 4 5 6 # rpm -qa | grep mysql [查询是否自带mysql] # rpm -e mysql-libs-5.1...

    • Hive
  • HiveServer2-JDBC中文支持

    1 2 3 4 5 6 7 8 export LANG=en_US.UTF-8 export HADOOP_OPTS="$HADOOP_OPTS -Dfile.encoding=UTF-8" [hsu@yndx-b...

    • Hive
  • hive各种调优设置

    Hive的各种调优设置 1、reduce个数 1 2 3 4 5 .hive.exec.reduces.bytes.per.reducer .mapred.reduce.tasks=-1 CDH5: hive (default)>...

    • Hive