Impala 优化

1． 对于档案表，不要做分区，对轨迹数据表，推荐一个分区数据需要大于1GB，一搬情况下按日期的年或者月来做分区，以方便管理。

2． 碰撞比对不需要字段，不要创建到impala表中，比如常住人口表碰撞比对只要10列，但源表有50更，只要创建10列表就行。

3． 数据导入或者更新后，执行compute stats table_name获取最新统计信息。

4． 碰撞的时候，检查集群所有机器，用dstat命令检查paging项是否有数据，如果数据比较大，说明内存不足，要么物理增加内存，要么修改impala使用内存配置文件，限制最大内存使用。修改方法

打开/etc/default/impala,在IMPALA_SERVER_ARGS参数最后减少内存限制参数，如限制最大内存使用为50%，则参数为 –mem_limit=50%