入门客AI创业平台(我带你入门,你带我飞行)
博客笔记
20
2017-02
mysql 黑窗口连接数据库以及常用数据类型 2017-02-20
//tee d:1.txt 可将操作保存在d盘的1.txt中 开始键+R打开运行输入cmd进入黑窗口 1.基本操作 1.连接 本地连接: mysql -u root -p回车 密码 远程连接

			
				总结:Hive性能优化上的一些总结
总结:Hive性能优化上的一些总结 2017-07-29
注意,本文百分之九十来源于此文:Hive性能优化,很感谢作者的细心整理,其中有些部分我做了补充和追加,要是有什么写的不对的地方,请留言赐教,谢谢
14
2015-05
[Hive]Hive调优:让任务并行执行 2015-05-14
业务背景 extract_trfc_page_kpi的hive sql如下: set mapred.job.queue.name=pms; set hive.exec.reducers.max=8; set mapred.reduce.tasks=8; set mapred.job.name=extract_trfc_page_kpi; insert overwrite tab
10
2015-06
MapReduce任务Shuffle Error错误 2015-06-10
1、错误描述 在运行MapReduce任务的时候,出现如下错误: Error: org.apache.hadoop.mapreduce.task.reduce.Shuffle$ShuffleError: error in shuffle in fetcher#1         at org.ap

			
				在windows下黑窗口中操作数据库
在windows下黑窗口中操作数据库 2017-08-12
在windows下黑窗口中操作数据库 配置环境变量 1.找到计算机图标,右键,点击属性,会看到如下效果 2.点击高级系统设置,看到如下效果后,点击环境变量
16
2016-08
mysql黑窗口创建数据库 2016-08-16
创建数据库 // 如果要创建默认gbk字符集的数据库可以用下面的sql: create database msg DEFAULT CHARACTER SET gbk COLLATE gbk_chinese_ci; // 如下脚本创建数据库
15
2016-12
Hive一些参数设置 2016-12-15
在使用union all的时候,系统资源足够的情况下,为了加快hive处理速度,可以设置如下参数实现并发执行 set mapred.job.priority=VERY_HIGH; set hive.exec.parallel
24
2017-09
【Spark系列8】Spark Shuffle FetchFailedException报错解决方案 2017-09-24
前半部分来源:http://blog.csdn.net/lsshlsw/article/details/51213610 后半部分是我的优化方案供大家参考。 +++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++++
04
2015-10
Broken pipe."解决 2015-10-04
在利用librdkafka同kafka broker通信过程中,当kafka broker意外退出时(如kill -9),librdkafka接口的sendmsg接口报出了“Program received signal SIGPIPE, Broken pipe.”

			
				Hive性能调优
Hive性能调优 2017-07-01
软件环境:Hive1.2.1 /Hadoop2.6.4 ;直接使用Hive Cli模式运行;1. 设置执行引擎set hive.execution.engine=mr; set hive.execution.engine=spark;如果设置执行引擎为mr,那