ITeye博客

qianjiangbing的博客

qianjiangbing · 共 93 篇文章

jmeter的下载、安装、启动

1.http://jmeter.apache.org/download_jmeter.cgi 下载jmeter 2.解压包 3.进入解压目录/bin/ 4.sh jmeter

2017-09-06 13:08 · java · 评论(0)

ImportError: No module named pandas解决方案

A. download first and install miniconda using the following code: bash Miniconda2-latest-MacOSX-x86_64.sh B. create an env for your project using following code: conda create --name trypandas numpy pandas jupyter C. going to your env and try jupyter notebook with pandas using: source activate trypa…

2017-03-16 18:19 · 评论(0)

MAC下安装多版本JDK和切换几种方式

http://blog.csdn.net/liu1075538266/article/details/52487631

2017-03-15 13:32 · macbook · 评论(0)

CentOS系统yum源使用报错:Error: Cannot retrieve repository metadata (repomd.xml) ...

http://www.cnblogs.com/kevingrace/p/6252659.html

2017-02-28 15:10 · Linux · 评论(0)

解决yum命令错误"bash: /usr/bin/yum"问题方法记录

http://www.laozuo.org/7541.html

2017-02-28 14:04 · 评论(0)

sqoop导hive数据到mysql卡死在INFO mapreduce.Job: map 100% reduce 0%

用sqoop将hive里面的数据导出到mysql里去,一种情况是mapreduce 程序卡住,INFO mapreduce.Job: map 100% reduce 0% 另一种情况是:报这个错误:java.sql.SQLException: Incorrect string value: '\xF0\x9F\x90\xBB' for column 经检查发现,hive的数据里面有图片类型的数据,我也是醉了,折腾了一天,主要原因是 MySQL 里UTF8编码最多只能支持3个字节,而Emoji表情字符使用的UTF8编码,很多都是4个字节,有些甚至是6个字节。 解决的方案有两种: 一.使用utf…

2017-02-22 16:53 · hadoop · 评论(0)

Kafka ConsumerOffsetChecker 命令失效问题解决

Kafka ConsumerOffsetChecker 命令失效问题解决

2017-01-17 18:20 · kafka · 评论(0)

在CentOS安装CMake

在CentOS安装CMake

2016-12-09 15:42 · Linux · 评论(0)

hive的窗口函数

http://yugouai.iteye.com/blog/1908121

2016-12-09 11:18 · hive · 评论(0)

linux CentOS安装phantomjs的教程

sudo yum install gcc gcc-c++ make git openssl-devel freetype-devel fontconfig-devel git clone git://github.com/ariya/phantomjs.git cd phantomjs git checkout 1.9 ./build.sh vi /etc/profile 添加路径 export PHANTOMJS_HOME=/root/apps/phantomjs 安装完毕后查看版本测试是否正常安装。 phantomjs --version

2016-11-23 10:12 · Linux · 评论(0)

Connection activation failed: Device not managed by NetworkManager

VM上安装centeos6.5 配置静态IP报错:Connection activation failed: Device not managed by NetworkManager 解决办法: 1 chkconfig NetworkManager off 2 chkconfig network on 3 service NetworkManager stop 4 service network start

2016-11-10 20:47 · Linux · 评论(0)

sqoop将hive里的表导入mysql

sqoop 导出hive数据到mysql 执行命令 bin/sqoop export --connect jdbc:mysql://slaver3:3306/ishangzu --username root --password root --table dw_pv_uv_ip --export-dir /user/hive/warehouse/t_20161019.db/dw_pv_uv_ip/datestr=20161019 --input-fields-terminated-by '\001' 报如下错误: java.sql.SQLException: Access denied fo…

2016-11-09 19:06 · hadoop · 评论(0)

SimpleDateFormat转换时间 12,24时间格式

在使用SimpleDateFormat时格式化时间的 yyyy.MM.dd 为年月日而如果希望格式化时间为12小时制的,则使用hh:mm:ss 如果希望格式化时间为24小时制的,则使用HH:mm:ss Date d = new Date(); SimpleDateFormat ss = new SimpleDateFormat("yyyy-MM-dd hh:mm:ss");//12小时制 System.out.println(ss.format(d)); Date date = new Date(); SimpleDateFormat sdformat = new SimpleDateFor…

2016-11-09 13:09 · java · 评论(0)

整合mongodb和spark的时候遇到Exception in thread "main" java.lang.SecurityException: clas

整合mongodb和spark的时候遇到一个巨大的坑,运行程序时报:Exception in thread "main" java.lang.SecurityException: class "javax.servlet错误!!! 问题本质:maven 导入jar包依赖冲突,既有jsp-api-2.1.jar 又有servlet-api-2.5.jar 解决办法:修改pom文件的依赖,用exclusion把冲突的jar去掉即可 <dependency> <groupId>org.mongodb.mongo-hadoop</groupId> <artifactId>mongo-hadoop-c…

2016-11-01 23:32 · spark · 评论(0)

macbook pro下安装wget命令

macbook pro下安装wget命令 1、 ftp://ftp.gnu.org/gnu/wget/ 下载源码包。 wget-1.9.tar.gz 版本 2、解压:tar -zxvf wget-1.9.tar.gz 3、进入安装目录,执行 ./configure 4、执行 make ,会有一长串的执行操作,这个不用管他 5、执行 make install 可能会报错,没有权限,需要sudo或者直接在Finder中创建目录即可。 6、测试是否安装成功:命令行下输入wget www.baidu.com,然后回车,提示如下 到此,安装完成。

2016-10-27 11:19 · macbook · 评论(0)