扫二维码与项目经理沟通
我们在微信上24小时期待你的声音
解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流
安装步骤:
目前创新互联公司已为上千余家的企业提供了网站建设、域名、虚拟主机、网站托管、企业网站设计、资溪网站维护等服务,公司将坚持客户导向、应用为本的策略,正道将秉承"和谐、参与、激情"的文化,与客户和合作伙伴齐心协力一起成长,共同发展。
JAVA实现读取文件
但是使用hive会更简单
hive能够把文件变成表,只保存表结构存在数据库MySQL中,但是数据还是在文件中
文件----->database---->table
----->deby------>mysql(保存表结构信息)
1.先解压完然后把数据库连接驱动放到hive110/lib中
tar zxvf hive-1.1.0-cdh6.14.2.tar.gz
mv hive-1.1.0-cdh6.14.2 /opt/bigdata/hive110
2.配置env文件
cd /opt/bigdata/hive110/conf
cp hive-env.sh.template hive-env.sh
vi hive-env.sh
3.配置site.xml
放到hive10/conf下
javax.jdo.option.ConnectionURL
jdbc:mysql://169.254.211.100:3306/hive?createDatabaseIfNotExist=true
javax.jdo.option.ConnectionDriverName
com.mysql.jdbc.Driver
javax.jdo.option.ConnectionUserName
root
javax.jdo.option.ConnectionPassword
root
4.配置环境变量
vi /etc/proflie
source /etc/profile
5.进入bin中运行hive
schematool -initSchema -dbType mysql
hive
create table userinfos(userid int);
6.使用hive插数据
insert into userinfos values(1);
7.使用hadoop查看数据
hdfs dfs -text /user/hive/warehouse/userinfos/000000_0
我们在微信上24小时期待你的声音
解答本文疑问/技术咨询/运营咨询/技术建议/互联网交流