安装步骤:
JAVA实现读取文件
但是使用hive会更简单
hive能够把文件变成表,只保存表结构存在数据库mysql中,但是数据还是在文件中
文件----->database---->table
----->deby------>mysql(保存表结构信息)
1.先解压完然后把数据库连接驱动放到hive110/lib中
tar zxvf hive-1.1.0-cdh6.14.2.tar.gz
mv hive-1.1.0-cdh6.14.2 /opt/bigdata/hive110
2.配置env文件
cd /opt/bigdata/hive110/conf
cp hive-env.sh.template hive-env.sh
vi hive-env.sh
3.配置site.xml
放到hive10/conf下
<?xml version="1.0"?>
<?xml-stylesheet type="text/xsl" href="configuration.xsl"?>
<configuration>
<property>
<name>javax.jdo.option.ConnectionURL</name>
<value>jdbc:mysql://169.254.211.100:3306/hive?createDatabaseIfNotExist=true</value>
</property>
<property>
<name>javax.jdo.option.ConnectionDriverName</name>
<value>com.mysql.jdbc.Driver</value>
</property>
<property>
<name>javax.jdo.option.ConnectionUserName</name>
<value>root</value>
</property>
<property>
<name>javax.jdo.option.ConnectionPassword</name>
<value>root</value>
</property>
</configuration>
4.配置环境变量
vi /etc/proflie
source /etc/profile
5.进入bin中运行hive
schematool -initSchema -dbType mysql
hive
create table userinfos(userid int);
6.使用hive插数据
insert into userinfos values(1);
7.使用hadoop查看数据
hdfs dfs -text /user/hive/warehouse/userinfos/000000_0
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:is@yisu.com进行举报,并提供相关证据,一经查实,将立刻删除涉嫌侵权内容。