林子雨—大数据技术原理与应用—上机实验三

题目:熟悉常用的HBase操作
实验环境:
       操作系统:ubuntu16.04
       hadoop版本:1.2.1
       JDK版本:1.8
       Eclipse 3.8
       HBase 0.98.24
实验内容:
1. 用Hadoop提供的HBase Shell命令完成下列任务:
       (1) 列出HBase所有的表的相关信息,例如表名;
list命令示范
       (2) 在终端打印出指定的表的所有记录数据;
scan命令示范
       (3) 向已经创建好的表添加和删除指定的列族或列;
林子雨—大数据技术原理与应用—上机实验三_第1张图片
       (4) 清空指定的表的所有记录数据;
truncate命令示范
       (5) 统计表的行数。
count命令示范

2. 现有以下关系型数据库中的表和数据,要求将其转换为适合于HBase存储的表并插入数据:
林子雨—大数据技术原理与应用—上机实验三_第2张图片
林子雨—大数据技术原理与应用—上机实验三_第3张图片
林子雨—大数据技术原理与应用—上机实验三_第4张图片
林子雨—大数据技术原理与应用—上机实验三_第5张图片
林子雨—大数据技术原理与应用—上机实验三_第6张图片
林子雨—大数据技术原理与应用—上机实验三_第7张图片

    同时,请编程完成以下指定功能:
(1)createTable(String tableName, String[] fields)创建表,参数tableName为表的名称,字符串数组fields为存储记录各个域名称的数组。要求当HBase已经存在名为tableName的表的时候,先删除原有的表,然后再创建新的表。
林子雨—大数据技术原理与应用—上机实验三_第8张图片
效果图:
林子雨—大数据技术原理与应用—上机实验三_第9张图片
(2)addRecord(String tableName, String row, String[] fields, String[] values)向表tableName、行row(用S_Name表示)和字符串数组files指定的单元格中添加对应的数据values。其中fields中每个元素如果对应的列族下还有相应的列限定符的话,用“columnFamily:column”表示。例如,同时向“Math”、“Computer Science”、“English”三列添加成绩时,字符串数组fields为{“Score:Math”,”Score;Computer Science”,”Score:English”},数组values存储这三门课的成绩。
林子雨—大数据技术原理与应用—上机实验三_第10张图片
效果图:
效果图
(3)scanColumn(String tableName, String column)浏览表tableName某一列的数据,如果某一行记录中该列数据不存在,则返回null。要求当参数column为某一列族名称时,如果底下有若干个列限定符,则要列出每个列限定符代表的列的数据;当参数column为某一列具体名称(例如“Score:Math”)时,只需要列出该列的数据。
林子雨—大数据技术原理与应用—上机实验三_第11张图片
效果图:
林子雨—大数据技术原理与应用—上机实验三_第12张图片
(4)modifyData(String tableName, String row, String column,String val)修改表tableName,行row(可以用学生姓名S_Name表示),列column指定的单元格的数据。
林子雨—大数据技术原理与应用—上机实验三_第13张图片
效果图:
效果图
(5)deleteRow(String tableName, String row)删除表tableName中row指定的行的记录。
林子雨—大数据技术原理与应用—上机实验三_第14张图片
效果图:
效果图
解决方案(列出遇到的问题和解决办法,列出没有解决的问题):
       1. hbase重启后,访问之前创建的表出错。
       解决方法:需要再次调用create命令创建一张表(可任意),即可恢复之前存在的表数据。
       2.在利用HBase Java API进行编程时,如果HBase版本在0.99以下,书上范例里有很多API都不对,甚至都没有,如Admin、Connection等。
       解决方法:对照功能,找到相应的在0.98版本下的API,如Admin在0.98版本中就对应着HBaseAdmin。

你可能感兴趣的:(大数据)