Json数据解析UDF开发的简单案例流程剖析

要求：
原始JSON数据：
{“movie”:”1193”,”rate”:”5”,”timeStamp”:”978300760”,”uid”:”1”}
{“movie”:”661”,”rate”:”3”,”timeStamp”:”978302109”,”uid”:”1”}
{“movie”:”914”,”rate”:”3”,”timeStamp”:”978301968”,”uid”:”1”}
{“movie”:”3408”,”rate”:”4”,”timeStamp”:”978300275”,”uid”:”1”}
{“movie”:”2355”,”rate”:”5”,”timeStamp”:”978824291”,”uid”:”1”}
{“movie”:”1197”,”rate”:”3”,”timeStamp”:”978302268”,”uid”:”1”}
{“movie”:”1287”,”rate”:”5”,”timeStamp”:”978302039”,”uid”:”1”}

最终得到的结果表格式：
movie rate timestamp uid
1197 3 978302268 1

根据teacher给的答案自己整理了一下思路
操作步骤：
1.
建表 上传数据

进入存数据文件的目录中

vim test01.json 将准备好的数据粘贴进去
cat test01.json查看一下是否成功

创建外部表

加载下数据（先把数据传上去）:


查询Mtest数据是否加载进来：

2.
创建自定义函数，利用自定义函数将json数据解析成一个字符串(以\t分割)
(1)上传 + 加Jar包
首先将jar包放置到虚拟机上(我这里用的是mobaxterm软件 X-SHELL也很好用~)
在hive中执行：

(2)创建临时函数，查询一下

3.使用自定义函数查询数据并且存入一个临时表

4.使用split函数从临时表中解析出字符串的各个字段并存入到最终结果表

至此数据整合成功