hive日志分析

基站掉话率分析

record_time：通话时间
imei：基站编号
cell：手机编号
drop_num：掉话的秒数
duration：通话持续总秒数

目标

找出掉线率最高的基站

掉线率(CDP)=掉话的秒数(drop_num)/通话持续总秒数(duration)

数据

分析

1、在hive中创建表

2、将数据加载到刚在Hive创建的表中

3、查询数据并将hive查询出来的数据导出到指定文件夹下

1、在hive中创建表

hive> create table cdr(record_time timestamp,imei int,cell int,ph_num int,call_num int,drop_num int,duration int,drop_rate int,net_type string,erl int)
row format delimited fields terminated by ',';

2、将数据加载到刚在Hive创建的表中

hive> load data inpath 'hdfs:///usr/matrix/input/cdr_summ_imei_cell_info.csv' into table cdr;
Loading data to table default.cdr

3、查询数据并将hive查询出来的数据导出到指定文件夹下

hive> insert overwrite local directory '/opt/modules/hive-1.2.1/data' 
row format delimited fields terminated by ',' 
select *,drop_num/duration as cdp from cdr order by cdp desc limit 1;

4、查看数据查询结果

[root@node1 ~]# cd /opt/modules/hive-1.2.1 
[root@node1 data]# cat 000000_0