hive表,hive视图,spark处理数据入mysql,shell获取url数据下载json,Spark sql处理json,shell脚本执行kylin,azkaban任务调度
1Spark获取json数据,并将json数据存hive库hive表建立Demo--如果存在hive表,直接删除这个hive表。droptableifEXISTStb_trade_info;--创建hive表(第一次全量,后续增量)CREATETABLEIFNOTEXISTStb_trade_info(salesmanIdVARCHAR(40)comment'发展业务员Id',salesmanNa