大数据知识点记录

1、工具：

      大数据知识点记录_江湖行骗老中医的博客-CSDN博客HUE相当于Navicat的一个工具kudu（数据库）------> impalaHbase（数据库）------> HiveAzkaban 调度 ------> jobsqoop : import export -- >mysql我们公司的大数据平台：数据通过魔瞳采集数据，从oracle导入到大数据平台，直接进入kudu里面，然后可以通过impala去查询...https://blog.csdn.net/liming1016/article/details/107105700

HUE相当于Navicat的一个工具

kudu（数据库）------> impala

Hbase（数据库）------> Hive

Azkaban 调度 ------> job

sqoop : import   export -- >mysql

我们公司的大数据平台：数据通过魔瞳采集数据，从oracle导入到大数据平台，直接进入kudu里面，然后可以通过impala去查询
 

2、HiveQL学习笔记（对比MYSQL）

HiveQL学习笔记（对比MYSQL） - 知乎

3、大数据Hue介绍和使用

  小白篇(九)：大数据Hue介绍和使用_belialxing的博客-CSDN博客我的原文地址：https://mp.weixin.qq.com/s?__biz=MzIxMzg5NzI4OQ==&mid=2247484076&idx=1&sn=99a18b1c04aca4b4388a6ca0e2a5b157&chksm=97ae9b8aa0d9129c555cd804138d8745782c53fe25c1fd7bb20715c7d54db95d956befee49d5&token=1189979899&lang=zh_CN#rd.https://blog.csdn.net/belialxing/article/details/109556824

4、大数据分析工程师入门11-Hue&Zeppelin

     大数据分析工程师入门11-Hue&Zeppelin-大数据分析工程师前景日常数据分析工作中，很多时候都在处理临时性的需求，这种需求要求快速响应和很快得出结果，如果每一个需求都需要写在代码文件中，然后编译打包上传再执行，就会非常浪费时间，尤其是写出来的查询语句频繁出错，需要不断改正再重复打包上传的时候。https://www.51cto.com/article/649033.html

5、HUE安装与使用

  HUE安装与使用https://www.shuzhiduo.com/A/l1dyXVMA5e/

6、 七十四、Hue的简介以及安装使用

    七十四、Hue的简介以及安装使用_hue使用教程_象在舞的博客-CSDN博客本文我们来看一个大数据的UI系统——Hue，因为其使用比较简单，我们用一篇文章简单的介绍一下它的安装与使用。关注专栏《破茧成蝶——大数据篇》，查看更多相关的内容~目录一、Hue的简介二、Hue的安装三、Hue的使用一、Hue的简介Hue（Hadoop User Experience，Hadoop用户体验），直白来说就一个开源的Apache Hadoop UI系统，由Cloudera Desktop演化而来，最后Cloudera公司将其贡献给Apache基金会的Hadoop社区，它是基https://blog.csdn.net/gdkyxy2013/article/details/116928302?csdn_share_tail=%7B%22type%22%3A%22blog%22%2C%22rType%22%3A%22article%22%2C%22rId%22%3A%22116928302%22%2C%22source%22%3A%22unlogin%22%7D

7、hue简介及基本原理

     hue的简介及基本原理_文档下载提供hue的简介及基本原理文档免费下载，摘要:hue的简介及基本原理hue定义：HUE=HadoopUserExperience个⼈理解：可视图的webui界⾯，⽅便⼤数据技术之间的CRUD操作。官⽅定义：Hue是⼀个能够与ApacheHadoop交互的Web应⽤程序。⼀个开源的Apahttps://doc.wendoc.com/b7f1ceebf98979873dbbfee4494d5cc5da8fdc8d9.html

8、Hive和hdfs的关系与区别

     Hive和hdfs的关系与区别_hdfs和hive的关系_小蚂蚁爱吃肉的博客-CSDN博客Hive的基本介绍（1）hive 是基于 Hadoop 的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供完整的 sql 查询功能，可以将 sql 语句转换为 MapReduce 任务进行运行。可以通过类 SQL 语句快速实现简单的 MapReduce 统计，不必开发专门的 MapReduce 应用，十分适合数据仓库的统计分析。（2）Hive 是建立在 Hadoop 上的...https://blog.csdn.net/qq_38603049/article/details/100712580

9、Navicat与Dbeaver到底有什么区别?该如何选择?

Navicat与Dbeaver到底有什么区别?该如何选择? - 知乎Navicat和DBeaver都是SQL工具，用于管理和操作数据库。区别在于： 支持的数据库类型：Navicat支持MySQL、MariaDB、Oracle、PostgreSQL、SQLite等主流数据库， 而DBeaver支持更广泛的数据库类型，包括MongoDB、Cass…https://zhuanlan.zhihu.com/p/612067882

10、非关系型数据库都有哪些?
常见的非关系型数据库有:NoSql、Cloudant、MongoDB、redis、HBase。

11、Hbase，Hive和Hdfs的关系以及区别

    Hbase，Hive和Hdfs的关系以及区别_hbase和hdfs的区别_普通网友的博客-CSDN博客Hive是基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张数据库表，并提供简单的sql查询功能，可以将sql语句转换为MapReduce任务进行运行。hive可以用来进行统计查询，HBase可以用来进行实时查询，数据也可以从Hive写到Hbase，设置再从Hbase写回Hive。不过HBase 本身其实可以完全不要考虑 HDFS 的，你完全可以只把 HBase 当作是一个分布式高并发 k-v 存储系统，只不过它底层的文件系统是通过 HDFS 来支持的罢了。https://blog.csdn.net/m0_67402731/article/details/126717526

12、几种主要的非关系型数据库

     几种主要的非关系型数据库-数据库http://www.uml.org.cn/sjjm/202011114.asp

13、DBeaver中如何调整SQL编辑器的字体大小

       DBeaver中如何调整SQL编辑器的字体大小_dbeaver设置字体大小_小蚂蚁爱吃肉的博客-CSDN博客DBeaver中如何调整SQL编辑器的字体大小https://blog.csdn.net/qq_38603049/article/details/125188696

14、Hive学习

    https://blog.csdn.net/qq_38603049/category_9343473.htmlhttps://blog.csdn.net/qq_38603049/category_9343473.html

15、DBeaver安装与使用教程（超详细安装与使用教程），好用免费的数据库管理工具

       15.1、DBeaver安装与使用教程（超详细安装与使用教程），好用免费的数据库管理工具_dbever_编程的一拳超人的博客-CSDN博客好的学习、工作从选对一个对于自己好用的软件开始。DBeaver 一个基于 Java 开发，好用的、免费开源的通用数据库管理和开发工具https://blog.csdn.net/weixin_48053866/article/details/125815498

    15.2、

        dbeaver 使用教程（简版）dbeaver 使用教程（简版）http://www.360doc.com/content/12/0121/07/19913882_1006538282.shtml

16、dbeaver的使用学习

    dbeaver的使用学习_Leo_H7的博客-CSDN博客简介：DBeaver是需要java语言支持的一款数据库软件。（需要大家有JDK的环境）下载地址：https://dbeaver.io/download/快捷操作：1、执行sql语句，选中所写得sql语句，执行Ctrl+ENTER键，即可单条执行语句。多条执行：Alt + x2、如果想要新增一个sql编辑页面，执行**Ctrl+】**符号。3、如果查出数据后，想要拷贝出自己想要得文本文件，也可以使用这个高级复制。在数据界面选中要复制得信息，右键->高级复制->高级复制，然后可以选择https://blog.csdn.net/Leo_H7/article/details/119408607

17、使用DBeaver连接Hive操作

      17.1、如何使用DBeaver连接Hive - 知乎1 DBeaver介绍DBeaver是一个通用的数据库管理工具和 SQL 客户端，支持多种兼容 JDBC 的数据库。DBeaver 提供一个图形界面用来查看数据库结构、执行SQL查询和脚本，浏览和导出数据，处理 BLOB/CLOB 数据，修改数据…https://zhuanlan.zhihu.com/p/565711345

      17.2、DBeaver连接hive（详细图解）_梁辰兴的博客-CSDN博客dbeaver是免费和开源（GPL）为开发人员和数据库管理员通用数据库工具。易用性是该项目的主要目标，是经过精心设计和开发的数据库管理工具。免费、跨平台、基于开源框架和允许各种扩展写作（插件）。它支持任何具有一个JDBC驱动程序数据库。它可以处理任何的外部数据源。https://blog.csdn.net/m0_62617719/article/details/128338137

      17.3、如何使用DBeaver连接hive_孙晨c的博客-CSDN博客命令把这个jar包下载到本地（https://blog.csdn.net/DTFT_/article/details/118728269

18、Hadoop, HDFS, Hive, Hbase, Impala 之间的关系

     Hadoop, HDFS, Hive, Hbase, Impala 之间的关系https://www.cnblogs.com/levi125/p/16415921.html

19、指标与标签的区别？

       19.1、

       指标与标签的区别？_指标和标签_白程序员的自习室的博客-CSDN博客在公司数据建设过程中，经常会使用和提到指标和标签，但是很多小伙伴对于两者的区别确不能讲清楚。实际上标签与指标一样，是理解数据的两种方式，在赋能业务上，两者同样重要。接下来将结合自身的理解，从定义、应用场景、分类等多个方面进行总结。https://blog.csdn.net/b_aihe/article/details/128178603

    

      19.2、    

百度安全验证https://baijiahao.baidu.com/s?id=1737595346810019512&wfr=spider&for=pc

      19.3、

      数据指标 VS 标签体系，到底有啥区别？终于讲清楚了。_分析_身高_特征相当多的企业，没有系统做过标签梳理，有大量的散乱的基础特征标签。标签在建设过程中，需要围绕同一个目标，不断地 做优化，有一个明显的“提纯”的动作。正确的表达是：“我知道了哪些用户潜力高以后，我可以向…https://www.sohu.com/a/564189220_178408

20、CS架构和BS架构的区别（简洁易懂）

     CS架构和BS架构的区别（简洁易懂）_前端念初的博客-CSDN博客CS架构和BS架构的区别(简洁易懂）https://blog.csdn.net/weixin_62765236/article/details/126787812

21、hadoop三大组件有哪些

       hadoop三大组件有哪些_千锋教育Hadoop 的三大组件是指 Hadoop 分布式文件系统(HDFS)、MapReduce 和 Yet Another Resource Negotiator(YARN)。http://www.mobiletrain.org/interview/bigdata/113813.html

22、分布式计算的详细笔记

         分布式计算的详细笔记_从零到1的博客-CSDN博客分布式计算1、定义==分布式计算是一种计算方法，和集中式计算是相对的==。随着计算技术的发展，有些应用需要非常巨大的计算能力才能完成，如果采用集中式计算，需要耗费相当长的时间来完成。分布式计算将该应用分解成许多小的部分，分配给多台计算机进行处理。这样可以节约整体计算时间，大大提高计算效率。本质：如何把一个大型的任务分成若干个小任务，让多个计算机去处理。==分布式...https://blog.csdn.net/lan200012/article/details/105731768?ops_request_misc=%257B%2522request%255Fid%2522%253A%2522168146104516800227438162%2522%252C%2522scm%2522%253A%252220140713.130102334..%2522%257D&request_id=168146104516800227438162&biz_id=0&utm_medium=distribute.pc_search_result.none-task-blog-2~all~top_positive~default-1-105731768-null-null.142^v83^insert_down1,239^v2^insert_chatgpt&utm_term=%E5%88%86%E5%B8%83%E5%BC%8F%E8%AE%A1%E7%AE%97&spm=1018.2226.3001.4187

23、  分布式计算基本概念

          分布式计算基本概念_CherryBambi的博客-CSDN博客1.分布式计算和分布式系统分布式计算就是建立在分布式系统上的计算。分布式系统是一个其组件分布在不同的、联网的计算机上，组件间通过传递消息进行通信和协调，共同完成一个任务的系统。2.使用分布式系统的优点（1）高性能（2）可扩展性（3）高可用性fault tolerance（4）客观原因3.分布式系统面领的挑战（1）网络延迟问题：计算机之间传递消息不稳定。（2）部分失效问题：需要处理部分节点失效问题。（3）时钟问题：两个节点时钟不同步，错误认为发消息的事情反而在接收消息的事件之后https://blog.csdn.net/weixin_54279868/article/details/126865434?ops_request_misc=&request_id=&biz_id=102&utm_term=%E5%88%86%E5%B8%83%E5%BC%8F%E8%AE%A1%E7%AE%97&utm_medium=distribute.pc_search_result.none-task-blog-2~all~sobaiduweb~default-3-126865434.nonecase&spm=1018.2226.3001.4187

24、分布式系统开发实战：分布式计算，分布式计算常用技术

        分布式系统开发实战：分布式计算，分布式计算常用技术_分布式计算技术_Java架构师之路的博客-CSDN博客分布式计算分布式计算就是将一个大的计算任务分解成多个小任务，然后分配给多台计算机分别计算，再上传运算结果后统一合并得出数据结论。本章详细介绍分布式计算。分布式计算概述在过去的20年里，互联网产生了大量的数据，比如，爬虫文档、Web请求日志等，也包括了计算各种类型的派生数据，比如，倒排索引、Web文档的图结构的各种表示、每台主机页面数量的概要、每天被请求数量最多的集合，等等。这些数据每天需要通过大量的计算产生，显然在单机上是无法做到的，必须使用分布式计算。分布式计算在概念上非常容易理解。举例来https://blog.csdn.net/MXC1146/article/details/117848025?ops_request_misc=&request_id=&biz_id=102&utm_term=%E5%88%86%E5%B8%83%E5%BC%8F%E8%AE%A1%E7%AE%97&utm_medium=distribute.pc_search_result.none-task-blog-2~all~sobaiduweb~default-7-117848025.nonecase&spm=1018.2226.3001.4187

25、

26、

27、

28、

29、

30、

31、

32、

33、

34、

35、

36、

37、

38、

39、

40、

41、

42、

43、

44、

45、

46、

47、

48、

49、

50、

51、

52、

53、

54、

55、

56、

57、

58、

59、

60、

61、

62、

63、

64、

65、

66、

67、

68、

69、

70、

71、

72、

73、

74、

75、

76、

77、

78、

79、

================================================（下面是商机）

80、什么是商机

      80.1、产品这门生意：经营的20条底层逻辑 - 脉脉如何经营生意呢？你知道商机在哪里吗？这篇文章从心理学，社会学，市场等角度，为你揭秘如何做一门能赚钱的生意。通过20条经营的底层逻辑，为我们讲述了一门成功的生意诞生之路，需要哪些步骤，哪些东西。一起来看看。 一、什么是生意？占据一个属于自己的位置 认知中没什么，比货架上有什么更重要。 因为，只有认知是空的，我们才有机会去抢占一个位置，生意=位置。所谓商机：客观的存在于消费者的主观认知之中。你要从...https://maimai.cn/article/detail?fid=1762444453&efid=huN6cOd43FjxsQiDmRQbUw

    80.2、

     什么是商机，本质在分不在合_知道日报_百度知道天下大事，分久必合、合久必分，在分不在合。商业同样也是如此，什么是商机？如果用我们自己的话说就是：品类的分化与潜在消费者的认知。https://zhidao.baidu.com/daily/view?id=107764

   80.3、    发现商机需要什么条件(发现商机什么意思)普通人忽视商机，财商高的人扑捉商机,下面一起来看看本站小编柚虫虫给大家精心整理的答案，希望对您有帮助 发现商机需要什么条件(发现商机什么意思)1 商机 ，就是一种商业的机遇https://www.lqgrdj.com/shenghuo/1745569.html

    80.4、

       把握商机的主观调整(全文)要把握商机，就要在理念、意识、思路三个方面作出调整。理念决定对商机的根本理解，把握商机的准备体现在意识上，把握商机是思路创新的成果。 成功的营销在于对商机的把握，把握商机的前提在于对商机的理解。商机是否可以理解为突然降临的赚钱的办法，通俗...https://www.wenmi.com/article/px0oa200rgeq.html

    80.5、

   商机（商业术语）_百度百科商机无论大小，从经济意义上讲一定是能由此产生利润的机会。商机表现为需求的产生与满足的方式上在时间、地点、成本、数量、对象上的不平衡状态。旧的商机消失后，新的商机又会出现。没有商机，就不会有“交易”活动。https://baike.baidu.com/item/%E5%95%86%E6%9C%BA/3584036?fr=aladdin

   80.6、

82、

83、

84、

85、

86、

----------------------------------------------------------------------------------------- 相关业务说明

什么是MTL营销体系
MTL是什么？
MTL（Market to Lead）主要描述上市的产品到客户购买意向。一般而言，产品上市要尽快衔接后续的营销活动，使得客户有购买意向，或是购买线索，为此企业会进行展会、宣传、品牌推广等营销活动。然而有了购买意向和线索，客户也未必会购买。
MTL主要的作用（用20个字总结）：培育市场、牵引研发、生成线索、打造品牌，促进增长。
MTL整个流程由六个模块组成：市场洞察、市场管理、联合创新、销售赋能、激发需求以及营销的质量管理。

-- ---------------------------------------------------------------------------------

KA ，是核心客户的意思
KA(重要客户)“KA(KeyAccount),直译为“关键客户”,中文意为“重点客户”,“重要性的客户”

----------------------------------------------------------------------------
    研发类（IPD）：从需求到上市

    市场类（MTL）：从市场到线索

    营销类（LTO）：从线索到订单

    交付类（OTD）：从订单到交付

    交付类（OTC）：从订单到回款

    实体零售类（STO）：从开店到运营

http://www.china-neikong.com/news/industry/1274

http://www.china-neikong.com/news/industry/1274
---------------------------------------------------------------------------

-----------------------------------------------------------------------
BG（通信领域用语）
BG是Border Gateway的缩写，是一个通信领域用语。
Border Gateway 边界网关,用于PLMN间GPRS骨干网的互连，它应具有基本的安全功能，此外还可以根据运营商之间的漫游协定增加相关功能。（位于自治域之间的路由器）
查看 BGP边界网关协议(Border Gateway Protocol)
Border--边界
Gateway--大门口; 门道; 出入口
Protocol--协议

-------------------------------------------------------------------

3、CRM 概念：了解Leads、Prospect、MQL 和 SQL 的概念

CRM 概念：了解Leads、Prospect、MQL 和 SQL 的概念_mql和sql_abka的博客-CSDN博客什么是MQL？什么是SQL？有什么区别？这些不仅仅是花哨的首字母缩略词，它们代表了潜在客户在成为客户之前所经历的不同阶段。了解它们的含义将使您掌握将潜在客户转变为客户的艺术。您的销售团队是否在抱怨他们从营销部门获得的潜在客户（leads）？您的营销团队是否不明白为什么他们产生的所有潜在客户（leads）都没有成为客户（clients）？您的公司发展得越大，您的营销（marketing）和销售（sales）就越有可能不一致，但他们的最终目标是相同的为公司创造新的收入。...............https://blog.csdn.net/asdcls/article/details/125887752

4、企业将MQL转化为SQL的3个注意点

    企业将MQL转化为SQL的3个注意点MQL和SQL指的是2种处于不同阶段的线索，和MQL相比，SQL更具成单的可能性，所以企业需要集中精力将MQL转化为SQL，并且在转化的过程中，有3个注意点。https://www.marketup.cn/detail/368/3531863436747776.html

5、10个数字营销KPI,让你摆脱传统营销绩效考核，走向数字营销新时代

   10个数字营销KPI,让你摆脱传统营销绩效考核，走向数字营销新时代随着社交媒体和视频网站的普及，一种更及时、相关性强且节约成本的营销方式开始异军突起。与传统的推广营销方式相比，数字营销受到的时间和空间限制更小，覆盖受众更广，触达广度和灵活度都远超传统线下营销。同时， ...https://www.yunliebian.com/yingxiao/article-50188-1.html

6、MQL到SQL转换率的完整指南

    MQL到SQL转换率的完整指南 | 南京·未迟 | Google 出海体验中心https://www.advich.com/mdszhldwzz/

7、又到年终复盘时，你的销售KPI完成了吗？

    又到年终复盘时，你的销售KPI完成了吗？_客户_指标_公司作为B2B企业的市场或销售管理者，提高销售效率，达成销售KPI的路径有很多，但如何找到更高效、更高投产比的工具和方法来推动企业业绩增长，才是真正的挑战所在。以目前热门的袤博商机情报管理平台为例，这是一款大…http://news.sohu.com/a/627317370_99975453

8、知客CRM：每个B2B公司都应该关心的销售KPI

    知客CRM：每个B2B公司都应该关心的销售KPI - 知乎与面向消费者的销售模式（B2C）完全不同，在B2B销售模式中，销售成功率通常要低得多，完成交易是一个更复杂的过程。这就是B2B销售团队面临的独特的挑战，这也是为什么要定义和跟踪B2B公司的销售KPI，因为这对提高…https://zhuanlan.zhihu.com/p/81743982

9、2023年要跟踪的11个关键销售管理指标

     2023年要跟踪的11个关键销售管理指标 - 知乎这些指标将帮助您密切关注销售业绩并快速识别出问题。如果你是销售负责人，平日里可能会被各种电话、培训和客户沟通会议给淹没了，导致你没有充分的时间准备在每周销售会议上介绍销售管理指标健康状况。甚至有的时…https://zhuanlan.zhihu.com/p/596555178

10、《SDR团队工作流程指南》发布

     《SDR团队工作流程指南》发布_客户_公司_Leads-MQL-SQL-OPP在将线索转出给相关销售之前，SDR通过电话或电子邮件与各类潜在用户进行交谈，判断对方的需求公司产品是否可以满足，或挖掘对方的需求，并评估不同营销渠道的线索质量，筛选出高质量的线索转给销售。 SDR以前…https://www.sohu.com/a/535433988_99924814

-- =========================================================

11、解密华为业务管理模式（三）—流程化、平台化的销售管理体系LTC

       解密华为业务管理模式（三）—流程化、平台化的销售管理体系LTC_男哥说管理-商业新知如何盈利，如何稳定盈利，如何通过流程来稳定盈利，从而摆脱人治，又不乏面对市场和客户的灵活，这是我们要向华为学习的底层逻辑https://www.shangyexinzhi.com/article/181732.html

12、华为销售体系 | 销售管理：LTC流程体系详解

       华为销售体系 | 销售管理：LTC流程体系详解 | 人人都是产品经理LTC 是华为的三大主流程之一，从线索发现开始，直至收回现金，从而实现端到端的拉通。 三大主流程分别是： 其他流程可以参考之前文章： 华为IPD流程 华为ITR流程 继续今天的内容，在不同的流程环节卷入不同的角色，并且和其他流程集成协作。 将质量、运营、内控、https://www.woshipm.com/operate/5695738.html

13、