大数据学习指北

大数据学习路线

一、大数据处理流程上图是一个简化的大数据处理流程图，大数据处理的主要流程包括数据收集、数据存储、数据处理、数据应用等主要环节。下面我们逐一对各个环节所需要的技术栈进行讲解：1.1数据收集大数据处理的第一步是数据的收集。现在的中大型项目通常采用微服务架构进行分布式部署，所以数据的采集需要在多台服务器上进行，且采集过程不能影响正常业务的开展。基于这种需求，就衍生了多种日志收集工具，如Flume、Log
黑白影·2020-08-20 22:08

Python opencv contrib版本安装指北

写在前面之前搞树莓派，opencv的contrib版本死活装不上，最后用C++版本四线程编译了一天,浪费生命的玩意儿我明明记得之前，pipinstallopencv-contrib是可以安装的......，年级大了，老了最近终于找到了一篇推文,原来是pipinstallopencv-contrib-python，呵呵，什么时候改的？？以下摘自这位大佬的博客:大佬原话OpenCVContrib是Op
王尼玛·2020-08-20 21:35

Python opencv contrib版本安装指北

写在前面之前搞树莓派，opencv的contrib版本死活装不上，最后用C++版本四线程编译了一天,浪费生命的玩意儿我明明记得之前，pipinstallopencv-contrib是可以安装的......，年级大了，老了最近终于找到了一篇推文,原来是pipinstallopencv-contrib-python，呵呵，什么时候改的？？以下摘自这位大佬的博客:大佬原话OpenCVContrib是Op
王尼玛·2020-08-20 21:35

Apache Pulsar指北

PulsarOverviewPulsar是一个用于服务器到服务器的消息系统，具有多租户、高性能等优势。Pulsar最初由Yahoo开发，目前由Apache软件基金会管理。关键特性跨地域复制（geo-replication），单个实例原生支持多个集群（跨集群复制）极低的发布延迟和端到端延迟可无缝扩展到超过一百万个topic简单的客户端API，支持Java、Go、Python和C++支持多种topic
wzt_gjt·2020-08-20 20:07

树莓派入门指北 | 树莓派小无相系列

树莓派是什么树莓派由注册于英国的慈善组织“RaspberryPi基金会”开发，Eben·Upton/埃·厄普顿为项目带头人。2012年3月，英国剑桥大学埃本·阿普顿（EbenEpton）正式发售世界上最小的台式机，又称卡片式电脑，外形只有信用卡大小，却具有电脑的所有基本功能，这就是RaspberryPi电脑板，中文译名"树莓派"。这一基金会以提升学校计算机科学及相关学科的教育，让计算机变得有趣为宗
涂涂涂·2020-08-20 20:53

树莓派入门指北 | 树莓派小无相系列

树莓派是什么树莓派由注册于英国的慈善组织“RaspberryPi基金会”开发，Eben·Upton/埃·厄普顿为项目带头人。2012年3月，英国剑桥大学埃本·阿普顿（EbenEpton）正式发售世界上最小的台式机，又称卡片式电脑，外形只有信用卡大小，却具有电脑的所有基本功能，这就是RaspberryPi电脑板，中文译名"树莓派"。这一基金会以提升学校计算机科学及相关学科的教育，让计算机变得有趣为宗
涂涂涂·2020-08-20 20:53

消息中间件指北

什么是消息中间件名词概念消息（Message）：计算机之间传送的信息统称队列（Queue）：一种先进先出的数据结构消息队列（MessageQueue）：存放消息的容器中间件：一种软件或服务程序；具体业务和底层逻辑之间的桥梁消息队列中间件（简称消息中间件）：分布式系统中处理消息的桥梁，类似于邮局为什么要使用消息中间件？用三个应用场景说明，解耦、异步、削峰解耦传统模式中，系统A的代码直接调用系统BCD
wzt_gjt·2020-08-20 20:35

地图小部件—ArcGIS API for JavaScript

传统纸制地图主要有三个基本部件（要素）：比例尺、指北针、图例，而电子地图有更多的交互性小部件去选择，在ArcGISAPIforJavaScript中，地图小部件类主要放在esri/dijit包中。
肖大昕·2020-08-20 19:23

数仓|Hive性能调优指北

在企业中使用Hive构建离线数仓是一种十分普遍的方案。尽管Hive的使用场景是通过批处理的方式处理大数据，通常对处理时间不敏感。但是在资源有限的情况下，我们需要关注Hive的性能调优，从而方便数据的快速产出。同时，关于Hive的性能调优，也是面试中比较常见的问题，因此掌握Hive性能调优的一些方法，不仅能够在工作中提升效率而且还可以在面试中脱颖而出。本文会通过四个方面介绍Hive性能调优，主要包括
西贝木土·2020-08-20 17:12

数仓|Hive性能调优指北

在企业中使用Hive构建离线数仓是一种十分普遍的方案。尽管Hive的使用场景是通过批处理的方式处理大数据，通常对处理时间不敏感。但是在资源有限的情况下，我们需要关注Hive的性能调优，从而方便数据的快速产出。同时，关于Hive的性能调优，也是面试中比较常见的问题，因此掌握Hive性能调优的一些方法，不仅能够在工作中提升效率而且还可以在面试中脱颖而出。本文会通过四个方面介绍Hive性能调优，主要包括
西贝木土·2020-08-20 17:11

史上最全面最完整的大数据学习第八章 Hbase（三）Java API

Hbase----初识与环境搭建Hbase（二）shell操作Hbase（三）JavaAPIHbase（四）MRonHbase&Hbase的架构Hbase（五）Hbase的读写流程Hbase完结篇Hbase集群搭建以及相关操作四、JavaAPI4.1依赖org.apache.hbasehbase-client1.2.44.2获取客户端privateConnectionconnection;priv
热忱 ㅤ ㅤ·2020-08-20 15:34

2019-01-13

Java垃圾回收权威指北QuicksqlSimpler,Safer,FasterUnifiedSQLAnalyticsEngineforMulti-Datasources马上收藏！
baitu·2020-08-20 13:49

android通知栏快捷设置开发,即添加快捷磁贴指北

android通知栏快捷设置开发,即添加快捷磁贴指北针对通知栏快捷磁贴开发,Google提供了公开服务快捷设置,可以看到开发者可以通过使用此服务完成快捷开发.此服务依赖于androidN(API24)下面进入正文首先创建服务继承
menglongma·2020-08-20 13:08

Android 9.0 适配指南

Android适配系列：Android6.0的动态权限管理Android7.0脱坑指南Android8.0适配指北2.准备工作进入正题，首先将我们项目中的targetSdkVersion改为28。
fearhai·2020-08-20 12:07

一些iOS学习网址、博客、链接

一些iOS学习网址、博客、链接，供自己平时学习使用，其实也是我的浏览器书签啦，在此记录下：适配iPhoneX-美团技术团队https://tech.meituan.com/iPhoneX刘海打理指北.htmlReactiveCocoa
抬头仰望蓝天·2020-08-20 12:33

Java开发者的不能不知道的10个大数据工具和框架

分享之前我还是要推荐下我自己创建的大数据学习资料分享群710219868备注风火这是全国最大的大数据学习交流的地方，2000人聚集，不管你是小白还是大牛，
风火数据·2020-08-20 10:43

大数据学习笔记——算法时间复杂度简单推导

下图是常用的时间复杂度变化曲线O(n)：一个for循环计算publicintcount(intn){intsum=0;for(inti=1;i<=n;i++)sum+=i;returnsum;}O(n2)：就是两个for循环嵌套O(log2n)：intn=100;inti=1;while(i<=n){i*=2;}1∗2x=100⇒x=log21001*2^{x}=100\Rightarrowx=l
新宿一次狼·2020-08-20 09:09

大数据学习笔记——sqoop

导入mysql表数据到HDFS#userdb库表emp导到目标文件夹/sqoopresult212bin/sqoopimport\--connectjdbc:mysql://192.168.65.120:3306/userdb\--usernameroot\--password123456\--delete-target-dir\--target-dir/sqoopresult212\#hdfs路
新宿一次狼·2020-08-20 08:44

大数据学习笔记——sql优化实例

1、where语句优化selectm.cid,u.idfromordermjoincustomeruon(m.cid=u.id)wherem.dt='20200808';可优化为selectm.cid,u.idfrom（select*fromorderwheredt='20200808'）mjoincustomeruon(m.cid=u.id);2、union优化尽量不要使用union（union
新宿一次狼·2020-08-20 08:44

大数据学习笔记——windows环境下配置hadoop

在windows中idea直接运行spark代码出现缺少winutils.exe报错情况，需要配置Hadoop运行环境可能出现如下报错：缺少winutils.exeCouldnotlocateexecutablenull\bin\winutils.exeinthehadoopbinaries缺少hadoop.dllUnabletoloadnative-hadooplibraryforyourpla
新宿一次狼·2020-08-20 08:43

零基础进阶大数据学习笔记——Linux系统终端命令（一）

Linux与windows主要区别Linux严格区分大小写Linux一切皆文件Linux不区分扩展名扩展名是为了让管理员使用目录：/proc:虚拟文件系统，数据保存在内存中，存放当前进程信息。常用命令：suroot普通用户切换root用户su-root表示用户和环境变量一起切换（-和root之间有空格）mkdir创建文件夹touch创建文件date查看当前时间mv移动文件或目录rm删除文件（如果删
BigDate_lover·2020-08-20 07:03

iOS 混编 模块化/组件化 经验指北

为了表示我对『饱醉豚』事件的不满，还是把文章导向我自己的博客吧：博客链接1.开篇本文的初衷，是为了给正在做混编或者模块化的同学们一个建议和参考。因为来饿厂以后做的项目是全公司唯一一个Swift/OC混编的iOS项目，所以一路上踩坑无数，现在把一些踩坑的过程和经验总结起来，供大家参考。相信在浏览本文后，一定会有所收获。我来的时候项目已经开始Swift改造了，慢慢的把项目Swift化，新代码都是Swi
周小鱼Cocoa·2020-08-20 06:33

大数据学习笔记——用dbeaver6.2.4连接hive1.2

给hive装备上一个可视化工具，那是相当给力的。dbeaver连接hive的时候，需要以下步骤：1、启动MySQL数据库，hive的元数据存储在mysql中2、cd/export/servers/apache-hive-1.2.1-bin/bin进入hive安装的bin目录3、nohuphive--servicemetastore-p9083>/dev/null&后台启动metastore4、no
新宿一次狼·2020-08-20 05:40

「斑愿称为最肝」小狮子前端知识食谱 / 生日之际，好运分享 / 秋招和你手摸手入大厂【史上最全指北】 | CSDN技术征文

生日之际，记录自己前端拼搏之路~2020年8月12日，破壳的一天，小狮子の21岁。特意在前一周准备了这篇博文，记录自己前端拼搏之路。此外，也入驻了掘金社区，发现了许多优秀前端博主，他们的文章内容输出都非常精致，我觉得有必要好好学习一下。下文会有一部分自己感想，如果大家想要看干货的话，不妨跳到正文处阅读即可。其余部分闲暇时间阅读一下也是不错的嗷。生日愿望：希望拿到一个满意的offer，成为一个优秀的
一百个Chocolate·2020-08-20 05:35

大数据学习笔记——Python基础（上）

一、Python知识点1.变量&运算符2.jupyternotebook常用快捷键Esc和Enter在命令和编辑模式之间跳转。命令模式下：A键，将在选中单元格上方插入新单元格B键，将在选中单元格下方插入一个单元格按两次D键，可以删除单元格Z键，撤消已删的但与前各Y键，将选中的单元格变成代码单元格F键、弹出’查找和替换’菜单编辑模式下：Shift+Enter:运行本单元，并选中下个单元Ctrl+En
芭蕉鱼的学习笔记·2020-08-20 05:08

大数据学习笔记——大数据学习过程中的重点

目前大数据开发方面，市场上最主要的还是用spark做开发居多。这一点也可以从招聘网站上可以看到。整个大数据体系经过这么多年的发展，相当的繁杂，各种各样的组件，但是其中有一些已经过时了，或者用的少了，其实干脆就不用学了，免得浪费时间。下面介绍自己学习过程中的大数据重点。1.linuxlinux系统肯定是基础了，大数据集群是运行在这上面的。linux在服务器上面一般是用centos系统，还分6.x版本
新宿一次狼·2020-08-20 05:26

萌妹子Python入门指北（一）

原文链接http://ixindoo.com/archives/46《萌妹子Python入门指导》系列，以下简称萌妹子系列是教没有任何编程基础的妹子如何去写python代码，最终实现一些小工具的开发，请Python大牛们直接绕道。如果有想学习python的同学，也可以持续关注本系列。本人在某互联网公司做运维，虽然python学的不是很好，但足以教一个完全不懂python的人，也希望在撰文的过程中提
xindoo·2020-08-20 02:51

萌妹子Python入门指北（四）

这个系列其实是想给非计算机专业的人一个python的入门指导，已经写了3篇，这篇拖了好久了。我开始觉得学编程真的很难，计算机有些方面的知识真是常人所不能理解的，仅仅靠这几篇文章肯定是做不到入门的，如果各位真想学python，还是希望各位能去看更多python的例子，当然我这个系列的文章还是会继续写下去的，我尽自己可能不让本系列变成《python从入门到放弃》。在上一篇文章中我们讲到了选择和循环，这
xindoo·2020-08-20 02:19

Python 简单入门指北（试读版）

本文是我小专栏中Python简单入门指北一文的前半部分，如果你能坚持读完并且觉得有一定收获，建议阅读原文，只需一杯咖啡钱就可以阅读更精彩的部分，也可以订阅小专栏或者加入我的知识星球，价格都是66元永久。
weixin_33835690·2020-08-19 23:59

股市抄底避雷指北

前几日美国浑水公司成功狙击“国货之光”瑞幸咖啡，使其股价暴跌80%。最近其创始人陆正耀又来了一手弃车保帅，划清瑞幸咖啡和神州租车的关系，以保护在港股已经暴跌了50%的神州租车股价。饮鸩止渴，神州租车股价在反弹30%之后又连跌了2天。虽然在出了这样的事情之后，不少“白莲花”怒斥瑞幸咖啡，它在透支中国公司的国际信誉，这样会让更多的中国公司被做空机构盯上等等。正所谓苍蝇不叮无缝的蛋，做空机构和特朗普完全
汽扯扒谈·2020-08-19 20:45

大数据学习？

Java：大家都知道Java的方向有JavaSE、JavaEE、JavaME，学习大数据要学习那个方向呢?只需要学习Java的标准版JavaSE就可以了，像Servlet、JSP、Tomcat、Struct、Spring、Hibernate，Mybites都是JavaEE方向的技术在大数据技术里用到的并不多，只需要了解就可以了，当然Java怎么连接数据库还是要知道的，像JDBC一定要掌握一下，有同
大数据05·2020-08-19 19:52

SQL Server数据库对象信息的获取，大数据学习必须get到的点！2018-08-13

学会大数据是一个要点，那么如何学习会大数据底层才是最好的在开发基于SQLServer数据库的应用程序时，经常会遇到需要知道SQLServer数据库对象的相关信息的情况，例如SQLServer中有哪些数据库，这些数据库中有哪些数据表，每个数据表有哪些字段，这些字段是什么属性等。笔者在开发一个数据库导入程序时就遇到了这些问题，经过一番摸索，较好地解决了上述问题，现在把实现方法介绍给大家。程序界面如下图
飞上天的猫神·2020-08-19 19:35

新娘刚被接走，婚礼摄影师记录下娘家人真实一幕…

来源：央视新闻（cctvnewscenter）综合星视频、腾讯新闻人间指北版权归原作者所有，如有侵权请及时联系近日一名担任婚礼摄影师的网友发布了一段视频记录了婚礼中女方家人送走新娘后家中的画面一幕幕让人泪目新娘的爷爷站在窗前的小凳子上久久不愿离去哪怕楼下已没有孙女的身影新娘父亲强忍着眼中的泪水终于还是忍不住回到房间偷偷抹眼泪新娘母亲发现后走进房间拍着丈夫的肩膀安慰他还帮丈夫擦去眼泪这名网友说
私家车第一广播·2020-08-19 18:51

微信JS-SDK的指北

前言：今年以来基本上就是接手公司的微站项目，从一个传统的PHP网站到使用VUE1.0进行前后端分离重构，对于一个在微信上面运营的网站，少不了要跟微信JS-SDK打交道。下面针对一些值得记录的地方进行一些总结。JS-SDK的用法在微信公众号后台配置安全域名，也就是要使用JS-SDK的域名。在页面的script标签中引入JS-SDK的代码即可，现在还支持使用AMD/CMD标准模块加载方法。使用wx.c
LoneRanger·2020-08-19 17:41

web主题适配方案指北

前置知识在这里了解实现网页主题切换的相关知识。CSS变量要实现主题切换需要了解css自定义属性。当然，本文还提供了其他实现方式，为了不给您接下来的阅读带来阻碍，先了解它。变量的声明声明变量时，变量名前要加上--，例如--example:20px即是一个css声明语句。意思是将20px赋值给--example变量。所以css变量又叫做css自定义属性。在css的任何选择器中都可以声明css变量，通常
GZ^·2020-08-19 12:00

大数据学习笔记（十六）-Hue的安装部署和使用

1.Hue的安装参考文档：http://archive.cloudera.com/cdh5/cdh/5/hue-3.9.0-cdh5.7.0/manual.html①安装Hue的依赖sudoyuminstallantasciidoccyrus-sasl-develcyrus-sasl-gssapigccgcc-c++krb5-devellibtidylibxml2-devellibxslt-dev
狂暴棕熊·2020-08-19 10:51

python 正则指北之我的总结

本文经本人搜索网络加上个人理解整理而成，如有侵权，请告知，会立即删除！正则引擎大体上可分为不同的两类：DFA和NFA，而NFA又基本上可以分为传统型NFA和POSIXNFA。DFADeterministicfiniteautomaton确定型有穷自动机NFANon-deterministicfiniteautomaton非确定型有穷自动机TraditionalNFAPOSIXNFADFA引擎因为不
dianxunma2886·2020-08-19 09:27

大数据学习3-Hadoop伪分布式搭建和使用

伪分布式：就是假的分布式。都在一台pc机器上用虚拟机模拟不同的web服务器来工作而分布式：一.搭建：安装jdk配置环境安装hadoop配置环境变量-------在本地模式中依旧也要做前几步骤---------修改配置文件：①配合core-site.xml配置完可以进行用cat命令查看core-site.xml文件：②配置hdfs-site.xml启动运行集群：第一步.初始化配置文件（也就是格式化）
风吹海洋浪·2020-08-19 08:00

官瓷重楷模，精华四海粹！

狭义的官窑，指北宋和南宋时在京城汴京（汴梁，今开封）和临安（今杭州）由宫廷设窑烧造的一类青瓷，故又有“旧官”和“新官”之分，前者为北宋官窑，后者为南宋官窑。
骨玩·2020-08-19 07:01

Spark这是要一统江湖的节奏

在这里我还是要推荐下我自己建的大数据学习交流qq裙：458345782，裙里都是学大数据开发的，如果你正在学习大数据，小编欢迎你加入，大家都是软件开发党，不定期分享
yoku酱·2020-08-19 07:41

webpack成长指北第7章---webpack的css\less\scss样式打包

webpack成长指北第7章---webpack的css\less\scss样式打包前言案例webpack打包css文件安装loadercss嵌套css图片背景css-loader配置项css打包成单独文件添加浏览器厂商前缀安装
Boale_H·2020-08-19 07:00

webpack成长指北第9章---webpack如何对icon字体进行打包

webpack成长指北第9章---webpack如何对icon字体进行打包前言下载icon图标项目目录项目代码前言在项目中，我们有时候会引入icon字体来实现一些图标的展示，但是之前文章有说过，webpack
Boale_H·2020-08-19 07:29

webpack成长指北第8章---webpack的CSS Modules打包

webpack成长指北第8章---webpack的CSSModules打包何为CSSModules案例CSS模块化打包何为CSSModulesCSSModules，样式的模块化，实际上就是所有的类名都只有局部作用域的
Boale_H·2020-08-19 07:29

webpack成长指北第6章---webpack的图片引入

webpack成长指北第6章---webpack的图片引入案例项目目录代码打包loaderurl-loader安装url-loader配置webpackurl-loader的limit案例我们先尝试一下直接引入图片然后打包项目
Boale_H·2020-08-19 07:28

电子罗盘如何选型

电子罗盘又称作数字罗盘，作为一种重要的导航定向工具,正越来越多的应用于组合导航和指北系统。当前大多数的组合导航系统都使用到电子罗盘。若按照有无倾角补偿，可分为二维罗盘和三维罗盘两种。
莫论阴晴圆缺·2020-08-19 05:16

Shader学习指北

开始：创建一个shader脚本unity自带的shader脚本有四个StandardSurfaceShader（标准表面着色器）：最标准的初始着色器。（一般都用这个）这个Shader模板的脉络很清晰，先是定义一些属性，然后在SubShader中设置渲染模式，层次细节LOD的值，然后开启一个CG编程语言模块，写一些编译指令#pragma，声明一下变量让属性值在CG块中可见，定义输入结构，然后填充一下
shelven丶·2020-08-19 03:23

大数据分析：智能交通发展的引擎

在这里相信有许多想要学习大数据的同学，大家可以+下大数据学习
数据工程师大牛·2020-08-19 01:36

017指北与游移方位惯导系统知识梳理

与其说梳理两种惯导方式，还不如说是一种，因为游移惯导就是为了解决指北惯导跟踪不上地理系而改进的，仅与指北惯导存在一个游移方位角αα的关系。另外在学习中看了好几本不同的书，所以字母表示我都感觉混乱。
参天尽物·2020-08-19 01:25

官窑是由皇家御窑生产的瓷器？

狭义的官窑，指北宋和南宋时在京城汴京（汴梁，今开封）和临安（今杭州）由宫廷设窑烧造的一类青瓷，故又有“旧官”和“新官”之分，前者为北宋官窑，后者为南宋官窑。
骨玩·2020-08-19 00:43

vercel使用指北

首先介绍一下啥是vercel引用官方(https://vercel.com/home)介绍Vercelistheoptimalworkflowforfrontendteams.All-in-one:StaticandJamstackdeployment,ServerlessFunctions,andGlobalCDN.无脑机器翻译一下：Vercel是前端团队的最佳工作流。所有功能:静态和Jamst
吞石鱼·2020-08-18 21:43
上一页 37 38 39 40 41 42 43 44 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他