07_大数据生态

Hadoop大数据数数仓之“买菜做饭”

能不能用【买菜做饭】的流程将Hadoop大数据生态的技术体系串联起来？笔者笃信：不管是学习抽象的商业逻辑，还是硬核的计算机技术，都需要将知识转换成“工作流程”，这样所学才能落地，否则都是瞎忙。"
猫有九条命*·2020-12-11 17:58

Go 大数据生态迎来重要产品 CDS

项目地址：https://github.com/tal-tech/cdsClickHouse是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。它有着优异的性能，可以快速部署和运行。不过要想使用ClickHouse搭建起数仓用于数据分析，一个重要的问题就是数据如何进入ClickHouse？我们希望数据源的变化能够自动实时地被同步到ClickHouse，而且支持方便的动态的添加新的数据源
kevinwan·2020-12-10 14:32

融合7大领域！Apache Flink 在开源生态下的应用实践

大数据从诞生到蓬勃发展已有十余年之久，在这个过程中，大数据生态的计算引擎、存储、调度、容器、分析等子系统也都有了长足的发展。
Ververica·2020-12-06 22:00

006_初入职场_07_王睿刚_艰难返乡路

到了沧州以后，王睿刚和王禄斌两个人彻底身无分文了，真的是叫天天不应，叫地地不灵啊，他们唯一的念头就是回家，但当务之急要解决的是填饱肚子的问题。别看平时王睿刚邋里邋遢的，可他对吃的东西还是有要求的，这从他小时候吃饭的习惯就略知一二了。但现在这个时候，他根本就顾不上自己的那些习惯了。饿的实在不行了，两个人开始在车站捡别人吃剩下来的饭菜，不管怎么样，能填饱肚子才是大事儿。不管怎么样，现在肚子的问题算是暂
蜗牛黄·2020-12-03 09:22

Go 大数据生态迎来重要产品 CDS

项目地址：https://github.com/tal-tech/cdsClickHouse是一个用于联机分析(OLAP)的列式数据库管理系统(DBMS)。它有着优异的性能，可以快速部署和运行。不过要想使用ClickHouse搭建起数仓用于数据分析，一个重要的问题就是数据如何进入ClickHouse？我们希望数据源的变化能够自动实时地被同步到ClickHouse，而且支持方便的动态的添加新的数据源
kevinwan·2020-11-27 12:41

hadoop基础整理

（结构化+非结构化）value低价值密度二、从hadoop框架讨论大数据生态Hadoophadoop的初衷
qingbird·2020-11-13 11:41

大数据介绍和集群安装--hadoop

（BigData）3、传统数据与大数据的对比4、大数据的特点5、大数据生态系统6、大数据技术为什么快？
bigdatahyy·2020-10-07 21:12

Java线程_07_线程池

关键词吞吐量、资源利用率、大量同类型的任务、线程池、工作线程、任务队列应用场景最佳资源利用率程序吞哇量任务明确但数量多thread创建和管理的成本合理构建程序结构，封装对同一类型事物的处理这是有风险的资源都被池给占用了工作线程并发错误工作线程异常产生泄漏工作线程时限被大量的请求压垮主动权在你，你会考虑？考虑和避免任务间的并发问题考虑工作线程加上时限处理逻辑考虑合理的线程池大小考虑合理的队列大小考虑
一步一个脚印·2020-09-17 10:21

Java多线程07_线程通信之管程法与信号灯法

Java多线程07_线程通信之管程法与信号灯法线程通信的应用场景是消费者/生产者问题：解决线程通信的方法：wait()表示线程一直等待，直到接到通知（会释放锁）wait(longtimeout)指定线程等待的毫秒数
BLUcoding·2020-09-17 09:49

从分布式管理到多租户实现，企业级大数据系统如何利用开源生态构建？

从中我们可以看到一些趋势，在大数据生态发展的过程中，大数据系统的管理系统，大数据系统的安全，易用性，机器学习不断的补充到生态系统中来并不断完善。早期是Google一家独有。
DemonHunter211·2020-09-16 23:37

大数据：产业链条将更为完备

形势判断(一)大数据生态
fadsf15·2020-09-16 07:10

⑪HTML+CSS 页面设计练习

练习01_图片的列表02_京东左侧导航条03_网易新闻的右侧列表※04_w3导航条※05_京东的轮播图※06_京东顶部导航条※07_背景重复08_按钮练习09_雪碧图※10_电影卡片※11_米兔的动画※
只爭朝夕不負韶華·2020-09-15 14:49

hadoop2.10.0-hive2.3.7-hbase2.2.4环境搭建

大数据生态对每个组成的技术版本有一定要求，如果不是适配版本，则很可能会出现各种问题。
迅铭科技·2020-09-15 06:01

构建企业大数据生态的关键在于 , 打通内部数据!

一个企业要想保持长远的发展，在市场中成为一个强有力的生命个体，必然要注重企业组织之间的协调、合作关系，与环境协同进化，也就是所谓的企业生态系统。而企业信息化或数据化作为管理的重要支撑，是这生态系统中的关键一环。《2015中国大数据应用前沿调研报告》指出，在对于“贵公司认为打造生态系统的重要性在何处”调查时，接近一半的受访企业选择了“打通企业内部部门数据，更好的服务业务增长”。对于“贵公司为全面实现
Leo.yuan·2020-09-15 03:27

[转]20分钟看懂大数据分布式计算

该理论模型并不是什么新理念，早在2004年就被Google发布，经过十多年的发展，俨然已经成为了当前大数据生态的基石，可谓大数据技术之道，在于MapRe
landv·2020-09-15 02:51

spark的四大核心组件

相对于第一代的大数据生态系统Hadoop中的MapReduce，Spark无论是在性能还是在方案的统一性方面，都有着极大的优势。Spark框架包含了多个紧密集成的组件，如图4所示。
Root-Brain·2020-09-14 02:12

阿里巴巴集团副总裁贾扬清：开源大数据生态前瞻

2019阿里云峰会·上海开发者大会于7月24日盛大开幕，本次峰会与未来世界的开发者们分享开源大数据、IT基础设施云化、数据库、云原生、物联网等领域的技术干货，共同探讨前沿科技趋势。本文整理自开源大数据专场中阿里巴巴集团副总裁，阿里巴巴计算平台事业部总裁贾扬清先生的精彩演讲，将为大家讲述开源大数据与人工智能生态前瞻，分享阿里云对开源的态度，以及对大数据和人工智能的未来规划。专家简介：贾扬清，阿里巴巴
chikuai9995·2020-09-14 02:56

链表-07_链式队列

链表-07_链式队列一、说明二、代码main.cppLinkedQueue.h一、说明二、代码main.cpp#include#include"LinkedQueue.h"usingnamespacestd
爱吃芒果的薯条·2020-09-13 18:41

大数据介绍及集群安装

大数据生态系统以及技术组件介绍大数据技术为什么快？什么是分布式存储？分布式计算？
小埋璐璐·2020-09-13 18:09

PySpark SQL——SQL和pd.DataFrame的结合体

惯例开局一张图01PySparkSQL简介前文提到，Spark是大数据生态圈中的一
Python数据之道·2020-09-13 08:32

JMETER入门_07_后置处理器之：json提取器（参数提取传递，将上一个请求的响应结果作为下一个请求的参数）

JMETER入门系列：JMETER入门_01_环境配置JMETER入门_02_基础知识介绍JMETER入门_03_jmeter请求实例JMETER入门_04_jmeter压力测试实例JMETER入门_05_jmeter参数管理（http请求默认值、用户定义的变量）JMETER入门_05_jmeter参数管理（函数助手、CSV数据文件）JMETER入门_06_jmeter集合点———————————
wjok2009·2020-09-13 03:34

大数据小白系列——HDFS(1)

这里是大数据小白系列，介绍大数据生态系统中的主要成员，理解其原理，明白其用途，万一有用呢对不对？大数据是什么？
kissknife·2020-09-12 19:31

Flink Forward Asia 2019 PPT 下载

FlinkForwardAsia2019在北京召开的，有主会场和几个分会场（企业实践、ApacheFlink核心技术、开源大数据生态、实时数仓、人工智能），内容涉及很多，可以查看下面的PPT。
zhisheng_blog·2020-09-12 07:00

如何系统的学习大数据框架 hadoop 和spark？

hadoop和Spark是两种不同的大数据生态系统，Hadoop框架比较侧重离线大批量计算，而spark框架则侧重于内存和实时计算。
大数据开发交流·2020-09-11 16:31

与东华大数据达成战略合作，共建智能大数据生态圈

双方将充分发挥资源互补优势，整合资源，建立大数据综合运营平台，共同打造智能大数据生态圈，共拓大数据服务市场。此次双方签约，旨在围绕东华大数据核心战略目标
斯图飞腾Stratifyd·2020-09-11 13:52

银行大数据新玩法，构建“一湖两库”金融数据湖

大数据技术经过近几年的快速发展，在企业数据中心的基础设施上已不鲜见，尤其是金融行业，大数据技术应用一直走在其它行业前面，它们在以数据湖、融合数仓、湖内数仓（DataLakeHouse）等一些典型的技术场景中，逐步将大数据生态技术应用到金融企业的风险控制
华为云·2020-09-11 12:38

PySpark——开启大数据分析师之路

实际上"名不副实"这件事在大数据生态圈各个组件中是很常见的，例如Hive（蜂巢），从名字中很难理解它为什么会是一个数仓，难道仅仅是因为
简说Python·2020-09-07 08:00

Hadoop大数据生态系统测试环境构建——基于CentOS7.8部署Hadoop3.1.4集群

1、准备三台测试机器并配置好网络和免密登录，配置4G双核500G，系统CentOSLinuxrelease7.8.2003(Core)（如果觉得麻烦可以在虚拟机上搭建）ip和hostname分别是：192.168.236.128Master.Hadoop192.168.236.129Slave1.Hadoop192.168.236.130Slave2.Hadoop我们可以先简单试下有没有问题[ro
codenow.fun·2020-09-04 12:53

Apache Flink 进阶（五）：数据类型和序列化

第一部分:大家都知道现在大数据生态非常火，大多数技术组件都是运行在JVM上的，Flink也是运行在JVM上，基于JVM的数据分析引擎都需要将大量的数据存
bigdata张凯翔·2020-08-28 22:52

SequoiaDB巨杉数据库成为唯一入选 “硅谷2016 大数据地形图”中国厂商, 企业级市场超越MongoDB等海外产品...

SequoiaDB巨杉数据库是进入大数据生态地形图的唯一中国企业。本次入选，证明了SequoiaDB在技术特别是企业级的功能上，性能已经赶上甚至超越了MongoDB等硅谷同类产品，而Sequoi
weixin_33704234·2020-08-26 15:34

大数据学习线路

语言基础篇Java基础篇整个大数据开发技术栈我们从实时性的角度来看，主要包含了离线计算和实时计算两大部分，而整个大数据生态中的框架绝大部分都是用Java开发或者兼容了Java的API调用，那么作为基于JVM
加码帝国·2020-08-25 12:47

07_知乎

简述下一阶段抓取目标对象"大知乎"，本篇幅主要使用页面解析方式抓取大V关注对象用户头像。目标对象知乎轮子哥关注对象大V轮子哥使用包importtime,os#定时抓取importrequestsfrombs4importBeautifulSoupimportdatetime#精确时间实现方式依旧使用页面解析，获取图片URL，下载至本地保存#异常捕获try:html=download_page(DO
_过桥·2020-08-24 18:10

【转】【亲测】scala +maven+java+ intellij idea 环境搭建及编译、打包 项目并存java与scala

以前自己有道云的一篇笔记，今日拿出来又看了一遍，补发出来原文地址：http://www.cnblogs.com/yjmyzz/p/4694219.html大数据生态圈中风头正旺的Spark项目完全是采用
曹赫洋·2020-08-24 02:41

一套很专业的监控方案：HDFS监控落地背后的思考

在大数据生态圈中，HDFS是最重要的底层分布式文件系统，它的稳定性关乎整个生态系统的健康。本文介绍了HDFS相关的重要监控指标，分享指标背后的思考。一、HDF
Summer_1981·2020-08-23 20:27

尚硅谷2020最新版SpringCloud(H版&alibaba)框架开发教程全套完整版从入门到精通

01_前言闲聊和课程说明02_零基础微服务架构理论入门03_第二季Boot和Cloud版本选型04_Cloud组件停更说明05_父工程Project空间新建06_父工程pom文件07_复习DependencyManagement
qq_27327261·2020-08-23 18:44

JPA自定义原生SQL语句的查询结果如何转化为对象，三种方法

写久了PHP项目，忽然想拾一拾JAVA项目，因为JAVA的消息队列、日志、分布式方案比较多，可以自己实现的功能比较多，具有比较高的性能，稳定性好，而且考虑到JAVA的开源中间件比较丰富，大数据生态多是JAVA
tim5wang·2020-08-23 11:59

大数据基础知识问答----spark篇，大数据生态圈

Spark相关知识点1.Spark基础知识1.Spark是什么？UCBerkeleyAMPlab所开源的类HadoopMapReduce的通用的并行计算框架dfsSpark基于mapreduce算法实现的分布式计算，拥有HadoopMapReduce所具有的优点；但不同于MapReduce的是Job中间输出和结果可以保存在内存中，从而不再需要读写HDFS，因此Spark能更好地适用于数据挖掘与机器
weixin_33898876·2020-08-23 00:08

HBaseConAsia 2019盛会来袭

作为Apache基金会旗下HBase社区的顶级用户峰会，届时将会有超20位来自亚洲一线互联网和大数据生态相关企业的技术专家和社区领袖亮相峰会，带来HBase及大数据技术生态的最新洞察和行业实践。
weixin_30276935·2020-08-22 19:06

分布式存储引擎 Alluxio 入门指南

在大数据生态系统中，Alluxio位于数据驱动框架或
大数据技术架构·2020-08-22 18:13

HBase最佳实践-用好你的操作系统

终于又切回HBase模式了，之前一段时间因为工作的原因了解接触了一段时间大数据生态的很多其他组件（诸如Parquet、Carbondata、Hive、SparkSQL、TPC-DS/TPC-H等），虽然只是走马观花
dianzhouyu2189·2020-08-22 16:22

Knative 实战：基于阿里云 Kafka 实现消息推送

消息队列forApacheKafka广泛用于日志收集、监控数据聚合、流式数据处理、在线和离线分析等大数据领域，已成为大数据生态中不可或缺的部分。另外Knative中提供了Kafka
阿里云云栖号·2020-08-22 13:18

大数据生态之zookeeper（集群搭建）

注意：zookeeper是Java编写的，所有在安装zookeeper时，必须安装jdk。1.集群规划（这里以三台服务器为例）集群主机服务端口hadoop01zookeeper2181hadoop02zookeeper2181hadoop03zookeeper21812.下载安装包网址：下载地址：http://mirrors.hust.edu.cn/apache版本：ZooKeeper-3.4.7
weixin_33910460·2020-08-21 22:41

小程序+新零售,开启行业新时代

作为阿里的唯一对手，腾讯重磅推出小程序，也正在建立起以微信账户体系为中心的完整大数据生态，小程序对公众号以及企业的赋能，更是打通了线上线下以及支付的整个零售通路，构建出
CSWZLM·2020-08-21 22:24

ModuleNotFoundError: No module named 'pandas' 解决方案

解决方法一：安装pandas包Files→Settings→Project:07_语法进阶（注：当前项目名）→ProjectInterpreter→右侧列表栏，点击“+”符号→搜索Pandas，安装并应用上述在安装过程中可能出现
yihuanyihuan·2020-08-21 07:31

Zookeeper数据查看工具ZooInspector简介

一、背景Zookeeper作为常用的集群协调者组件被广泛应用，尤其是在大数据生态圈中；Zookeeper集群存储各个节点信息，包括：Hadoop、Hbase、Storm、Kafka等等；二、查询ZK数据的方式那如何查看
天空win·2020-08-20 16:58

第一课 Zookeeper数据查看工具ZooInspector简介

一、背景Zookeeper作为常用的集群协调者组件被广泛应用，尤其是在大数据生态圈中；Zookeeper集群存储各个节点信息，包括：Hadoop、Hbase、Storm、Kafka等等；二、查询ZK数据的方式那如何查看
Arroganter·2020-08-20 05:12

ARKit教程07_第五章：表面检测

前言对ARKit感兴趣的同学，可以订阅ARKit教程专题源代码地址在这里正文在本章中，我们将学习如何检测真实世界的曲面以及如何正确管理这些曲面的更新。还将学习如何创建一个焦点光标，通过光线投射将其置于检测到的曲面之上。可以在Chapter04这个项目上继续开发。你可以拷贝一份代码，也可以新建一个项目，把原来的实现逻辑再写一遍。这一张我们需要一些扩展代码，这些代码：GameUtils：包含基本转换函
张芳涛·2020-08-20 04:37

07_班级静态网页设计(小钱版)[Web开发][2012-11-20]

班级静态网站设计1.概述本次静态网站设计类型为班级网站，题目为“2010级计算机科学与技术1班”，其整体设计以绿色为主调颜色，更以蓝天、白云、树叶以衬托出“和谐”与“宁静”的主题，再以翻开的书本样式作为背景图，构造出10计1班在一个幽静的环境中翻阅着这本回忆录的意境。另外，此网站导航栏设“主页”、“动态”、“风采”、“学习”、“交流”、“资源”、“联系”共7项，在构造意境的同时不忘其实用性。静态网
neicole·2020-08-20 01:44

零基础大数据入门3--大数据生态系统及其各组件简介

什么是大数据生态系统WhatdoesHadoopEcosystemmean?
alexlee666·2020-08-19 17:34

07_加载手写数字

文章目录加载远程或者本地图片集显示第10张样本图片博文配套视频课程：24小时实现从零到AI人工智能加载远程或者本地图片集影响机器学习与深度学习正确率除了前面所说的特征工程之外，最重要的就是高质量的训练数据了，深度学习的样本图必须要保证所有的图片尺寸相同，且已经给图片进行了分类，这其实需要很大的工作量，好在TensorFlow框架中提供了各种训练集图片给我们使用。fromtensorflow.exa
lsqzedu·2020-08-19 10:18
上一页 5 6 7 8 9 10 11 12 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他