数据湖

公司取得数据挖掘成功必须克服的5大挑战

数据湖正在快速衰退。他们无法支持在全新大数据创新中实时市场需求。尽管许多公司仍然认为数据湖是无效且昂贵的，但数据湖是大多数公司有用数据的丰富来源。它应该便于以几种结构形式，模式和文件配置数据。
Jet_1cc5·2020-02-28 05:23

建立一个机器学习和分析的平台

BuildingaPlatformforMachineLearningandAnalytics是用机器学习进行预测分析之前你需要建立一个数据库（数据湖）。
杨袖英·2020-02-23 17:19

使用 Apache Atlas 进行数据治理

采用Hadoop必须考虑数据管理的实际情况，元数据与数据治理成为企业级数据湖的重要部分。
网易云社区·2020-02-20 18:23

没有银弹：数据湖的现实与梦想

数据湖正在成为一种越来越流行的大数据解决方案，而数据湖这个词已经被大数据供应商赋予了太多不同的含义，如果有什么工作是传统数据仓库做不了的，那就把它塞进数据湖，以至于数据湖已经变成了一个定义模糊的概念。
龙咯楼·2020-02-18 06:49

惠州市经信局等领导莅临品高 共同探讨政务云及数据湖发展

为了解云计算与大数据在政府行业中的最新发展及成果，4月13日，惠州市经信局汤俊、林旭东、张世锌副局长及惠州市中小企业局副局长叶育强等莅临品高参观调研，品高软件总经理黄海和副总经理刘忻参加座谈交流。惠州，可以说是全国范围内较早开始电子政务云平台建设的城市之一。作为全国首批20个智慧城市试点城市之一，早在约三年前，就致力于推进智慧政务、智慧公共安全、智慧社区、智慧交通、智慧旅游等城市管理和民生服务建设
品高云·2020-02-16 23:53

什么是数据湖？有什么用？终于有人讲明白了……

导读：数据湖概念的诞生，源自企业面临的一些挑战，如数据应该以何种方式处理和存储。最开始，企业对种类庞杂的应用程序的管理都经历了一个比较自然的演化周期。
DataHunter小数·2020-02-11 14:22

什么是数据湖？有什么用？终于有人讲明白了……

作者|汤姆斯·约翰、潘卡·米斯拉来源|出自《企业数据湖》一书转自|大数据（ID：hzdashuju）导读：数据湖概念的诞生，源自企业面临的一些挑战，如数据应该以何种方式处理和存储。
数智物语·2020-02-11 10:34

数据仓库快速入门教程14数据湖简介

就像在湖中你有多个支流进来一样，数据湖有结构化数据，非结构化数据，机器到机器，实时流动的日志。DataLake使数据民主化，是一种经
python测试开发_AI命理·2020-02-10 04:41

数据湖和数据仓库的区别是什么？

我们都知道，进行数据分析工作的时候会用到很多的工具，比如说数据湖和数据仓库，不过这两者之间的差异和区别，可能会让人困惑。那么大家知道不知道数据湖和数据仓库的区别是什么呢？
CDA数据分析师培训·2020-02-10 01:14

品高云数据湖：全生命周期的数据开放支撑

云计算和大数据技术的全面运用，令数字经济成为新常态，大数据技术及应用需求也随着时代的步伐快速升级迭代。很多企业发现，随着业务规模的不断扩大，如何有效融合不同来源和类型的数据构建企业大数据平台，为生产和经营所用，是亟待解决的主要矛盾；另一方面，如何在打破数据孤岛的同时保护数据主权，实现统一的数据汇聚和共享，是大多数企业正面临的另一个关键问题。与此同时，亚马逊、微软等大厂商凭借灵敏的市场嗅觉，在201
品高云·2020-02-09 10:41

漫谈数据库中的join

Prologuejoin是我们这些整天与数据打交道的人绕不开的一个词，不管是在传统的关系型数据库，还是在大数据领域的数据仓库/数据湖中，join都是常客。
LittleMagic·2020-02-06 16:48

[转帖]什么是数据湖？有什么用？终于有人讲明白了……

什么是数据湖？有什么用？
济南小老虎·2020-01-12 07:00

ApacheHudi常见问题汇总

作为一个组织，Hudi可以帮助你构建高效的数据湖，解决一些最复杂的底层存储管理问题，同时将数据更快地交给数据分析师，工程
ApacheHudi·2020-01-04 19:00

营销数据中台白皮书

「数据中台」最早是由阿里提出，对标国外「DataLake」（数据湖）的概念。该概念提出的背景是因为阿里生态系中淘宝、天猫
数智物语·2019-12-31 06:08

Delta

为什么需要DeltaLakehttps://github.com/delta-io/delta虽然数据湖在数据范围方面迈出了一大步，但是也面临了很多问题，主要概括如下：数据湖的读写是不可靠的。
丹之·2019-12-26 16:59

2020软件开发趋势预测（学习总结）

云计算/云服务、容器技术、软件架构、编程语言、Web开发、APP、深度学习、数据库、数据湖、批处理、流处理、字节码（ByteCode）、无代码（No-code）技术栈要点云服务国外：AWS,Azure(
wx5b3c0a4298f7b·2019-12-26 12:10

首席产品体验官笔记 9

尖端的AI科学家、产品需要划出清晰的领域界限、千万级的数据容量---一个庞大的数据湖、闭环的
王珏雯_Vanessa·2019-12-24 10:39

物联网是解决“小”数据问题的关键

不可否认，物联网为获取实时数据提供了一个经济高效的途径，但大量的数据注入云端数据湖，令人望而生畏，尽管数据在分析时被认为是有价值的。
一粤情·2019-12-15 20:47

如何使用 Delta Lake 轻松构建可靠的大规模数据湖泊

DeltaLake是一个存储层，通过在写入和快照隔离之间提供乐观并发控制实现ACID事务，保证了在写入期间读取的一致性，从而为构建在HDFS和云存储上的数据湖泊带来可靠性保障。
Mekal·2019-11-30 16:38

Delta Lake - 数据湖的数据可靠性

今天笔者将分享一位大神关于DeltaLake的演讲内容。这位是ApacheSpark的committer和PMC成员，也是SparkSQL的最初创建者，目前领导Databricks团队，设计和构建StructuredStreaming和DatabricksDelta，技术涉及分布式系统、大规模结构化存储和查询优化等方面。这位大神就是MichaelArmbrust。DeltaLake回顾前面的文章对
DataFlow范式·2019-11-14 20:04

JindoFS解析 - 云上大数据高性能数据湖存储方案

作者：殳鑫鑫，花名辰石，阿里巴巴计算平台事业部EMR团队技术专家，目前从事大数据存储以及Spark相关方面的工作。JindoFS背景计算存储分离是云计算的一种发展趋势，传统的计算存储相互融合的的架构存在一定的问题，比如在集群扩容的时候存在计算能力和存储能力相互不匹配的问题，用户在某些情况下只需要扩容计算能力或者存储能力，传统的融合架构不能单独的扩充计算或者存储能力，而计算存储分离可以很好的解决这个
大涛学长·2019-11-05 15:05

AWS数据湖十年，云计算老大哥的磨刀之路

▼数据猿开启大型年终主题策划活动▼大数据产业创新服务媒体—聚焦数据·改变商业数据猿官网|www.datayuan.cn今日头条丨一点资讯丨腾讯丨搜狐丨网易丨凤凰丨阿里UC大鱼丨新浪微博丨新浪看点丨百度百家丨博客中国丨趣头条丨腾讯云·云+社区从2006年上线至今，AWS已经走过了十几个年头。亚马逊在一个周围懵懂的时代里，拉开了云计算的大幕。AWS位于Gartner魔力象限云计算的领导者坐标系，和竞争
数据猿·2019-10-29 08:23

从关系型数据库到分布式机器学习，揭秘腾讯大数据十年发展历程

在未来，大数据技术还会往引擎容器化、大数据机器学习、数据湖等方面不断延伸。
腾讯技术资讯·2019-10-23 13:44

Delta Lake - 数据湖的开放标准

最近在Spark+AISummit峰会上，Databricks和Linux基金会共同宣布DeltaLake现在由Linux基金会托管，将成为数据湖的开发标准。
DataFlow范式·2019-10-20 18:53

从关系型数据库到分布式机器学习，揭秘腾讯大数据十年发展历程

在未来，大数据技术还会往引擎容器化、大数据机器学习、数据湖等方面不断延伸。 
腾讯资讯·2019-10-18 18:33

启动Spark时遇到的HDFS user的读写权限问题：ERROR spark.SparkContext: Error initializing SparkContext. org.apache...

之前在为客户做数据湖产品调试Spark程序的时候，遇到过一个报错：ERRORspark.SparkContext:ErrorinitializingSparkContext.org.apache.hadoop.security.AccessControlException
alexlee666·2019-10-17 21:15

辨析BI、数据仓库、数据湖和数据中台内涵及差异点

前言随着大数据技术的不断更新和迭代，数据管理工具得到了飞速的发展，相关概念如雨后春笋一般应运而生，如从最初决策支持系统(DSS)到商业智能(BI)、数据仓库、数据湖、数据中台等，这些概念特别容易混淆，本文对这些名词术语及内涵进行系统的解析
itwriter·2019-10-09 15:00

华为网络人工智能引擎（NAIE）正式商用发布

华为NAIE产品部总经理韩雨发介绍此次商用发布的网络人工智能引擎（NAIE）华为网络人工智能引擎（NAIE），主要基于公有云模式，提供数据治理相关的数据湖服务，以及模型开发相关的
itwriter·2019-09-19 18:00

数据湖的概念以及解决方案

今天这篇文章主要介绍数据湖（datalake）的定义，其次介绍各大云厂商的解决方案以及目前的开源解决方案。定义看下维基百科的定义：数据湖是一个以原始格式(通常是对象块或文件)存储数据的系统或存储库。
渡码·2019-09-09 09:00

《一张图看懂华为云BigData Pro鲲鹏大数据解决方案》

该方案采用基于公有云的存储与计算分离架构，以可无限弹性扩容的鲲鹏算力作为计算资源，以支持原生多协议的OBS对象存储服务为统一的存储数据湖，提供“存算分离、极致弹性、极致高效”的全新公有云大数据解决方案，
华为云·2019-09-03 00:00

【大数据】数据湖正在成为新的数据仓库

原文链接：https://www.infoworld.com/article/3405443/the-data-lake-is-becoming-the-new-data-warehouse.html?upd=1565169084280像AWSLakeFormation和DeltaLake这样的平台指向了一个中央枢纽，用于决策支持和AI驱动的决策自动化数据仓库是否再次相关，或者它们是一个垂死的品种
ChenVast·2019-08-07 17:01

【大数据】数据湖正在成为新的数据仓库

原文链接：https://www.infoworld.com/article/3405443/the-data-lake-is-becoming-the-new-data-warehouse.html?upd=1565169084280像AWSLakeFormation和DeltaLake这样的平台指向了一个中央枢纽，用于决策支持和AI驱动的决策自动化数据仓库是否再次相关，或者它们是一个垂死的品种
ChenVast·2019-08-07 17:01

[长文科普]浅谈数据湖的应用与安全

[长文科普]浅谈数据湖的应用与安全00后ATLASAcademy今天一.什么是数据湖数据湖的定义数据湖是一个集中式存储库，允许以任意规模存储所有结构化和非结构化数据，具有改造和分析数据处理能力。
songroom·2019-07-26 22:46

数据湖正在成为新的数据仓库

原文链接：https://my.oschina.net/u/1464083/blog/3071389像公有云数据湖和DeltaLake这样的平台指出了一个中央数据枢纽的趋势，用来支持决策和AI驱动的自动化决策
chikuai9995·2019-07-09 10:00

数据湖正在成为新的数据仓库

像公有云数据湖和DeltaLake这样的平台指出了一个中央数据枢纽的趋势，用来支持决策和AI驱动的自动化决策。数据仓库是否再次加入这股浪潮呢，或者会逐渐消亡？如果你不清楚这个问题的答案也很正常。
阿里云云栖社区·2019-07-09 00:00

数据治理中几个概念

1.关系型数据库、数据仓库、数据集市2.数据湖、数据沼泽、数据河3.数据云4.数据治理、数据中台第一：关系型数据库是传统业务系统保存数据的地方，他更多倾向属于一个业务系统的数据。
无意创新·2019-06-20 22:28

Python 如何连接并操作 Aws 上 PB 级云数据仓库 Redshift

Python如何连接并操作Aws上PB级云数据仓库Redshift一、简介AmazonRedshift是一个快速、可扩展的数据仓库，可以简单、经济高效地分析数据仓库和数据湖中的所有数据。
Yxh_blogs·2019-06-13 22:00

数据湖-简介

数据湖初识百度百科解释产生的由来数据湖与数据仓库对比数据湖的优点数据湖生命周期数据湖的缺点百度百科解释数据湖或hub的概念最初是由大数据厂商提出的，表面上看，数据都是承载在基于可向外扩展的HDFS廉价存储硬件之上的
我係外星人·2019-06-13 10:55

大牛书单 | 大数据存储方向好书分享

TEG书知道本期特邀腾讯云数仓数据湖产品负责人堵俊平、腾讯云数据库负责人林晓斌、腾讯TEG云架构平台部数据块中心高级工程师王银虎，腾讯TEG计费平台部账户中心专家工程师潘安群为大家带来大数据方向好书推荐
腾讯技术·2019-06-06 15:38

AWS-S3如何通过签名的URL来完成访问控制

客户使用S3作为云原生应用程序的主要存储；作为分析的批量存储库或“数据湖”；作为备份和恢复以及灾难恢复的目标；并将其与无服务器计算配合使用。现在越来越多的客户使用S3作为网站的一个资源存储方案。
Molady·2019-05-29 11:14

S3如何通过签名的URL来完成访问控制

客户使用S3作为云原生应用程序的主要存储；作为分析的批量存储库或“数据湖”；作为备份和恢复以及灾难恢复的目标；并将其与无服务器计算配合使用。现在越来越多的客户使用S3作为网站的一个资源存储方案。
SinnetCloud·2019-05-23 10:25

数据中台产品的一些思路

*引言*企业借助于大数据/数据湖项目，一般同时需要完善对企业数据的梳理：对企业数据资产数据盘点，完善数据治理相关流程。对内便于数据用户使用数据。对外满足部监管对多种数据口径要求。
allenniu·2019-05-12 23:33

2019年IT关注的重点：大数据分析的存储架构

行业媒体对2019年企业数据存储预测的存储技术专家和分析师小组进行了调查，许多人表示，企业IT组织将专注于更好的方法来分析、使用和管理数据湖中的所有信息。
大数据Arry·2019-04-27 20:23

USQL如何帮爱普新媒降低80%成本，提升50%数据分析速度

数据湖分析（USQL）是一种可扩展性强、成本低廉的无服务器S
UCloud_TShare·2019-04-22 17:21

数据湖

数据湖“数据湖”一词最近成为大数据行业的一个重要术语。数据科学家可以利用它来获得有意义的见解，企业可以使用它来重新定义或改变其运作方式。
OnTheRoad_Kang·2019-04-16 14:37

「数据中台」大中型广告主的数字营销标配

「数据中台」最早是由阿里提出，对标国外「DataLake」（数据湖）的概念。
渴睡人生·2019-04-04 16:25

中台，都他妈被你们说糊涂了，文内才是正宗解释，别摸石头过河了，石头早就有了...

摄像头视觉识别人机界面、语音交互人机界面2、逻辑层：面向对象技术/组件技术/SOA服务中间件/微服务中间件技术、人工智能NLP/机器学习3、数据层：SQL数据库/NOSQL数据库、大数据计算平台/数据仓库数据湖
david_lv·2019-03-19 11:26

DLA实现跨地域、跨实例的多AnalyticDB读写访问

介绍实时数据仓库ADB（AnalyticDB）云产品：https://www.aliyun.com/produc...数据湖分析服务DLA（DataLakeAnalytics）云产品：https://www.aliyun.com
阿里云云栖社区·2019-02-13 00:00

基于华为云DLI服务和MLS服务的房价预测任务

大数据学习营DLI服务高阶课程1.DLI服务与MLS服务说明DLI官网地址：https://support.huaweicloud.com/productdesc-dli/dli_07_0001.html，数据湖探索
砖头23333·2019-01-25 20:56

华为云数据湖工厂服务DLF

1.DLF服务说明参考官网：https://support.huaweicloud.com/productdesc-dlf/dlf_07_001.html，数据湖工厂服务（DataLakeFactory
砖头23333·2019-01-22 15:03
上一页 26 27 28 29 30 31 32 33 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他