大数据基础

一文了解袋鼠云在实时数据湖上的探索与实践

因此，袋鼠云基于自研的一站式大数据基础软件——数栈提出相应的实时数据湖解决方
袋鼠云数栈·2023-09-15 15:35

大数据基础——知识汇总

什么是DIKW模型？D=Data,表示数据，I=Information,表示信息，K=Knowledge，表示知识，W=Wisdom，表示智慧。DIKW模型将数据、信息、知识、智慧纳入到一种金字塔形的层次体系，每一层比下一层都赋予的一些特质。原始观察及量度获得了数据、分析数据间的关系获得了信息。在行动上应用信息产生了知识。智慧关心未来，它含有暗示及滞后影响的意味。Whatistherelation
一只Lemon·2023-09-14 14:25

网工内推 | 云架构运维、网络工程师，base北京，最高20k

2、对集团数据中心系统的大数据基础架构（ClouderaDistributionHadoop）的规划、运维及管理相关工作。
HCIE考证研究所·2023-09-12 04:49

大数据导论 笔记

一、大数据方向1、技术发展计算机网络云计算大数据时代人工智能（本科：使用，研究生：推导，博士：创新）2023年大数据模型人工智能元年2、基础课程hadoop大数据基础三大件：HDFS分布式存储、MapReduce
暗托涅瓦·2023-09-10 02:12

数据中台建设方案-基于大数据平台

大数据基础平台技术能力的高低，主要依赖于该层组件的发展。本建设方案满足甲方对于数据计算层建设的基本要求：利用了MapReduce、Spark、
FRDATA1550333·2023-09-08 05:08

大数据基础知识

一、概述大数据时代悄然来临，带来了信息技术发展的巨大变革，并深刻影响着社会生产和人民生活的方方面面。全球范围内，世界各国政府均高度重视大数据技术的研究和产业发展，纷纷把大数据上升为国家战略加以重点推进。企业和学术机构纷纷加大技术、资金和人员投入力度，加强对大数据关键技术的研发与应用，以期在“第三次信息化浪潮”中占得先机、引领市场。大数据已经不是“镜中花、水中月”，它的影响力和作用力正迅速触及社会的
数新网络·2023-09-08 04:34

腾讯T4讲解：大数据日知录架构与算法（内含书籍，需要自取）

第一篇大数据基础理论第1章数据分片与路由1.1抽象模型1.2哈希分片(HashPartition)1
Python大数据工程师·2023-09-03 00:37

大数据平台与数据仓库的五大区别

大数据平台与数据仓库的五大区别一、概念不同数据仓库：一个相对具体的功能概念，是存储和管理一个或多个主题数据的集合；大数据平台：在大数据基础上出现的融合了结构化和非结构化数据的数据基础平台。
行云管家·2023-08-31 10:47

基于预测的云资源弹性伸缩框架MagicScaler，实现“高QoS，低成本”双丰收

开篇近日，由阿里云计算平台大数据基础工程技术团队主导，与计算平台MaxCompute团队、华东师范大学数据科学与工程学院、达摩院合作，基于预测的云计算平台资源弹性伸缩框架论文《MagicScaler:Uncertainty-aware
·2023-08-29 17:43

【VLDB 2023】基于预测的云资源弹性伸缩框架MagicScaler，实现“高QoS，低成本”双丰收

开篇近日，由阿里云计算平台大数据基础工程技术团队主导，与计算平台MaxCompute团队、华东师范大学数据科学与工程学院、达摩院合作，基于预测的云计算平台资源弹性伸缩框架论文《MagicScaler:Uncertainty-aware
阿里云大数据AI技术·2023-08-29 08:38

【VLDB 2023】基于预测的云资源弹性伸缩框架MagicScaler，实现“高QoS，低成本”双丰收

开篇近日，由阿里云计算平台大数据基础工程技术团队主导，与计算平台MaxCompute团队、华东师范大学数据科学与工程学院、达摩院合作，基于预测的云计算平台资源弹性伸缩框架论文《MagicScaler:Uncertainty-aware
·2023-08-28 12:13

三张图讲清楚大数据基础设施Hadoop、Lambda、kappa架构

随着互联网的快速发展，越来越多的人涌入互联网，互联网自此进入大数据时代。在大数据时代之后，云计算、人工智能、物联网、5G技术的发展又将大数据的发展推向高潮。数据已经从最初的信息一步步的演变成了数据产品、数据资产。关于数据的处理技术，包含数据库、数据集市、数据仓库、数据湖、数据中台，每次数据处理的演进都代表着业务需求变化的趋势、技术的演进。除了数据处理方式在演进之外，数据处理的基础措施也在不断的演进
AI课工场·2023-08-26 19:58

大数据基础面试题五：Spark Core & SQL & Streaming

大数据基础面试题五：SparkCore&SQL&Streaming目录大数据基础面试题五：SparkCore&SQL&Streaming十一、SparkCore&SQL11.1Spark解决什么问题11.2Spark
大数据面壁者·2023-08-25 10:37

阿里云认证概述

基础认证包括阿里云认证-云计算基础、阿里云认证-大数据基础、阿里云认证-人工智能基础和阿里云认证-安全基础四种认证，适合初学者和对云计算等领域感兴趣的从业者。专业认证则包括阿里云认证-云计算、阿里
腾科教育·2023-08-17 17:21

linux 上 mysql 使用问题汇总

最近学习大数据基础知识，使用Kafka模拟了生产者和消费者的流程。
uniapp·2023-08-17 06:12

文件研读：《福州市推进大数据发展三年行动计划（2018-2020年）》重点研发任务——斜杆第二步（20）

四、重点研发任务重点支持大数据应用技术、大数据分析技术与工具、大数据资源管理技术、大数据基础设施技术的研发,形成福州大数据核心技术。
追求财务自由的中年人·2023-08-16 17:52

突破大模型 | Alluxio助力AI大模型训练-成功案例（一）

更多详细内容可见《Alluxio助力AI大模型训练制胜宝典》【案例一：知乎】多云缓存在知乎的探索:从UnionStore到Alluxio作者：胡梦宇-知乎大数据基础架构开发工程师（内容转载自InfoQ）
Alluxio·2023-08-16 01:17

如何设计实时数据平台（技术篇）

侵删原文：https://mp.weixin.qq.com/s/iyDxv_sLcNEJ1KBG7gGH3w导读：实时数据平台（RTDP，Real-timeDataPlatform）是一个重要且常见的大数据基础设施平台
longLiveData·2023-08-15 14:47

揭秘爱数AnyShare认知助手：大模型深度产品化，深化人与机器的“分工协作”

最近，大数据基础设施提供商爱数在一次公开分享中，直观地展示了其新发布的AnyShare认知助手如何在大模型的支撑下辅助内容/知识的智能
智能相对论·2023-08-12 23:15

什么是股票level2数据接口？

行情有三大优势1.股票level2数据接口实时刷新,比普通行情快3—10秒2.普通行情只有5档行情，股票level2数据接口沪市支持10档行情，深市支持500档行情,委买委卖一览无余3.更有研发团队历时十年在大数据基础上不断研发的多种交易决策指标
QQ2037696191·2023-08-10 16:25

用AIGC生成大数据教程

目录第一章：引言介绍大数据的概念和重要性解释为什么大数据在当今世界中如此关键第二章：大数据基础知识解释大数据的定义和特征探讨大数据的来源和类型介绍大数据的处理流程解释大数据技术背后的原理和概念第三章：大数据处理工具和技术介绍常用的大数据处理工具
醉心编码·2023-08-10 12:10

ODY奥德赛商业模式解析

奥德赛区块链生态系统构建在系统所收集的大数据基础上，以公链为存储数据的底层建筑，并且通过算法把数据加密，在公链上再延展出私有链，用
ODY奥德赛布道者·2023-08-09 16:34

啥样的企业级服务软件商业模式比较好？

从事企业级服务软件创业公司5年多，根据切身经验观察，有三类企业级服务软件商业模式比较好：1、行业无关的基础软件平台：类似操作系统、数据库、中间件、大数据基础平台（hadoop）、云计算平台、BI软件等，
言值很靓·2023-08-05 11:29

大数据基础入门 ------文章来源于：某个入门课程

文章目录第一课：大数据基础入门什么是大数据？java和大数据的关系学习大数据需要的基础和路线第二课：Hadoop的背景起源一分布式存储如何解决大数据的存储？
8000006808·2023-07-30 20:21

.NET Apache Spark做基于商品推荐系统如此简单

一、.NETApacheSpark大数据基础学习分析数据基础数据准备：1,https://api.github.com/repos/tosch/ruote-kit,1,ruote-kit,RESTfulwrapperforruoteworkflowengine
inet_ygssoftware·2023-07-27 03:55

Datasophon添加第三方组件--FLINKSTANDALONE

安装包编写配置文件编写properties_value.ftl重启datasophon-manager服务页面安装存在问题Datasophon简介DataSophon（点击访问官网）是致力于自动化监控、运维、管理大数据基础组件和节点的
Sherwy·2023-07-23 08:31

大数据基础懂性问题回答

以下是大数据领域的一些常见问题和答案：问题：什么是大数据？答案：大数据是与复杂和大型数据集相关的术语。关系数据库无法处理大数据，这就是为什么使用特殊的工具和方法对大量数据执行操作的原因。大数据使公司能够更好地了解其业务，并帮助他们从定期收集的非结构化和原始数据中获取有意义的信息。问题：大数据的五个V是什么？答案：大数据的五个V如下：卷(Volume)-卷表示卷，即以高速率增长的数据量，即以PB为单
饭九钦vlog·2023-07-21 20:18

大数据基础篇--MapReduce工作原理

文章目录理解什么是map，什么是reduce，为什么叫mapreduceMap详解Reduce详解MapReduce详解分片、格式化数据源执行MapTask执行Shuffle过程执行ReduceTask写入文件理解什么是map，什么是reduce，为什么叫mapreduceMapReduce可以分成Map和Reduce两部分理解。Map详解1.Map：映射过程，把一组数据按照某种Map函数映射成新
在路上的小y·2023-07-21 14:41

期末复习-大数据技术原理与应用

大数据技术原理与应用大数据基础什么促进了大数据时代的诞生？
coffee_mao·2023-07-21 00:27

又卡了，大数据平台容器化运维走起

文章目录一、背景二、方案总结三、方案实施3.0转移数据修改docker默认存储位置3.1手动清理3.2定时容器日志清理3.3限制Docker容器日志大小大家好，我是脚丫先生(o^^o)大数据基础平台的搭建
大数据指北·2023-07-17 22:12

干货 | 智能网联汽车大数据基础平台构建研究

各位老师大家上午好，我们组的题目是智能网联汽车大数据基础平台的构建。我们的指导企业是西部智联。我们的汇报将从这五个方面进行展开，第一个方面是项目背景与需求分析。
数据派THU·2023-07-13 22:05

大数据基础平台实施及运维进阶

1、完全分布式部署介绍完全分部式是真正利用多台Linux主机来进行部署Hadoop，对Linux机器集群进行规划，使得Hadoop各个模块分别部署在不同的多台机器上。2、nameNodeHA+完全分布式部署2.1、nameNode切换方法分别处于Active和Standby中hadoop可以创建多个副本到各个datanode中实现高可用，但是如果要防止出现问题必须给namenode做一个备用服务器
CCTVZHENG·2023-06-23 06:40

数据仓库(11)什么是大数据治理，数据治理的范围是哪些

最基础的调整也是大数据的计算和管理，数据治理是一个特别重要的大数据基础，他保证着数据能否被最好的应用，保证着数据的安全，治理等。那么数据治理到底能治什么，怎么治？数据治理主要包含七个方面。
·2023-06-21 12:46

【赵渝强老师】阿里云大数据ACP认证之阿里大数据产品体系

主要分为阿里云大数据基础产品和阿里云数加平台，其产品架构图如下所示：一、阿里云大数据基础产品1、云数据库——RDS（ApsaraDBforRDS的简称）稳定可靠、可弹性伸缩的在线数据库服务即开即用，DMS
·2023-06-19 15:56

大数据基础

基础基础：常用算法与数据结构、HTML、CSS、JavaScript操作系统：Linux编程语言：Java：IO模型、网络编程、多线程、内存管理机制等基础知识|熟悉缓存、消息队列、索引查询|高并发、高负载、高可用系统的设计开发及调优JavaWeb项目，SSM等框架，前后台交互Shell脚本编程：自动化管理操作Python编程Scala语言数据库：MySQL、Oracle等关系型数据库、NoSQL数
彼得潘多·2023-06-19 09:02

大数据基础平台实施及运维

一、大数据介绍1、为什么使用大数据技术数据量越来越大，数据分析的实时性越来越强，数据结果应用范围越来越广。（从用户的访问量、量、访问时间、访问频率，市场可以得到很多信息）2、大数据的定义数据收集、数据清洗、数据处理就是大数据技术的整个流程。二、大数据应用领域1.广告广告投放广告策略2.电信深度包检测流失分析网络质量3.金融风险识别（借贷款）预测（12306买票换乘）4.能源生物基因组分析地质分析5
CCTVZHENG·2023-06-18 13:11

有了自己的第一个淘宝店

听了许多视频，和网络文案，才意识到淘宝规则多，做电商一定要走大数据基础知识和网感。前期没有流量，让朋友去下单，又容易被定义刷单。
吕姜瑶·2023-06-17 16:24

红象云腾大数据基础平台与龙蜥社区操作系统再次完成联合测试

最近红象云腾大数据产品与生态伙伴的适配工作喜报频传，不久前，红象云腾企业大数据基础软件平台产品与龙蜥操作系统（AnolisOS）8AArch64完成了兼容测试，近日，红象云腾与龙蜥社区工作人员再次联合严格测试
·2023-06-16 17:23

【试用邀请】星环科技TDH社区版：让大数据分析触手可及

为了降低使用大数据技术的门槛与难度，普及大数据技术，赋能更多企业用户使其更具备竞争力，让更多的高校师生、科研机构，开发者等都能学习和使用大数据技术，日前，星环科技正式推出了集易安装、易使用，易管理，易运维，更轻量于一体的大数据基础平台
·2023-06-14 16:33

星环科技TDH社区版：让大数据分析触手可及

日前，星环科技正式推出了企业级一站式大数据基础平台TDH社区版，社区版极大程度的降低了用户接触使用大数据技术的使用门槛以及使用成本，致力于为企业用户、高校师生、科研机构以及其他专业开发人员提供更轻量、更简单
·2023-06-14 16:02

大数据基础环境与常用软件搭建

大数据基础环境的搭建需要以下步骤：安装操作系统：大数据环境通常使用Linux操作系统，推荐使用CentOS或Ubuntu。
qq^^614136809·2023-06-13 11:12

高速公路大数据的应用与展望

高速公路大数据构成及特点当前，高速公路已具备大数据基础：一方面，在高速公路信息化建设过程中，收费站收费、运营调度、道路救援、道路养护等运营管理都会通过信息系统产生海量数据；另一方面，随着省界站的取消，收
韩忠_43de·2023-06-10 22:11

云原生大数据 Meetup｜云原生时代下的数据计算基础设施

6月10日，火山引擎云原生计算和稀土掘金开发者社区将在上海举行一场技术Meetup，邀请四位来自字节跳动大数据基础设施研发专家分享他们在数据计算基础设施实际应用中的经验和见解，帮助开发者更好地理解各个技术的优势和应用场景
字节跳动云原生计算·2023-06-09 07:53

分布式数据库中间件 MyCat

可以用作读写分离、分库分表（分片）、容灾备份、多租户应用开发、大数据基础设施，使底层数据架构具备很强的适应
春风野马wuhu·2023-06-08 00:09

分布式数据库HBase

大数据基础-分布式数据库HBase概述HBase简介HBase与传统关系数据库的对比分析HBase数据模型数据模型概述数据模型相关概念数据坐标HBase的实现原理HBase功能组件表和RegionRegion
so.far_away·2023-06-08 00:24

阿里云大数据分析师ACP考试内容是什么？考试题型是什么？

阿里云ACP大数据分析师概述是面向大数据分析师、BI工程师的专业技能认证，涵盖数据分析相关的知识体系，如大数据基础知识、大数据存储技术、数据分析工具、数据可视化、数据编程、数据质量控制、数据分析项目管理
·2023-04-20 00:43

数据统计分析系统开发视频教程（离线处理-流处理-批处理）

course/249课程出自学途无忧网：http://www.xuetuwuyou.com海量资源免费下载：http://down.xuetuwuyou.com/课程介绍本套教程为真实的大数据实战案例，适合有大数据基础的学员学习
菜花小噗噗·2023-04-18 09:46

【大数据基础】基于 TMDB 数据集的电影数据分析

https://dblab.xmu.edu.cn/blog/2400/实验内容环境搭建pip3installbottle数据预处理本次项目使用的数据集来自知名数据网站Kaggle的tmdb-movie-metadata电影数据集，该数据集包含大约5000部电影的相关数据。本次实验使用数据集中有关电影的数据表tmdb_5000_movies.csv进行实验。数据包含以下字段：字段名称解释例子budg
仿生程序员会梦见电子羊吗·2023-04-18 07:36

大数据基础——MySql篇

MySql什么是数据库数据库：保存数据的仓库，他在电脑中是一个文件系统，然后把数据都保存在这些特殊的文件中，并且使用固定的语言（SQL语言）去操作文件中的数据。数据库就是按照数据结构来组织，存储和管理数据的建立在计算机存储设备上的仓库。数据库的分类关系型数据库oracle，MySQL，SqlServer，DB2非关系型数据库Redis，Hbase，ElasticSearch，MongoDBSQL基
我菜的要死·2023-04-17 19:09

教育大数据总体解决方案（4）

主机管理对运行大数据基础服务组件的硬件主机环境进行监控，查看主机所承载的组件信息以及
FRDATA1550333·2023-04-16 02:37
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他