大数据平台-架构基础

TDSQL PG 版企业级分布式数据库技术创新实践

TDSQLPG版产品介绍TDSQLPG版经过十余年打磨大概可以分为以下几个阶段，第一个是单机时代引入PostgreSQL做为腾讯大数据平台TDW的一个补充，弥补了小数据量分析能力不足。
·2022-01-18 10:41

【教程】手把手教你如何搭建Hadoop单机伪集群

作者：幻好来源：恒生LIGHT云社区概述本文将通过虚拟机搭建单机伪集群的Hadoop服务，帮助更好的学习和理解Hadoop大数据平台的运行原理。具体到每个细节，方便新手学习和理解。
·2022-01-10 13:32

如何搭建企业大数据分析平台

首先，在构建大数据分析平台之前，我们要明确业务需求场景和用户的需求，通过大数据分析平台，获取有价值的信息，需要访问数据，明确基于现场业务需求的大数据平台具有基本功能，确定平台的流程使用大数据处理工具和框架
·2021-12-29 15:24

架构基础

TOGAF9image.pngimage.pngIaaS(InfrastructureasaService，基础设施即服务)PaaS(PlatformasaService，平台即服务)SaaS(SoftwareasaService，软件即服务)Baas(BackendasaService,后端即服务)DaaS(Dataasaservice，数据即服务)NaaS(Networkasaservice，
michael_0x·2021-12-22 12:02

极客星球 | 阿里：云原生数据湖构建与分析最佳实践

编者按：6月24日【CoderPark】第一季架构篇之大数据平台架构分享线上直播活动圆满结束。
·2021-12-09 10:22

一站式Flink&Spark平台解决方案——StreamX

****什么是StreamX，StreamX是Flink&Spark极速开发脚手架，流批一体一站式大数据平台。自2021年3月开源以来，贡献者已累计发展到10多位。
独孤风·2021-12-07 09:00

江西省智慧作业应用培训第二天

对大数据对教育的价值、青云谱区大数据平台的全局规划、大数据的教育理念也进行了详细解说。大数据就是要服务于学生的学、服务于教师的教、服务于教学评价，大道至简是王道，最终简化操作过
洪薇景德镇市陶新小学·2021-12-02 23:02

基于星环科技大数据平台 辽宁城市建设职业技术学院打造智慧校园

星环科技与北京点为信息科技有限公司合作，为辽宁城市建设职业技术学院构建基于大数据平台的数据中心，实现全量数据的管理，支撑学院以人为本的教育理念，满足学生个性化发展的需求，促进职业教育的发展。
·2021-12-02 15:01

打造全新批流融合：详解 Apache Flink 1.14.0 发布的 Pulsar Flink Connector

加入StreamNative之前，他曾就职于阿里大数据平台和腾讯云负责Flink开发工作。盛宇帆是腾讯云项目Barad的核心committer与项目落地负责人。
·2021-12-01 17:29

taosAdapter正式发布：支持从OpenTSDB向TDengine无缝迁移

TDengine是涛思数据专为物联网、车联网、工业互联网、IT运维等设计和优化的大数据平台。
·2021-11-30 14:40

贝壳找房 x StarRocks：全新统一的极速OLAP平台实践

贝壳大数据平台部构建和支撑了全集团多个场景应用，覆盖的业务线多，业务复杂度高，因此对数据分析平台的要求也非常高。
·2021-11-30 11:21

不止是上云，更是上岸

作者常耀国，腾讯SRE专家，现就职于PCG-大数据平台部，负责千万级QPS业务的上云、监控和自动化工作。
·2021-11-30 10:17

不止是上云，更是上岸

作者常耀国，腾讯SRE专家，现就职于PCG-大数据平台部，负责千万级QPS业务的上云、监控和自动化工作。
腾讯云原生·2021-11-30 10:00

顺丰科技 x StarRocks：双十一实时运单分析实践

“作者：严向东，顺丰科技大数据平台架构
·2021-11-29 10:59

每日一书｜建大数据平台太难了，给我发个工程原型吧

今天，很多企业已经完成了早期对大数据技术的尝试和探索转而进入到应用阶段，但不得不说的是，大数据平台的架构体系庞大，技术堆栈非常深，从事大数据开发的同学对此应该都深有体会。而在很多细分领域（例如
《新程序员》编辑部·2021-11-27 08:00

深入浅析python3 依赖倒置原则(示例代码)

场景针对园区停车信息，需要对各个公司提供的停车数据进行整合并录入自家公司的大数据平台数据的录入无外乎就是对数据的增删改查下面上一个常规的写法（未符合依赖倒置），整合来自长安和丰田的停车数据classChangan
·2021-11-26 16:27

【阿里云 CDP 公开课】 直播预告来袭！

阿里云与Cloudera联合打造了阿里云上的半托管形态CDP企业数据云平台，以及基于On-Premise部署的CDP大数据平台、CDF
·2021-11-25 13:46

离线实时一体化数仓与湖仓一体—云原生大数据平台的持续演进

**林伟，阿里云智能研究员、阿里云智能通用计算平台MaxCompute、机器学习PAI平台技术负责人**本篇内容将从三个部分为读者讲述离线实时一体化数仓与湖仓一体—云原生大数据平台的持续演进。通过从数
·2021-11-25 13:44

Tapdata 在线研讨会：DaaS vs 大数据平台，是竞争还是共处？

从20年前的传统数仓，到10年前大数据平台，5年前开始火热的数据中台以及最近出现的湖仓一体新数据平台，今天被数据孤岛困扰的企业，面临着太多的选择。
·2021-11-24 17:48

中通大数据平台在大促中的进化

一年一度的双十一又双叒叕来了，给技术人最好的礼物就是大促技术指南！而经过这些年的发展，大促早已不仅仅局限于电商行业，现在各行各业其实都会采用类似方式做运营活动，汽车界有818，电商有618、11.11等等，各种各样的大促场景，对包括数据库在内的基础软件提出了很多新挑战，同时也积累了诸多最佳实践。在双十一到来前，PingCAP与汽车之家、易车网、京东、中通等用户展开一系列深入探讨，希望为大家揭秘逐年
·2021-11-24 11:21

Tapdata 在线研讨会：DaaS vs 大数据平台，是竞争还是共处？

从20年前的传统数仓，到10年前大数据平台，5年前开始火热的数据中台以及最近出现的湖仓一体新数据平台，今天被数据孤岛困扰的企业，面临着太多的选择。
·2021-11-23 15:51

离线实时一体化数仓与湖仓一体—云原生大数据平台的持续演进

林伟，阿里云智能研究员、阿里云智能通用计算平台MaxCompute、机器学习PAI平台技术负责人本篇内容将从三个部分为读者讲述离线实时一体化数仓与湖仓一体—云原生大数据平台的持续演进。通过从数据湖到数
·2021-11-23 11:58

直播 | 大数据能力体系构建的技术方法全在这了！

『百度开发者沙龙』第二期邀请到了百度智能云大数据的4位资深工程师、产品经理，为大家带来百度智能云智能大数据平台相关技术讲解，同时分享落地实战经验，探讨大
·2021-11-19 13:13

Smartbi：数据治理系列之元数据管理平台的原理

随着大数据平台和因特网的兴起，数据治理逐渐成为企业挖掘数据价值的重要手段和工具。理解数据治理这一概念可能会有些困难，但没关系，一步一步来，今天我们了解一下数据治理的基础——元数据管理。
·2021-11-18 11:39

『Python 自学笔记』重新认识文件、数据库操作

文章目录我的编程之路Pickle模块文件的读写MySQL数据库MongoDB数据库常用术语我的编程之路从玩耍Excel表格到MySQL数据仓库，之后进入数据分析的天坑，然后再到大数据平台HIVE、Hbase
Mr数据杨·2021-11-17 15:01

『Python 自学笔记』重新认识元组

文章目录我的编程之路元组不可修改元组赋值用元组做返回值列表和元组字典与元组元组术语我的编程之路从玩耍Excel表格到MySQL数据仓库，之后进入数据分析的天坑，然后再到大数据平台HIVE、Hbase。
Mr数据杨·2021-11-17 15:38

『Python 自学笔记』重新认识字典

文章目录我的编程之路字典是一种映射用字典作为计数器循环与字典逆向查找字典和列表字典的数据排序字典数据的替换字典术语列表我的编程之路从玩耍Excel表格到MySQL数据仓库，之后进入数据分析的天坑，然后再到大数据平台
Mr数据杨·2021-11-17 14:01

『Python 自学笔记』重新认识迭代

文章目录我的编程之路再赋值更新变量循环：For语句循环：While语句中断操作循环迭代算法循环迭代术语我的编程之路从玩耍Excel表格到MySQL数据仓库，之后进入数据分析的天坑，然后再到大数据平台HIVE
Mr数据杨·2021-11-16 21:53

『Python 自学笔记』重新认识条件循环

文章目录我的编程之路除法和求模布尔表达式逻辑运算符条件执行选择执行链式条件嵌套条件递归运算无穷递归键盘输入条件循环术语列表我的编程之路从玩耍Excel表格到MySQL数据仓库，之后进入数据分析的天坑，然后再到大数据平台
Mr数据杨·2021-11-16 12:43

『Python 自学笔记』重新认识函数方法

文章目录我的编程之路函数调用数学函数布尔函数自定义函数和使用增量式开发组合式开发运行流程形式参数和实际参数函数内部变量和形参都是局部的函数的使用意义函数术语我的编程之路从玩耍Excel表格到MySQL数据仓库，之后进入数据分析的天坑，然后再到大数据平台
Mr数据杨·2021-11-16 11:48

NFT应用开发NFT游戏系统开发搭建NFT开发团队人工智能开发

这款产品目标为融合新一代物联网、大数据等信息化技术，有效整合各个资源，设计打造出智慧农业大数据平台。
·2021-11-11 17:24

一文带你理解TDengine中的缓存技术

TDengine是一款高性能的物联网大数据平台。为了高效处理时序数据，TDengine中大量用到了缓
·2021-11-10 14:30

一文带你理解TDengine中的缓存技术

TDengine是一款高性能的物联网大数据平台。为了高效处理时序数据，TDengine中大量用到了缓
涛思数据TDengine·2021-11-10 13:00

微服务架构 基础(五)

微服务架构基础(五)持续更新…继续前面的基础四工程进行扩展分布式配置中心微服务意味着要将单体应用中的业务拆分成一个个子服务，每个服务的粒度相对较小，因此系统中会出现大量的服务。
一夜星尘·2021-11-09 21:08

极光笔记丨Spark SQL 在极光的建设实践

极光高级工程师——蔡祖光前言Spark在2018开始在极光大数据平台部署使用,历经多个版本的迭代,逐步成为离线计算的核心引擎。
·2021-11-09 16:47

在Window上安装PySpark

更多视频可查看腾讯课堂地址：个人大数据平台的搭建与学习实践-学习视频教程-腾讯课堂(qq.com)1-windows上安装配置PySpark安装Python可以选择安装官方版本的Python，或是Anaconda
NEO_X·2021-11-09 14:48

数字营销行业大数据平台云原生升级实战

简介：加和科技CTO王可攀：技术是为业务价值而服务王可攀加和科技CTO本文将基于加和科技大数据平台升级过程中面临的问题和挑战、如何调整数据平台架构以及调整后的变化，为大家介绍数字营销行业大数据平台云原生升级实战经验
·2021-11-09 14:05

思迈特软件Smartbi：如何快速打造数据大屏可视化展示系统

数据大屏可视化展示系统的定义数据大屏可视化展示系统指的是用在大数据领域前端实时显示的显示屏，这在当前数字化经济兴起的今天越来越普及，比如一些企业的展厅或者控制室都会打造一个显示大数据平台用来展示企业的各种数据
·2021-11-09 14:35

思迈特软件Smartbi：数据中台建设成功的三个阶段

至于这个用起来的过程是否是自动化的，是否有大数据平台的支撑，是否用到了先进的技术，这些都是第二位的事情。
·2021-11-09 12:00

微服务架构 基础(四)

微服务架构基础(四)持续更新…继续前面的基础三工程进行扩展服务网关SpringCloudGateway什么是SpringCloudGateway?
一夜星尘·2021-11-08 21:04

微服务架构 基础(三)

微服务架构基础(三)持续更新…继续前面的基础二工程进行扩展服务降级、服务熔断和服务限流基本概念理解服务雪崩多个服务之间调用的时候，假设微服务A调用微服务B和微服务C，微服务B和微服务C又调用其它的微服务
一夜星尘·2021-11-07 21:02

阿里云ACA认证考试攻略

阿里云ACA级认证是阿里云助力工程师认证，现我来分享一下ACP认证考试攻略.一、了解阿里云ACA认证1、数加是指阿里云大数据平台，包含了一系列的大数据产品及服务。
·2021-11-02 17:57

2021云栖大会丨阿里云发布第四代神龙架构，提供业界首个大规模弹性RDMA加速能力

相比上一代，第四代神龙架构基础性能全面提升，存储IOPS提升300%、网络PPS提升100%、网络延迟降低80%，同时升级至全新的eRMDA网络架构，是业界首个大规模弹性RDMA加速能力，再次
·2021-10-27 11:49

[JD] 一、基础架构与RPC框架剖析

[JD]一、基础架构与RPC框架剖析一、基础架构二、RPC实现原理三、RPC服务消费/提供方核心功能设计实现四、主流RPC产品对比一、基础架构基础架构设计主要考虑的几个方面：业务开发框架、存储、管理平台
小土狗一只·2021-10-26 22:08

JuiceFS 如何帮助趣头条超大规模 HDFS 降负载

背景趣头条大数据平台目前有一个近千节点的HDFS集群，承载着存储
·2021-10-26 18:08

Spring Cloud微服务架构基础内容？看这一篇就够啦！

SpringCloud微服务架构基础内容？看这一篇就够啦！昨天讲完架构的演变迭代，以及微服务的各种服务传输发送的方式，由于个人的学习因素，我还是主要介绍微服务中使用Spring家族的内容。
小艾扶·2021-10-24 19:03

2021云栖大会丨阿里云发布第四代神龙架构，提供业界首个大规模弹性RDMA加速能力

相比上一代，第四代神龙架构基础性能全面提升，存储IOPS提升300%、网络PPS提升100%、网络延迟降低80%，同时升级至全新的eRMDA网络架构，是业界首个大规模弹性RDMA加速能力，再次
·2021-10-22 10:04

思迈特软件Smartbi：如何快速打造数据大屏可视化展示系统

数据大屏可视化展示系统的定义数据大屏可视化展示系统指的是用在大数据领域前端实时显示的显示屏，这在当前数字化经济兴起的今天越来越普及，比如一些企业的展厅或者控制室都会打造一个显示大数据平台用来展示企业的各种数据
·2021-10-22 09:58

思迈特软件Smartbi：数据中台建设成功的三个阶段

至于这个用起来的过程是否是自动化的，是否有大数据平台的支撑，是否用到了先进的技术，这些都是第二位的事情。
·2021-10-21 10:56

相约 DTCC 2021 | Tapdata 受邀分享：如何打造面向 TP 业务的数据平台架构

2021年10月20日09:40-10:20演讲地点：北京国际会议中心（专场11：[企业数据中台设计与实践]）演讲主题：RealTimeDaaS-面向TP业务的数据平台架构从20年前的传统数仓，到10年前大数据平台
·2021-10-14 18:33
上一页 31 32 33 34 35 36 37 38 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他