emr

【新年新姿势第一弹】腾讯云EMR数仓建设教程发布——与尚硅谷强强联手带你全方位了解大数据组件

腾讯云开发者社区带着干货来了，腾讯云×尚硅谷大数据研究院强强联手，重磅推出新年第一弹：腾讯云EMR数仓教程发布腾讯云开发者社区“公开课”直达：腾讯云开发者公开课-腾讯云开发者社区-腾讯云这套教程由腾讯云官方与尚硅谷大数据研究院联合推出
腾讯云开发者·2023-01-30 14:41

使用 Amazon EMR 构建您的数据分析平台

前言众所周知，在现如今大数据时代，数据越来越重要。据Gartner最新趋势分析，数据分析将成为创新起源与企业核心能力。同时国际数据公司IDC和数据存储公司希捷的一份报告表示，我国产生的数据量将从2019年的约9.4ZB增至2025年的48.6ZB。面对如此愈加繁杂和庞大的数据，很多公司往往会被这些海量数据与各类要求所淹没，因此如何降本增效，打通数据分析与存储，提高数据数据分析的效率成为了令技术团队
kikokingzz·2023-01-30 14:10

电解TiO2提取钛的研究进展

关键词：FFC法；OS法；USTB法；EMR/MSE法；PRP工艺引言钛具有密度小、比强度大（强度与密度之比）、耐腐蚀、无毒、温度适应范围广的优良性质，而且钛矿藏储量丰富，地壳中钛的含量约为
山中老夫子·2023-01-28 16:28

图谱实战 | 真实世界医疗知识图谱及临床事件图谱构建

数据源主要来自于医院的EMR、HIS、LIS、RIS等系统，以及医学文献、临床指南、书籍和药品说明书这类已经沉淀好的知识。首先简单介绍一下医渡云和几个医疗数据相关的概念。
开放知识图谱·2023-01-19 20:26

Amazon EMR HBase on S3 之二级索引、Thrift 和性能评测

点击上方【凌云驭势重塑未来】一起共赴年度科技盛宴！HBase是作为Apache软件基金会Hadoop项目的一部分开发的开源、非关系、分布式数据库，为Hadoop生态系统提供非关系数据库功能。AmazonEMR从4.6.0版本开始，就提供了HBase。AmazonEMR从5.2.0版本开始，就支持把HBase根目录和元数据直接存储到AmazonS3,这样就实现了HBase的存算分离，使得数据变成了高
亚马逊云开发者·2023-01-13 17:58

阿里云开源大数据平台EMR全面升级 性能最高可提升6倍

12月27日,阿里云正式发布云原生开源大数据平台EMR2.0，升级后的开源大数据平台在成本持平的情况下，扩缩容性能最高可提升6倍。
阿里云大数据AI技术·2023-01-11 15:29

解读火山引擎EMR Stateless 的创新理念以及应用

作者|火山引擎EMR团队众所周知，基于Hadoop的EMR体系发展到现在，经历了很多个阶段。从基于IDC机房通过CDH去部署的1.0阶段，演进到在公有云上面按照存算分离的办法去进行的2.0阶段。
CrisAppleYan·2023-01-11 11:21

如何打造一款极速数据湖分析引擎

作者阿里云EMR开源大数据OLAP团队StarRocks社区数据湖分析团队前言随着数字产业化和产业数字化成为经济驱动的重要动力，企业的数据分析场景越来越丰富，对数据分析架构的要求也越来越高。
Apache Spark中国社区·2023-01-10 21:44

Spark on k8s 在阿里云 EMR 的优化实践

今天的介绍会围绕下面两点展开：SparkonK8s的基础概念和特性SparkonK8s在阿里云EMR的优化和最佳实践点击查看直
·2023-01-09 15:48

阿里云开源大数据平台EMR全面升级 性能最高可提升6倍

12月27日,阿里云正式发布云原生开源大数据平台EMR2.0，升级后的开源大数据平台在成本持平的情况下，扩缩容性能最高可提升6倍。
·2023-01-09 11:26

【新年新姿势第一弹】腾讯云EMR数仓建设教程发布——与尚硅谷强强联手带你全方位了解大数据组件

腾讯云开发者社区带着干货来了，腾讯云×尚硅谷大数据研究院强强联手，重磅推出新年第一弹：腾讯云EMR数仓教程发布腾讯云开发者社区“公开课”直达：腾讯云开发者公开课-腾讯云开发者社区-腾讯云这套教程由腾讯云官方与尚硅谷大数据研究院联合推出
·2023-01-06 16:56

Python 疾病诊断归一化

在电子病历（EMR，ElectronicMedicalRecord，也叫计算机化的病案系统或称基于计算机的病人记录CPR，Computer-BasedPatientRecord）中，同一疾病诊断的表示方式多种多样
医学小达人·2023-01-06 16:01

直播 | StarRocks 联合腾讯云分享 EMR-StarRocks 的降本增效之路

极速湖仓（Lakehouse）是StarRocks构建极速统一新范式的核心支点。用户无需将数据导入到StarRocks中，无需构建昂贵的数仓，即可实现亚秒级的查询速度，统一分析离线和实时数据，全面发挥湖仓架构的潜在优势。这也是StarRocks联合腾讯云等合作伙伴开展合作的立足点。1月10日19:00，StarRocks社区将联合腾讯云大数据举办“数智话”技术沙龙，以“弹性MapReduceEMR
·2023-01-05 18:26

借助 Serverless 服务实现 EMR Instance Fleets 集群自定义弹性伸缩

点击上方【凌云驭势重塑未来】一起共赴年度科技盛宴！随着客户的业务发展，终端用户的数据量以及大数据分析的需求也随之增加。此时，大数据分析的成本也随之上升。亚马逊云科技提供多种工具协助客户做成本优化，其中使用EMRonEC2SpotInstances是常用且有效的方式，节省可高达90%。EMRonEC2SpotInstances：https://aws.amazon.com/cn/ec2/spot/u
亚马逊云开发者·2022-12-30 02:11

使用 DataWorks 将 PolarDB-X 中的数据同步到 MaxCompute

大数据开发治理平台DataWorks基于MaxCompute/EMR/MC-Hologres等大数据计算引擎，为客户提供专业高效、安全可靠的一站式大数据开发与治理平台。
·2022-12-27 18:01

使用 DataWorks 将 PolarDB-X 中的数据同步到 MaxCompute

大数据开发治理平台DataWorks基于MaxCompute/EMR/MC-Hologres等大数据计算引擎，为客户提供专业高效、安全可靠的一站式大数据开发与治理平台。
·2022-12-27 17:29

Ambari3.0.0+BigTop3.2.0 SNAPSHOT初体验

市面上可用的免费开源大数据平台瞬间没有了，对于我们来说要么花钱买平台，例如CDP、华为FI、阿里EMR等等，要么用Apache原生组件自行搭建和维护平台。
泽芯·2022-12-26 09:47

直播预约｜阿里云EMR 2.0 重磅发布

阿里云EMR2.0发布会将于12月27日14点在线上举办。
阿里云大数据AI技术·2022-12-25 03:58

阿里云-数据仓库-全链路大数据开发治理平台-DataWorks的数字世界

二、DataWorks是什么DataWorks基于MaxCompute、Hologres、EMR、AnalyticDB、CDP等大数据引擎，为数据仓库、数据湖、湖仓一体等解决方案提供统一的全链路大数据开发治理平台
风一样的美狼子·2022-12-22 09:24

Superset基本介绍

EMR上的Superset，原装了对Mysql、Hive、Presto、Impala、Kylin、Druid、Clickhouse的支持。
猿小百·2022-12-18 22:06

案例 | 美创助力锦州医科大学附属第一医院容灾建设实践

近期，美创科技成功利用美创DBRA数据容灾系统+CDP灾备一体机助力锦州医科大学第一附属医院HIS、EMR核心业务系统容灾体系建设，实现了重要数据的安全、实时备份，以及业务系统“一键式容灾切换”，最大限度地满足
数据库安全·2022-12-17 19:38

技术内幕 | 阿里云EMR StarRocks 极速数据湖分析

作者：阿里云智能技术专家周康，StarRocksActiveContributor郑志铨（本文为作者在StarRocksSummitAsia2022上的分享）为了能够满足更多用户对于极速分析数据的需求，同时让StarRocks强大的分析能力应用在更加广泛的数据集上，阿里云EMROLAP团队与StarRocks社区在2021年就开始合作。双方联手增强StarRocks的数据湖分析能力，使其不仅能够分
StarRocks_labs·2022-12-17 05:48

被热捧的云原生，和大数据怎么结合才能驱动商业？

本文由腾讯专家工程师、腾讯云EMR技术负责人陈龙在TechoTV
腾讯云开发者·2022-12-16 16:03

Spark 调优攻略上册

本次整理不单单是Apachespark还涵盖了DataLake和阿⾥云EMR智能团队研发的Jindo-Spark是如何基于Apachespark进⾏多维优化及实现原理，让
YaPengLi.·2022-12-15 11:44

EMR-Jindo Spark 核心引擎优化

凭借该引擎，EMR成为第一个云上TPC-DS成绩提交者。经过持续不断地内核优化，目前基于最新EMR-Jindo引擎的TPC
YaPengLi.·2022-12-15 11:14

AWS EMR 上 Spark 任务 Container killed Exit code 137 错误

一、问题描述近期，使用AWSEMR集群上跑Spark任务时常出现Containerkilledonrequest.Exitcodeis137这样的报错信息，导致任务运行失败报错日志如下：Causedby:org.apache.spark.SparkException:Jobabortedduetostagefailure:Task2instage3.0failed4times,mostrecent
stone-zhu·2022-12-15 11:35

EMR-StarRocks 与 Flink 在汇量实时写入场景的最佳实践

作者：刘腾飞汇量后端开发工程师阿里云开源OLAP研发团队EMR-StarRocks介绍阿里云EMR在年初推出了StarRocks服务，StarRocks是新一代极速全场景MPP（MassivelyParallelProcessing
阿里云大数据AI技术·2022-12-09 09:16

Hudi on Flink 的集成

Streaming读五、总结一、背景ApacheHudi是目前最流行的数据湖解决方案之一，DataLakeAnalytics[1]集成了Hudi服务高效的数据MERGE（UPDATE/DELETE）场景；AWS在EMR
明月清风，良宵美酒·2022-12-04 19:37

技术内幕 | 阿里云EMR StarRocks 极速数据湖分析

作者：阿里云智能技术专家周康，StarRocksActiveContributor郑志铨（本文为作者在StarRocksSummitAsia2022上的分享）为了能够满足更多用户对于极速分析数据的需求，同时让StarRocks强大的分析能力应用在更加广泛的数据集上，阿里云EMROLAP团队与StarRocks社区在2021年就开始合作。双方联手增强StarRocks的数据湖分析能力，使其不仅能够分
·2022-12-03 12:05

【医疗人工智能】DKDR：一种用于疾病诊断的知识图谱和深度强化学习方法

近年来，随着电子病历(EMR)的出现，许多研究人员开始专注于通过挖
Wwwilling·2022-11-30 06:53

EMR-StarRocks 与 Flink 在汇量实时写入场景的最佳实践

作者：刘腾飞汇量后端开发工程师阿里云开源OLAP研发团队EMR-StarRocks介绍阿里云EMR在年初推出了StarRocks服务，StarRocks是新一代极速全场景MPP（MassivelyParallelProcessing
·2022-11-30 06:16

速报｜StarRocks亮相云栖大会，携手阿里云EMR 打造极速数据湖分析新体验

11月3-5日，2022云栖大会将在杭州云栖小镇开幕。届时StarRocks将有工作人员在D2开发者展位恭候各位，欢迎各位开发者们前去交流。云栖大会见证了中国计算产业的萌发与革新，是业内不可多得的思想碰撞盛会。StarRocks面世两年多来不断迭代，一直专注于打造世界顶级的数据库产品，今年9月StarRocks社区正式发布StarRocks极速数据湖分析，开启了极速统一3.0时代。本次线下交流，为
StarRocks_labs·2022-11-21 09:38

峰会实录 | 基于StarRocks和腾讯云EMR构建云上Lakehouse

作者：腾讯云EMR业务负责人陈龙（本文为作者在StarRocksSummitAsia2022上的分享）我目前负责腾讯云EMR的研发工作，此前先后在百度、支付宝做后端研发。
StarRocks_labs·2022-11-21 09:38

Spark on k8s 在阿里云 EMR 的优化实践

今天的介绍会围绕下面两点展开：SparkonK8s的基础概念和特性SparkonK8s在阿里云EMR的优化和最佳实践点击查看直
阿里云大数据AI技术·2022-11-01 13:13

EMR重磅发布智能运维诊断系统(EMR Doctor)——开源大数据平台运维利器

简介：E-MapReduce推出面向开源大数据集群的智能运维诊断系统E-MapReduceDoctor，有效提升大数据集群运维效率，辅助EMR用户完善集群监控体系。
·2022-09-16 16:43

EMR重磅发布智能运维诊断系统(EMR Doctor)——开源大数据平台运维利器

大数据运维的挑战—如何保证集群稳定与运行效率企业级大数据集群通常拥有海量的数据存储、日常运算成干上万的计算任务，需要满足各类上层业务的计算需求。对于这类集群的运维往往充满着挑战：海量的数据、庞杂的组件以及组件之间复杂的依赖关系、对于时效要求的的运算任务，都会提升运维难度。作为支撑平台，大数据集群的稳定性和运行效率，会直接影响到公司业务的正常运作和发展。集群管理员往往对整体集群做好了监控运维体系，对
·2022-09-15 16:57

重磅发布！阿里云全链路数据湖开发治理解决方案

简介：阿里云重磅发布全链路数据湖解决方案，主要包含开源大数据平台E-MapReduce(EMR)+一站式大数据数据开发治理平台DataWorks+数据湖构建DLF+对象存储OSS等核心产品。
·2022-09-08 11:01

记一次阿里云EMR报错、解决方法，Failed to create spark client

出现错误前进行的操作。设置hive计算引擎设置为spark，并添加了一些配置项setspark.executor.memory=4g;setspark.yarn.executor.memoryOverhead=4096;sethive.exec.parallel=true;sethive.execution.engine=spark;日志输出=================JOBOUTPUTBE
枪枪枪·2022-09-07 20:37

重磅发布 ， 阿里云全链路数据湖开发治理解决方案

阿里云重磅更新全链路数据湖解决方案，主要包含开源大数据平台E-MapReduce(EMR)+一站式大数据数据开发治理平台DataWorks+数据湖构建DLF+对象存储OSS等核心产品。
阿里云大数据AI技术·2022-08-18 13:05

重磅发布！阿里云全链路数据湖开发治理解决方案

阿里云重磅发布全链路数据湖解决方案，主要包含开源大数据平台E-MapReduce(EMR)+一站式大数据数据开发治理平台DataWorks+数据湖构建DLF+对象存储OSS等核心产品。
·2022-08-17 14:27

Amazon EMR 上的 Alluxio 集成实践

背景Alluxio的数据引擎性能，并没有与Trino相关的性能为大数据引擎领域提供服务，为S3、hdfs等数据提供温暖的计算层，如Hive、Spark、Spark的集成，做大数据引擎的集成，做大数据引擎的集成加速是一个不可多得的功能组件。Alluxio社区与AmazonEMR服务有集成的辅助和集成，官方提供了AmazonEMR的集成方案，参见Alluxio社区文档，亚马逊云科技也提供了快速安装部署
·2022-08-12 15:16

数据仓库4.0

1个节点1万美元云服务选择阿里云的EMR(不用搭建平台和考虑兼容性问题)，MaxCompute,DataWorks亚马逊云的EMR腾讯云EMR华为云EMR（市场份额少）物理机和云主机选择集群规模计算例子用户
编程爱上我吧·2022-08-05 14:00

Kyligence 正式支持 Amazon EMR Serverless，构建高效低成本云上数据分析

7月13日，Kyligence宣布云原生智能多维数据库KyligenceCloud正式支持AmazonEMRServerless。KyligenceCloud将基于AmazonEMR无服务器部署选项，进一步提升云上数据构建性能，从而简化云上运维压力，降低云上成本，最终助力企业轻松且经济高效地实现海量数据分析。KyligenceCloud支持AmazonEMRServerless，赋能云上企业降本增
·2022-07-14 11:00

模拟IDC spark读写MaxCompute实践

本文以EMR（云上Hadoop）方式模拟本地Hadoop集群访问MaxCompute数据。
·2022-06-28 18:21

技术揭秘 | 阿里云EMR StarRocks 线上发布会预约开启

阿里云EMR-StarRocks是StarRocks授权阿里云的一款新一代开源OLAP产品，致力于构建极速统一分析体验，满足企业用户的多种数据分析场景。
阿里云开发者·2022-06-17 22:12

AWS大数据三种经典玩法

文章说明一、AWS大数据平台全家桶简介1、一首（数据源）2、一尾（数据应用）3、中间（大数据体系）3.1导入组件3.2数据处理组件3.3服务组件二、三种经典玩法的对比1、全部采用AWS的组件2、AWS组件+EMR
他们叫我技术总监·2022-06-03 22:10

SSN1ETF8 8路10M/100M快速以太网双绞线接口板 全新原装 金边板卡

SSN1ETF88路10M/100M快速以太网双绞线接口板EFT8/EFS0/EMR0单板的槽位与ETF8单板的对应槽位EMS4/EMS2/EFS0A单板的槽位与ETF8单板的对应槽位OSN3500ETF8
TEL_13713905472·2022-05-27 10:22

阿里云RemoteShuffleService 新功能：AQE 和流控

简介：阿里云EMR自2020年推出RemoteShuffleService(RSS)以来，帮助了诸多客户解决Spark作业的性能、稳定性问题，并使得存算分离架构得以实施。
·2022-05-13 12:07

技术揭秘 | 阿里云EMR StarRocks 线上发布会预约开启！

阿里云EMR-StarRocks是StarRocks授权阿里云的一款新一代开源OLAP产品，致力于构建极速统一分析体验，满足企业用户的多种数据分析场景。
·2022-05-09 14:44

阿里云RemoteShuffleService新功能：AQE和流控

简介：阿里云EMR自2020年推出RemoteShuffleService(RSS)以来，帮助了诸多客户解决Spark作业的性能、稳定性问题，并使得存算分离架构得以实施。
·2022-04-25 10:56
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他