海量数据nlogk

（十九）Flink CDC

搭配Flink计算框架，FlinkCDC可以高效实现海量数据的实时集成。
springk·2024-08-26 12:01

数据仓库中的表设计模式：全量表、增量表与拉链表

在现代数据仓库中，管理和分析海量数据需要高效且灵活的数据存储策略。全量表、增量表和拉链表是三种常见的数据存储模式，各自针对不同的数据管理需求提供了解决方案。
isNotNullX·2024-08-25 09:45

Amazon EFS：云端弹性文件系统的多元化应用场景

1.大数据分析与处理在大数据时代，EFS为企业提供了理想的存储平台，支持海量数据的存储和高性能分析。应用：Hadoop、Spark等大数据框架优势：高
ivwdcwso·2024-08-22 04:51

数字孪生进行工厂数字化集中管理的案例

、现状广东某玻璃厂从创业到成为行业的领军者历经了20年，随着智能化在制造业的发展，工厂车间依然存在着数据孤岛、生产过程缺乏监控及工作效率低等问题，数据管理难以跟上工厂车间机器上装备的各种传感器所产生的海量数据
厦门邦展Bestshowsz·2024-08-22 03:11

Hadoop的概念

因此，如何从海量数据中快速提取有价值的信息是大数据处理
子非鱼　　　·2024-08-22 02:03

python清华大学出版社答案_Python机器学习及实践

第1章机器学习的基础知识1.1何谓机器学习1.1.1传感器和海量数据1.1.2机器学习的重要性1.1.3机器学习的表现1.1.4机器学习的主要任务1.1.5选择合适的算法1.1.6机器学习程序的步骤1.2
weixin_39805119·2024-03-29 03:04

探索机器学习：智能时代的魔法

机器学习让机器通过海量数据的“熏陶”，自我进化，无需人类一步步指导
ChenDuBr·2024-03-13 11:35

python生成器和迭代器 装饰器,Python 生成器、迭代器和装饰器

1生成器定义(1)采用惰性计算的方式(2)无需一次性存储海量数据(3)一边执行一边计算，只计算每次需要的值(4)实际上一直在执行next()操作，直到无值可取生成器表达式(返回值for元素in可迭代对象
平胸爱吃梨·2024-03-10 19:48

大数据开发（Hadoop面试真题-卷九）

大数据开发（Hadoop面试真题）1、Hivecount(distinct)有几个reduce，海量数据会有什么问题？
Key-Key·2024-03-09 10:06

探索数据研究的奥秘：揭秘大宋咨询多元化的数据采集方案

然而，要想从海量数据中提取有价值的信息，首先需要有一套科学、高效的数据采集方案。那么，大宋咨询在数据研究中的数据采集方案究竟有哪些呢？
深圳大宋咨询·2024-03-03 06:24

10-Linux部署ElasticSearch

它可以快速地储存、搜索和分析海量数据。维基百科、StackOverflow、Github都采用它。Elasticsearch简称es，在企业内同样是一款应用非常广泛的搜索引擎服务。
甲柒·2024-03-01 11:52

Apache Calcite 动态数据管理框架入门介绍

原文地址：ApacheCalcite动态数据管理框架介绍背景随着数据规模的不断增长和数据源的多样化，开发人员需要面对各种挑战，如何高效地管理、查询和分析海量数据成为了一个迫切的问题。
老马啸西风·2024-02-25 21:03

边缘计算物联网关在生产场景中的应用-天拓四方分享

边缘计算物联网关作为连接物理世界与数字世界的桥梁，能够将传感器、执行器等设备产生的海量数据实时传输到云端进行处理，从而实现生产过程的智能化和自动化。在生产场景中，边缘计算物联网关扮演着至关重要的角色。
北京天拓四方科技股份有限公司·2024-02-25 09:18

Apache Calcite 动态数据管理框架入门介绍

原文地址：ApacheCalcite动态数据管理框架介绍背景随着数据规模的不断增长和数据源的多样化，开发人员需要面对各种挑战，如何高效地管理、查询和分析海量数据成为了一个迫切的问题。
·2024-02-25 03:36

【云学院干货】数据仓库服务：在冗余海量数据中找到正确决策

数据仓库服务：在冗余海量数据中找到正确决策目前数据仓库分析解决方案在金融，电信，零售等多个行业发展迅速，很多企业在关键决策中需要对自身海量数据进行多样化，深层次的分析。
舒意从生·2024-02-24 07:21

SpringBoot项目：RabbitMQ&MongoDB整合后台消息模块

RabbitMQ&MongoDB整合后台消息模块1.消息模块设计原理消息和用户是一对一关系，例如通过一对一才能知道哪个消息被用户已读，但MYSQL是无法支持海量数据库存储的。
Licheng Xu·2024-02-20 22:21

美团面试：Kafka如何处理百万级消息队列？

在今天的大数据时代，处理海量数据已成为各行各业的标配。特别是在消息队列领域，ApacheKafka作为一个分布式流处理平台，因其高吞吐量、可扩展性、容错性以及低延迟的特性而广受欢迎。
·2024-02-20 20:07

金融云行业研究：预计2029年将达到626亿美元

数字化环境里，万物以数据的方式存在，云计算的强大算力以及对海量数据资源的灵活调用使企业对其商业价值的认识更加深入，企业上云成为时尚风潮。
QY调研所·2024-02-20 19:34

计算机视觉与图像处理面试题,深度学习图像处理算法工程师面试题

AI开发平台ModelArtsModelArts是面向开发者的一站式AI开发平台，为机器学习与深度学习提供海量数据预处理及半自动化标注、大规模分布式Training、自动化模型生成，及端-边-云模型按需部署能力
ZW9·2024-02-20 15:32

深度学习+计算机语言,深度学习 计算机语言

AI开发平台ModelArtsModelArts是面向开发者的一站式AI开发平台，为机器学习与深度学习提供海量数据预处理及半自动化标注、大规模分布式Training、自动化模型生成，及端-边-云模型按需部署能力
中国计算机学会·2024-02-20 15:32

数字化浪潮：浩浩荡荡重塑世界

本书的标题强调了“云”，虽然云与数字化没有必然的关系，但是数字化产生的海量数据在云上存储具有多方面的优势。云的出现使得存储和计算资源变得像水电一样“即接即用，按量计费”，性价比比本地服务器高出不少。
Channing Lewis·2024-02-20 14:15

数据库索引面试的相关问题

原因：常见索引的优化的方法1、前缀索引优化2、覆盖索引优化3、联合索引6.索引存在的问题1）会带来数据的写入延迟2）引入额外的空间消耗3）海量数据下，通过索引提高查询效率也是有限的
归来少年Plus·2024-02-20 13:22

多益校招面经--软件开发岗

以下是面经1、个人介绍2、项目介绍3、开发语言的了解程度（个人是C++）4、C++和JAVA的区别5、一道算法题给定一个集合S(没有重复元素),输出它所有的子集6、如果要设计一个实时排行榜处理海量数据，
weixin_43783216·2024-02-20 12:09

作业帮 x TiDB丨多元化海量数据业务的支撑

导读作业帮是一家成立于2015年的在线教育品牌，致力于用科技手段助力教育普惠。经过近十年的积累，作业帮运用人工智能、大数据等技术，为学生、老师、家长提供学习、教育解决方案，智能硬件产品等。随着公司产品和业务场景越来越丰富，数据量越来越大，业务方对数据库的使用需求也越来越多元化。本文介绍了作业帮对TiDB的探索历程，以及逐渐落地多个业务场景的使用实践。TiDB在作业帮的探索和推广作业帮内部最开始接触
TiDB_PingCAP·2024-02-20 07:46

微服务6:ES集群

单机的elasticsearch做数据存储，必然面临两个问题：海量数据存储问题、单点故障问题。
叶惠美zz·2024-02-20 04:33

HBase——基础概念介绍

HBase良好的分布式架构设计为海量数据的快速存储、随机访问提供了可能，基于数据副本机制和分区机制可以轻松实现在线扩容、缩容和数据容灾，是大数据领域中Key-Value数据结构存储最常用的数据库方案。
zhanglf1016·2024-02-20 04:43

Elasticsearch的使用场景深入详解

它可以广泛应用于各种领域，包括：1.全文搜索Elasticsearch最常用的场景是全文搜索，它可以快速、准确地从海量数据中检索出相关信息。
清水白石008·2024-02-20 01:18

如何使用第三方API采集电商数据呢？

透过海量数据，商家可以了解客户行为和喜好，也可洞察同行对手的方向与动态，所谓知己知彼。随着市场规模的
OB15797612830·2024-02-20 00:49

作业帮 x TiDB丨多元化海量数据业务的支撑

导读作业帮是一家成立于2015年的在线教育品牌，致力于用科技手段助力教育普惠。经过近十年的积累，作业帮运用人工智能、大数据等技术，为学生、老师、家长提供学习、教育解决方案，智能硬件产品等。随着公司产品和业务场景越来越丰富，数据量越来越大，业务方对数据库的使用需求也越来越多元化。本文介绍了作业帮对TiDB的探索历程，以及逐渐落地多个业务场景的使用实践。TiDB在作业帮的探索和推广作业帮内部最开始接触
·2024-02-19 21:31

ElasticSearch学习笔记

ES的概念：ElasticSearch是一款非常强大的开源搜索引擎，可以帮助我们从海量数据中快速找到需要的内容。
重生之Java再爱我一次·2024-02-19 20:15

Flink CDC 3.0 正式发布，详细解读新一代实时数据集成框架

配合Flink优秀的管道能力和丰富的上下游生态，FlinkCDC可以高效实现海量数据的实时集成。FlinkCDC社区发展迅速，在开源的三年时间里，社区已经吸引了111位贡献者，培养了8位Main
·2024-02-19 20:57

各巨头开始退场，被点名后的社区团购未来如何

巨头们退出肯定是有原因的，昨天人民日报点评社区团购：掌握海量数据，现金算法的互联网巨头，不能只惦记着几捆白菜，几斤水果的流量。
晴光淑景·2024-02-19 13:17

MapReduce

MapReduce的优缺点优点：易于编程良好的扩展性高容错性适合tb/pb级以上海量数据的离线处理缺点：不擅长实时计算不擅长流式计算不擅长DAG
诺冰1314·2024-02-19 10:46

（三十七）大数据实战——Solr服务的部署安装

Solr可以用于构建高性能的搜索应用程序，支持从海量数据中快速检索和分析信息。Solr使用倒排索引和先进的搜索算法，可实现快速而准确的全文搜索。
厉害哥哥吖·2024-02-15 08:05

一面数据： Hadoop 迁移云上架构设计与实践

背景一面数据创立于2014年，是一家领先的数据智能解决方案提供商，通过解读来自电商平台和社交媒体渠道的海量数据，提供实时、全面的数据洞察。
JuiceFS·2024-02-15 01:48

AIoT是什么？

AIoT是AI人工智能与IoT物联网的缩写，指的是人工智能物联网，即通过物联网收集来自不同维度的海量数据，存储于云端、边缘端，再根据大数据分析以及AI等技术，实现万物数据化、万物智联化。
__Apollos·2024-02-14 14:08

海量数据处理商用短链接生成器平台 - 3

第三章商用短链平台实战-账号微服务+流量包设计第1集账号微服务和流量包数据库表+索引规范讲解简介：账号微服务和流量包数据库表+索引规范讲解索引规范主键索引名为pk_字段名;pk即primarykey;唯一索引名为uk_字段名；uk即uniquekey普通索引名则为idx_字段名；idx即index的简称account表CREATETABLE`account`(`id`bigintunsignedN
从零开始学习人工智能·2024-02-14 13:14

海量数据处理商用短链接生成器平台 - 4

第六章架构核心技术-池化思想-异步结合性能优化最佳实践第1集RestTemplate里面的存在的问题你知道多少-Brokenpipe错误项目就更新到第六章了，剩下的内容放百度网盘里面了，需要的来取。链接：https://pan.baidu.com/s/19LHPw36dsxPB75z_FHS64Q?pwd=8h89提取码：8h89简介：RestTemplate里面的存在的问题你知道多少还原代码（暂
从零开始学习人工智能·2024-02-14 13:14

从Hadoop框架与MapReduce模式中谈海量数据处理（含淘宝技术架构）

从Hadoop框架与MapReduce模式中谈海量数据处理（含淘宝技术架构）前言几周前，当我最初听到，以致后来初次接触Hadoop与MapReduce这两个东西，我便稍显兴奋，觉得它们很是神秘，而神秘的东西常能勾起我的兴趣
Dimple七·2024-02-14 06:41

03-03 elasticsearch

入门篇使用场景海量存储：支持分布式存储实时搜索：lucene倒排索引，海量数据下近乎实时搜索a.日志分析，es+logstash+kibanab.Github代码数据分析：支持数据分析及处理基本功能分布式的搜索引擎和数据分析引擎全文检索
nan得糊涂·2024-02-13 19:26

分布式环境下，互斥性与幂等性问题，分析与解决思路

随着互联网信息技术的飞速发展，数据量不断增大，业务逻辑也日趋复杂，对系统的高并发访问、海量数据处理的场景也越来越多。如何用较低成本实现系统的高可用、易伸缩、可扩展等目标就显得越发重要。
life_niu·2024-02-12 20:23

按之字形顺序打印二叉树

但是用了reverse()函数的话，会大大增加程序的开销，一旦面临海量数据的话，不可行。
杰伦哎呦哎呦·2024-02-12 09:17

微服务那些事儿 3.项目实战

第十章三个典型系统案例1.业务运营支撑系统背景：EJB架构，运行十年多；业务量暴涨，几个月一个业务发展到一个月几十个业务；人员从十几个人的团队发展到几百人；数量几何级增长，海量数据。
哆小怪·2024-02-12 09:12

企业信息模糊搜索API的使用及应用场景

企业信息模糊搜索API是一个能够快速在海量数据中进行模糊搜索的应用程序接口。模糊搜索是一种能够准确匹配关键字相似的信息的搜索方式，它可以在不需要精确匹配关键字的情况
API小百科_APISpace·2024-02-12 07:30

RAG 新路径！提升开发效率、用户体验拉满

RAG（Retrieval-AugmentedGeneration）框架结合了强大的信息检索能力和生成模型的能力，允许系统从海量数据中检索相关信息，并基于这些信息生成准确、丰富的回答。
·2024-02-11 18:21

JDBC、工具类DBUtils

JavaDataBaseConnectivityJDBC可让Java通过程序操作关系型数据库JDBC基于驱动程序实现与数据库的连接与操作1.2.JDBC的优点统一的API,提供一致的开发过程易于学习,容易上手,代码结构稳定功能强大,执行效率高,可处理海量数据
·2024-02-11 17:10

HBase知识点总结

一、HBase基础HBase是一种建立在Hadoop文件系统之上的分布式、可扩展、支持海量数据存储的NoSQL数据库。HBase是BigTable的开源Java版本。
·2024-02-11 17:17

【MySQL】数据库基础 -- 详解

文件保存数据有以下几个缺点：文件的安全性问题文件不利于数据查询和管理文件不利于存储海量数据文件在程序中控制不方便数据库的本质：对数据内容存储的一套解决方案，mysql客户端给我字段或者要求，我直接给mysql
炫酷的伊莉娜·2024-02-11 11:37

【大数据】Flume-1.9.0安装➕入门案例

➕入门案例1.下载1.9.0解压2.监控端口数据官方案例3.实时读取本地文件（hive.log）到HDFS案例4.实时读取目录文件到HDFS案例5.实时监控目录下多个追加文件总结前言大数据解决的无非是海量数据的采集
欧叶冲冲冲·2024-02-11 09:34

ClickHouse的特征,性能,优点,缺点,应用场景以及什么是OLAP,Clickhouse的相关优化

1.什么是clickhouse:提供了sql结构化的查询语言;clickhouse是一款分布式数据库;clickhouse可以存储海量数据;因为clickhouse是分布式存储海量数据,所以解决了高并发的问题
晓晓很可爱·2024-02-11 08:15
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他