玩转海量数据第23页

2024年CES展会都有些啥？亮点集锦都在这里

大家好，我是可夫小子，《小白玩转ChatGPT》专栏作者，关注AIGC、读书和自媒体。CES在科技界是一场盛会，被誉为科技界的春晚，展会上前沿的技术、概念的产品吸引不少关注。

可夫小子·2024-01-12 20:10

手把手教你搭建一个Elasticsearch集群

（1）高可用性Elasticsearch作为一个搜索引擎，我们对它的基本要求就是存储海量数据并且可以在非常短的时间内查询到我们想要的信息。

Sql强·2024-01-12 19:54

玩转贝启科技BQ3588C开源鸿蒙系统开发板 —— 语音唤醒失败问题的分析（1）

前边经过重重关卡，终于构建好了OpenHarmony系统。而编译好系统只是万里长征走完了第一步，真正的目的是为了实际的项目，以及在完成项目过程中完成具体的任务和实际解决的问题。这里就开始介绍实际遇到的问题，以及对于它们的分析与解决。在实际项目中，发现烧录系统后，对于语音唤醒功能进行测试时，并不能正常唤醒，此功能失效。关于语音唤醒这一部分的介绍参见：鸿蒙（OpenHarmony）系统之智能语音部件（

蓝天居士·2024-01-12 15:23

直播预告丨看零售场，如何玩转 MaaS

今年，有一个被频繁提及的词是MaaS这类工具正在帮助千行百业实现大模型落地产业在零售场，特别是像京东这样拥有超高并发、超复杂协同的电商场内也沉淀出了一套通用的AI基础设施——九数算法中台从提升客户服务体验、平台效率出发，训练各类垂直场景类型，支撑800+电商核心算法服务并应用于11.11、12.12大促中，成效显著这一期，我们谈论的话题与此有关**1月11****日（周四）14：00-15：**0

京东云技术团队·2024-01-12 12:29

hbase回顾

Hbase是分布式的存储海量数据的NoSql数据库2、场景:实时场景3、Hbase数据模型:Table:数据存储的形式列簇:Hbase的表结构，一般在创建表的时候指定rowkey：数据的主键,数据在hbase

cc708754edc4·2024-01-12 10:33

如何高效实现 MySQL 与 elasticsearch 的数据同步

原数据库的同步问题由于传统的mysql数据库并不擅长海量数据的检索，当数据量到达一定规模时（估算单表两千万左右），查询和插入的耗时会明显增加

273abf195ee7·2024-01-12 10:13

冰河开始对Dubbo下手了！

写在前面对冰河有一定了解的读者都知道，冰河经历了一个高并发电商系统用户从零到上亿的整个研发过程，后期也由此衍生出电商系统（商城+秒杀）和基于海量数据的实时精准商品推荐平台。

冰河团队·2024-01-12 08:52

3小时玩转微服务架构中的分布式流量防护

以下是我在极客时间带名企师友班时讲课的PPT，现在开放出来给广大技术爱好者，希望对大家有帮助，如果大家觉得有帮助，可以给一个免费的关注和点赞。另外我的新书RocketMQ消息中间件实战派上下册，在京东已经上架啦，目前都是5折，非常的实惠。https://item.jd.com/14337086.html编辑https://item.jd.com/14337086.html“RocketMQ消息中间

架构随笔录·2024-01-12 08:04

【金猿案例展】智谱AI——基于全闪分布式并行文件存储打造高速大模型训练平台...

《中国人工智能大模型地图研究报告》显示，截至2023年5月底，国内10亿级参数规模以上基础大模型至少已经发布79个，大模型所需数据丰富，而海量数据需要强悍的储存

数据猿·2024-01-12 08:01

【抖音干货01】如何让你的账号成为抖音平台的亲儿子

很多人都忽略了抖音注册、起名、头像今天就来聊聊最容易被忽视的玩转抖音的前期准备重点抖音到底是什么？抖音，是一款可以拍短视频的音乐创意短视频社交软件，是一个专门为年轻人打造的15秒音乐短视频。

美课小美·2024-01-12 05:19

玩转Fiddler 第五节关于数据修改，你知道多少？！

关于数据修改，你知道多少？！Fiddler功能大家都说Fiddler工具很强大，那么Fiddler到底有哪些功能呢？我们用下面这幅图就可以简单地概括总结一下：图片虽然不是很美观，但是将fiddler的功能总结得很是精辟，它高大上的内涵足以支撑简陋的门面，厉害了，老铁！言归正传，从这幅图上我们可以很清晰的看出Fiddler是用来捕获数据，并对数据进行分析，甚至可以对数据进行修改。在平时的测试工作中用

简谱儿·2024-01-12 05:49

LightGBM原理和调参

背景知识LightGBM(LightGradientBoostingMachine)是一个实现GBDT算法的框架，具有支持高效率的并行训练、更快的训练速度、更低的内存消耗、更好的准确率、支持分布式可以处理海量数据等优点

沉住气CD·2024-01-12 05:46

MySql海量数据存储与优化

一、Mysql架构原理和存储机制1.体系结构2.查询缓存3.存储引擎存储引擎的分类innodb：支持事务，具有支持回滚，提交，崩溃恢复等功能，事务安全myisam:不支持事务和外键，查询速度高Memory：利用内存创建表，访问速度非常快，因为数据在内存，而且默认使用Hash索引，但是一旦关闭，数据就会丢失Archive：归档类型引擎，仅能支持insert和select语句Csv：以CSV文件进行数

softshow1026·2024-01-12 02:44

升腾威讯怎么恢复集群_如何做到 10T 集群数据安全备份、1GB/s 快速恢复？

如果你业务产生海量数据，并极度重视数据安全、备份恢复的效率，那么TiDB

李德邻·2024-01-12 01:51

模拟数字转换器

本节主要介绍以下内容：ADC简介ADC功能框图详解参考资料:《零死角玩转STM32》“ADC—电压采集”章节一、ADC简介ADC：AnalogtoDigital，模拟数字转换器三个独立的ADC1/2/3

I am Supreme·2024-01-12 01:12

《爆肝整理》保姆级系列教程-玩转Charles抓包神器教程(6)-Charles安卓手机抓包大揭秘

1.简介Charles和Fiddler一样不但能截获各种浏览器发出的HTTP请求，也可以截获各种智能手机发出的HTTP/HTTPS请求。Charles也能截获Android和WindowsPhone等设备发出的HTTP/HTTPS请求。今天宏哥讲解和分享Charles如何截获安卓移动端发出的HTTP/HTTPS请求。2.环境准备Charles如果想要实现手机抓包，需要先满足下面3个条件：（1）电脑

北京-宏哥·2024-01-11 23:03

《爆肝整理》保姆级系列教程-玩转Charles抓包神器教程(7)-Charles苹果手机手机抓包知否知否？

1.简介Charles和Fiddler一样不但能截获各种浏览器发出的HTTP请求，也可以截获各种智能手机发出的HTTP/HTTPS请求。Charles也能截获iOS设备发出的请求，比如iPhone、iPad和MacBook等苹果设备。今天宏哥讲解和分享Charles如何截获苹果移动端发出的HTTP/HTTPS请求。2.环境准备Charles如果想要实现手机抓包，需要先满足下面3个条件：（1）电脑上

北京-宏哥·2024-01-11 23:32

《爆肝整理》保姆级系列教程-玩转Charles抓包神器教程(8)-Charles如何进行断点调试

1.简介Charles和Fiddler一样也有个强大的功能，可以修改发送到服务器的数据包，但是修改前需要拦截，即设置断点。设置断点后，开始拦截接下来所有网页，直到取消断点。这个功能可以在数据包发送之前，修改请求参数；在收到应答包，在js解析和浏览器渲染之前，修改返回结果。有了这个功能，开发者就可以修改不同参数测试server，同时也可以修改返回包测试自己的js函数，或测试页面渲染。那么怎样进行Ch

北京-宏哥·2024-01-11 23:32

大模型学习第四课

学习目标：XTuner大模型单卡低成本微调实战学习内容：Finetune简介XTuner介绍8GB显卡玩转LLM动手实战环节学习时间：20240110学习产出：Finetune简介增量预训练微调指令跟随微调

敲键盘的喵桑·2024-01-11 21:38

【STM32F103笔记】9、I2C通信——玩转OLED（OLED命令详解）

I2C通信——玩转OLED（OLED命令详解）I2C介绍I2C主机模式通信格式I2C寄存器1、Controlregister1(I2C_CR1)2、Controlregister2(I2C_CR2)3、

Keep_moving_tzw·2024-01-11 20:54

0x04-学习玩转数据结构-数组包含、搜索和删除元素

1、包含那么在很多时候我们在数据结构中存储了一些元素，我们需要查找在这些元素中是否包含某个元素，那么在这种情况下的我们就需要设置一个方法返回的是一个bool型的变量。我们来看看，在我们的这个数组中是否存在某一个元素e，对于这个方法来说实现起来就非常的简单，我们只需要从0到size整个遍历一遍我们当前数组中所有的元素，在这里要注意这里是小于size，而不是小于capacity容量。如果一但发现了da

小码农小世界·2024-01-11 17:41

XMind带你玩转思维导图

思维导图，小名心智导图，是一种实用性强、简单高效、表达发散性思维的有效图形思维工具。顾名思义，就是一种将思维形象化的方法。其实在很小的年级，我们就接触了思维导图。记得小时候科学课老师就喜欢给定几个关键词，让学生在白纸上写下由关键词联想到的所有点，最后再筛选出最佳选项用于后续的灵感碰撞，这便是运用了思维导图。如今随着各种新兴技术的发展，手绘思维导图在时间精力上往往显得不够高效，用软件绘制思维导图不失

我叫方小懒·2024-01-11 16:58

TDengine 签约西电电力

在这个过程中，电力物联网领域产生的数据采集量呈现爆炸式增长，应对海量数据处理需求成为推动行业改革的重要任务。近日，TDengine与西电电力达成签约合作，助力其智慧能源系统的优化发展。TD

涛思数据（TDengine）·2024-01-11 15:12

【GBASE】南大通用GBase 8a MPP Cluster技术特点

GBase8aMPPCluster具有多样化的平台选择、与时俱进的逻辑架构、海量数据高效存储、海量数据高速加载、海量数据高性能分析、弹性服务器资源伸缩、完善的系统资源管理、多级别的高可用、跨数据中心的数据容灾

Linux有意思吗·2024-01-11 14:53

GBase 8a MPP Cluster 数据库技术特点

GBase8aMPPCluster具有多样化的平台选择、与时俱进的逻辑架构、海量数据高效存储、海量数据高速加载、海量数据高性能分析、弹性服务器资源伸缩、完善的系统资源管理、多级别的高可用、跨数据中心的数据容灾

生命之源;·2024-01-11 14:50

GBASE南大通用分析型MPP数据库GBase8a的安全特性（1)

GBase南大通用自主研发的GBase8aMPPCluster产品（简称GBase8a)是大数据时代成熟的分析型MPP数据库，具有多样化的平台选择、与时俱进的逻辑架构、海量数据高效存储、海量数据高速加载

GBASE数据库·2024-01-11 14:17

海量数据处理数据结构之Hash与布隆过滤器

前言随着网络和大数据时代的到来，我们如何从海量的数据中找到我们需要的数据就成为计算机技术中不可获取的一门技术，特别是近年来抖音，快手等热门短视频的兴起，我们如何设计算法来从大量的视频中获取当前最热门的视频信息呢，这就是我们今天即将谈到的Hash和布隆过滤器。以下是Hash和布隆过滤器的一些常见应用：使用word文档时，如何判断某个单词是否拼写正确？网络爬虫程序时，怎么让它不去爬相同的url页面(将

abcd552191868·2024-01-11 12:11

GBASE南大通用分析型MPP数据库GBase8a的安全特性（2）

GBase南大通用自主研发的GBase8aMPPCluster产品（简称GBase8a)是大数据时代成熟的分析型MPP数据库，具有多样化的平台选择、与时俱进的逻辑架构、海量数据高效存储、海量数据高速加载

GBASE数据库·2024-01-11 11:06

第4章初识STM32—零死角玩转STM32-F429系列

第4章初识STM32全套200集视频教程和1000页PDF教程请到秉火论坛下载：www.firebbs.cn野火视频教程优酷观看网址：http://i.youku.com/firege本章参考资料：1、《STM8和STM32产品选型手册》2、SetupSTM32CubeMX-4.11.0.exe4.1什么是STM32STM32，从字面上来理解，ST是意法半导体，M是Microelectronics

0木木0·2024-01-11 10:36

玩转QrCode

生成二维码,跳转指定url导入模块[email protected]引入模块importQrcodeVuefrom'qrcode.vue'编写页面button触发二维码弹窗页面提示：扫码访问我的主页。编写方法exportdefault{name:"qrcodeDemo",components:{QrcodeVue},data(){return{showPopup:fa

java porter·2024-01-11 10:15

SeaTunnel 学习笔记

seatunnel.apache.org/文档地址：https://interestinglab.github.io/seatunnel-docs/#/1.1SeaTunnel是什么SeaTunnel是一个简单易用，高性能，能够应对海量数据的数据处理产品

十二同学啊·2024-01-11 08:39

想玩转基金投资，先收下这篇科普

自从前阵被余额宝跌破2%的新闻各种刷屏后，我的闺蜜群里关于投资的讨论明显多了起来。作为每个家的中流砥柱，眼看着物价在上涨，收益在下降，难免愁得慌。群里最开始讨论余额宝未来收益率会不会更低，这两天又开始聊基金投资。学理财，确实都绕不开基金。它是最适合我们普通人的投资的方式之一，但却容易让人眼花缭乱。所以，扫盲也是很有必要的。写这篇前，我做了不少功课，现在整理以下基金知识点跟大家分享。[if!supp

旺柴理个财·2024-01-11 06:00

AI与5G、IDC等成为数字经济的重要基础设施

通过机器学习和深度学习算法，AI可以自动处理海量数据，分析出有价值的信息和模式，为企业提供精准的决策支持。例如，在金融领域，AI可

广州硅基·2024-01-11 05:21

InternLM第2节课笔记

轻松玩转书生·浦语大模型趣味DemoInternLM模型全链条开源InternLM-7B和InternLM-20BLagent：智能体（agent）框架浦语·灵笔：InternLM-Xcomposer-

Jamiechoi·2024-01-11 05:35

【大数据架构】日志采集方案对比

整体架构日志采集端FlumeFlume的设计宗旨是向Hadoop集群批量导入基于事件的海量数据。系统中最核心的角色是agent，Flume采集系统就是由一个个agent所连接起来形成。

话数Science·2024-01-11 04:03

【玩转 TableAgent 数据智能分析】未来已来：人人都是数据分析师

文章目录前言一、数据分析的发展历程1.1数据分析的主要发展阶段：1.2数据分析工具面临的挑战与痛点：1.3数据分析工具的未来趋势二、未来已来：人人都是数据分析师2.1AI大模型对数据分析的颠覆2.2TableAgent：实现人人都是数据分析师2.3TableAgent体验：会话式数据分析，所需即所得三、TableAgent：更懂国内企业需求的Data+AI产品3.1大模型时代下企业应用痛点3.2T

李子lll·2024-01-11 03:47

玩转腾讯首发Linux内核源码《嵌入式开发笔记》

一、前言Linux内核是一种开源电脑操作系统内核，它是一个用C语言写成，符合POSIX标准的类Unix操作系统。Linux内核最早是由芬兰LinusTorvalds为尝试在英特尔x86架构上提供自由的类Unix操作系统而开发的。其主要模块分以下几个部分：存储管理、CPU和进程管理、文件系统、设备管理和驱动、网络通信，以及系统的初始化等。Linux内核越来越受欢迎，因为GNU自己的内核GNUHurd

Chinese_big_boy·2024-01-11 02:39

大模型学习之书生·浦语大模型4——基于Xtuner大模型微调实战

基于Xtuner大模型微调实战Fintune简介海量数据训练的basemodel指令微调InstructedLLM增量预训练微调增量数据不需要问题，只需要答案，只需要陈述类的数据指令跟随微调指定角色指定问题给对应的

uncle_ll·2024-01-11 00:01

HuggingFists-低代码玩转LLM RAG-准备篇

之前写了几篇关于如何使用HuggingFists系统搭建LLMRAG应用的文章。对于使用者来说，HuggingFists现在能带来两大点帮助。一是能够以低代码的方式快速处理客户的各类存量文档，如Word、Visio、PDF等。这些文档内容多样，其中不乏需要用到OCR等相关技术才能识别和抽取的内容；二是可以帮助使用者快速搭建出LLMRAG的研究环境，可以对比研究各LLM的差异，RAG的应答效果评估以

colorknight·2024-01-10 22:39

HuggingFists：低代码玩转Hugging Face

近年，由LLM引领的这波人工智能浪潮吸引了无数人的目光。众多专家预见，人工智能将引起一次新的科技革命。这次革命将影响到人类社会的各个层面。如今我们看到除去LLM已经有了广泛应用外，还有很多诸如图片生成，语音生成、音乐生成等应用也在逐渐成熟并改变着我们的生产、生活方式。对于学生、工程师、研究员等人工智能从业者而言，更吸引他们的是，人工智能应用背后的模型、技术以及原理。这就不得不提到人工智能界鼎鼎大名

colorknight·2024-01-10 22:39

鱼哥赠书活动第⑥期：《内网渗透实战攻略》看完这本书教你玩转内网渗透测试成为实战高手！！！！

鱼哥赠书活动第⑥期：《内网渗透实战攻略》如何阅读本书：本书章节介绍：本书大致目录：适合阅读对象：赠书抽奖规则:往期赠书福利：当今，网络系统面临着越来越严峻的安全挑战。在众多的安全挑战中，一种有组织、有特定目标、长时间持续的新型网络攻击日益猖獗，国际上常称之为APT（AdvancedPersistentThreat，高级持续性威胁）攻击。传统的渗透测试从外网发起攻击，并以攻破单台主机为目标。与之相比

落寞的魚丶·2024-01-10 19:49

mysql服务器管理面板_常用的几款Linux服务器管理面板

随着云服务器的飞速发展，越来越多的站长选择使用云服务器，相比之前虚拟主机，云服务器的配置和运营都不算简单，特别是Linux服务器，对于小白来说，简直是像天书一般，没有经验的小白站长如何玩转Linux服务器呢

打假男孩·2024-01-10 15:33

带你玩转modbusTCP通信

modbusTCPModbusTCP是一种基于TCP/IP协议的Modbus通信协议，它是Modbus协议的一种变体，用于在以太网上进行通信。ModbusTCP协议是一种开放的通信协议，它支持多种编程语言和操作系统，并且可以在不同的硬件和软件平台上进行通信。ModbusTCP协议使用标准的TCP/IP协议栈，通过以太网进行通信。它支持多个设备同时访问同一个ModbusTCP服务器，从而实现了高效的

最后一个bug·2024-01-10 15:32

【手机拍照】脑洞大开的拍摄技巧，玩转错位构图

一张好玩有趣的照片在给人留下深刻印象的同时也展现出拍摄者自身的个人魅力有想法脑洞大有个性而想要拍出好玩又有趣的照片可以从构图、色彩、光影这三方面入手▋玩转●构图首先，一提到照片的好玩趣味性，当然少不了奇妙的错位构图

有料Hah·2024-01-10 15:33

用LM Studio：2分钟在本地免费部署大语言模型，替代ChatGPT

无论是出于专业开发的需要，还是仅仅为了体验和玩转各种API，LMStudio都提供了一个简便、高效的解决方案。使用LMSt

AI普惠大师·2024-01-10 13:25

SpringCloud微服务技术栈（黑马）学习笔记DAY5

初识elasticsearchelasticsearch是一款非常强大的开源搜索引擎，可以帮助我们从海量数据中快速找到需要的内容。

小王要努力）·2024-01-10 12:47

秋兴——小区里果实累累

我打开台灯，拿起手机，习惯性的看资讯，回微信，上玩转盘。然后起身下床，到阳台活动身体，远眺天空，静听鸟语。秋天，乃“不是春光，胜似春光”的大好季节，是收获的季节，大可不必自寻烦恼，失意伤感地悲秋。

秦巴汉275e5477c13f·2024-01-10 10:08

【炼丹神器】wandb实践之sweep超参扫描工具

文章目录一、四步上手wandb二、四步玩转sweep参考官方文档：https://docs.wandb.ai/guides/sweeps/define-sweep-configuration一、四步上手

Thomas_Cai·2024-01-10 10:33

JVM入门

性能优化，重构，保证平台性能和稳定性根据业务场景和需求，决定技术方向，技术选型能够独立架构与设计海量数据下的高并发分布式解决方案核心功能的架构与代码编写分析系统瓶颈，解决各种疑难杂症，性能调优等为什么要学习

编程之心·2024-01-10 10:23

三天玩转新疆乌鲁木齐(下)

乌鲁木齐——Day3乌鲁木齐第三天旅游行程来啦，快拿小本本记下来啦（附民俗小知识）Day3红山公园——新疆国际会展中心——红光山生态园1.红山公园红山公园位于乌鲁木齐市中心，紧邻人民公园和友好百盛购物中心，是乌鲁木齐市内最著名的公园。公园的主体红山由紫色砂砾岩构成，山体呈赭红色，十分独特，也是乌鲁木齐的标志之一。在园内可以漫步林间、泛舟湖上，可以参观佛寺雕像等人文建筑，可以体验到各种游乐项目，登上

解忧旅行铺·2024-01-10 09:52

推荐频道

玩转海量数据