亿级数据量技术探索

利用低代码 BI 平台获得竞争优势：实现数据分析与业务决策的革新

转向数字解决方案已成倍增加了跨行业生成的数据量。大量数据可以更好地了解运营、客户和市场，还可以推动任何组织的创新。但是仅仅收集这些数据是不够的——你必须能够利用它来采取行动。
ZOHO卓豪·2024-02-09 11:47

iOS高效图片压缩:HEIC图像压缩

该格式由MPEG在2013年开发，声称保存的数据量是JPEG的两倍，并且支持多种类型的图像数据。
DearDan_f92e·2024-02-09 11:26

公司大数据展示模板【大屏可视化项目案例-23】

项目页面分析2.1呈现效果页面分析2.2页面加载时隐藏加载动画2.3样式布局三.本案例完整源码下载一.公司大数据展示模板【大屏可视化项目案例-23】1.1项目背景随着业务规模的不断扩大，公司面临着庞大且复杂的数据量
一见已难忘的申公豹·2024-02-09 11:06

11g（win）迁移升级12c（linux）

背景前言：原环境为11202的windows环境，数据量较大约20T目标环境为12201的linux环境使用linux和windows的数据文件互通原理，原库关库拷贝数据文件后，在目标端启动并升级升级流程
foxytale·2024-02-09 09:08

计算机网络基本知识（一）

吞吐量、时延、利用率速率记忆要点：10的三次方记忆要点：2的10次方带宽、吞吐量带宽单位：Hz网络的通信线路传送数据的能力带宽变大，单位时间内传输的数据更多了吞吐量单位时间内通过某个网络（或信道、接口）的数据量单位
4v1d·2024-02-09 08:33

Git学习

特点：速度简单的设计对非线性开发模式的强力支持（允许上千个并行开发的分支）完全分布式有能力高效管理类似Linux内核一样的超大规模项目（速度和数据量）二、安装Git各平台安装包下载地址为：http://
星石传说·2024-02-09 07:27

【Mybatis的一二级缓存】

缓存其实就是存储在内存中的临时数据，这里的数据量会比较小，一般来说，服务器的内存也是有限的，不可能将所有的数据都放到服务器的内存里面，所以，只会把关键数据放到缓存中，缓存因为速度快，使用方便而出名！
wming666·2024-02-09 06:40

计算机网络带宽是什么意思,带宽是什么有什么意义

带宽是什么有什么意义带宽应用的领域非常多，可以用来标识信号传输的数据传输能力、标识单位时间内通过链路的数据量、标识显示器的显示能力。下面是YJBYS小编整理的相关带宽知识，希望对你有帮助!
我来看看就好1123·2024-02-09 05:36

频宽与带宽

在数字设备中，带宽指单位时间能通过链路的数据量。通常以bps来表示，即每秒可传输之位数。在IEEE802．11b／g标准中，Wi－Fi工作在2．4GHz频段；在IEEE802．11a
qq_42754484·2024-02-09 05:06

数字图像处理实验记录八（图像压缩实验）

前言：做这个实验的时候很忙，就都是你抄我我抄你了一、基础知识1．为什么要进行图像压缩：图像的数据量巨大，对计算机的处理速度、存储容量要求高。
泉绮·2024-02-09 02:39

数据库索引设计原则与失效情况

索引创建原则数据量较大，且查询频繁的表：对于数据量庞大且频繁查询的表，索引可以有效提升查询速度，因此在这种情况下应优先考虑创建索引。
DecemberZero2·2024-02-09 01:15

STM32CAN总线接口发送和接收数据

CAN协议基础知识I2C.SPI总线多用于短距离传输,协议简单,数据量少,主要用于IC之间的通讯,而CAN总线则不同，CAN(ControllerAreaNetwork)总线定义了更为优秀的物理层、数据链路层
风花树_1987·2024-02-08 21:31

使用Python进行数据的描述性分析，用少量的描述性指标来概括大量的原始数据

在进行数据分析时，当研究者得到的数据量很小时，可以通过直接观察原始数据来获得所有的信息。但是，当得到的数据量很大时，就必须借助各种描述性指标来完成对数据的描述工作。
数据科学作家·2024-02-08 19:41

Mysql大表添加字段失败解决方案

表数据量不仅大，而且是一个热点表，访问频率特别高，而且该表的访问是在一个大事务中。加字段的时候一直在等待获取MDL写锁。这个等待也影响了后续表访问对MDL读锁的获取，导致后面的查询也都被堵塞了。
RobinCode·2024-02-08 18:09

arcgis地理空间数据库学习记录02-地理数据库迁移

二、地理数据库迁移2.1数据量不是很多的情况下直接通过ArcMap导出到本地，之后再导入到新库2.2数据量较多的情况下对于Oracle数据库，可以使用oracle的数据泵工具进行地理数据库的迁移。
炒菜不加盐·2024-02-08 13:40

arcgis地理空间数据库学习记录01-复制地理数据库

最近梳理了一下arcgis的地理数据库，个人一直觉得arcgis的地理空间数据库是一个非常厉害的技术，但是除非大一些的企事业单位，用的人不多，一方面是数据量可能不是很多，另一方面是熟悉的人很少，需要相应的技术人员进行维护
炒菜不加盐·2024-02-08 13:09

在Godot中创建和使用SQLite数据库

在小数据量的时候可能没有什么问题，但是涉及大量的数据时，文件操作就会显得十分低效。另一方面，如果你想用Godot开发一些复杂的应用程序，尤其是与结构化存储的数据有关的，基于文件存
巽星石·2024-02-08 10:33

自然语言处理(NLP)-第三方库(工具包)：Faiss【向量最邻近检索工具】【为稠密向量提供高效相似度搜索】【多种索引构建方式，可根据硬件资源、数据量选择合适方式】【支持十亿级别向量的搜索】

一、Faiss介绍Faiss是FacebookAI团队开源的针对聚类和相似性搜索库，为稠密向量提供高效相似度搜索和聚类，支持十亿级别向量的搜索，是目前最为成熟的近似近邻搜索库。它包含多种搜索任意大小向量集（备注：向量集大小由RAM内存决定）的算法，以及用于算法评估和参数调整的支持代码。Faiss用C++编写，并提供与Numpy完美衔接的Python接口。除此以外，对一些核心算法提供了GPU实现。相
u013250861·2024-02-08 10:07

Spring AI - 使用向量数据库实现检索式AI对话

因为对话有最大Token的限制，因此很多场景下我们是无法直接将所有的数据发给AI的，一方面在数据量很大的情况下
PG Thinker·2024-02-08 07:44

flink反压及解决思路和实操

1.反压原因反压其实就是task处理不过来，算子的sub-task需要处理的数据量>能够处理的数据量，比如：当前某个sub-task只能处理1wqps的数据，但实际上到来2wqps的数据，但是实际只能处理
orange大数据技术探索者·2024-02-08 07:28

各款Excel、word在线预览工具对比分析以及onlyoffice预览Excel加载时间长的解决方案

xlsx文件，onlyoffice服务器会自动将该文件转换为xlsx文件再进行渲染，耗时慢主要是这个转换的过程很慢，如果使用xlsx文件，就会跳过这一步，直接渲染，速度上肉眼可见的快；下面视频是展示两个相同数据量的文件
luopeng207663436·2024-02-08 07:24

后端的技术设计文档

5.性能评估(非必需)对于并发量和数据量
乐之者v·2024-02-08 06:45

MySQL 处理大数据表的 3 种方案，建议收藏！！

场景评估表数据体量出现问题的原因如何解决单表数据量太大，查询变慢的问题方案一：数据表分区方案二：数据库分表分区分表的区别分区分表的联系分库分表存在的问题方案三：冷热归档以上三种方案我们如何选型场景当我们业务数据库表中的数据越来越多
永钊源码·2024-02-08 05:47

100000行级别数据的 Excel 导入优化之路

在接手之前可能由于之前导入的数据量并不多没有对效率有过高的追求。
程序员蜗牛g·2024-02-08 04:02

vue树形多列_基于element-ui el-table 开发虚拟列表(树形列表)

前言基于之前支持表单验证的el-table开发完成后，在数据量过大的时候，会出现渲染慢，表格卡顿等致命问题，而element-ui的el-table本身没有像antd一样提供虚拟列表的demo和相关支持
weixin_39957186·2024-02-07 19:16

机器连接和边缘计算

在许多应用程序中，由于数据量非常大，以至于并非所有数据都可以传输到中央（云）平台，或者，应用程序需要很短的延迟时间，而这些只能通过在机器附近处理数据的方式来实现。
SoftingChina·2024-02-07 18:24

ts总结4、TypeScript 的数组类型

一、TS中的数组类型：所有成员的类型必须相同，但是数据量可以是无限量的，当然也可以是零成员二、写法数组的第一种写法：//第一种：在数组成员的类型后面，加上一对方括号。
皓月当空hy·2024-02-07 18:22

什么是大模型

随着数据量的不断增加和模型的复杂度提高，传统的机器学习方法已经无法有效处理，因此大模型成为了解决这一挑战的重要工具之一。本文将介绍大模型的基本概念、应用场景以及一些常见的大模型
码农阿豪·2024-02-07 17:10

购物车商品数量编辑实现

绑定handleItemNumEdit事件，带上id和operation参数–{{item.num}}+编辑逻辑，获取operation,id，得到cart，判断索引，设置num数据量//商品数量的编辑功能
九品印相·2024-02-07 17:23

vue:sharedWorker共享工作者线程的使用

一.使用场景某项目某接口，请求返回的数据量较大，消耗服务器资源严重。如果在web端打开多个页签，同时请求该接口，会造成服务端负荷过重。这时，共享工作者线程(SharedWorker)就派上了用场。
小飞牛牛·2024-02-07 16:00

详解MYSQL中的平均值组大小

文章目录平均值组大小了解平均值组大小MySQL什么时候会使用平均值组大小平均值组大小对于索引选取的影响平均值组大小了解平均值组大小总数据量/值组=平均值组大小值组是一组具有相同键前缀值的行，及所有相等的键为一个值组
少林码僧·2024-02-07 16:19

深度学习的探索与实践

随着算法和模型的改进、计算能力的提升以及数据量的增长，深度学习的应用范围不断扩大，对各行各业产生了深远的影响。方向一：深度学习的
爱内卷的学霸一枚·2024-02-07 16:38

什么是对象存储系统

对象云存储有助于应对不断增长的数据量。它是当今可用的最有效的解决方案之一。什么是对象存储简单来说,就是存储非结构化数据。可扩展性是对象存储本质上是一种云服务的原因。
互联网哪些事情·2024-02-07 15:28

java mysql并发 流_Mysql中使用JDBC流式查询避免数据量过大导致OOM

一、前言java中MySQLJDBC封装了流式查询操作，通过设置几个参数，就可以避免一次返回数据过大导致OOM。二、如何使用2.1之前查询publicvoidselectData(StringsqlCmd)throwsSQLException{validate(sqlCmd);Connectionconn=null;PreparedStatementstmt=null;ResultSetrs=nu
weixin_39595008·2024-02-07 13:47

MySQL如何流式读取千万级大数据（数据分析）

流式查询的流程代码实现普通的查询方法代码流式查询方法代码执行的测试结果与分析流式读取优势应用场景随着系统的运作，业务数据的流入，我们系统中的信息也越来越多，在数据量达到百万甚至千万级以上时，我们如何
祥天呀·2024-02-07 13:46

MySQL 流式查询

大数据量查询容易OOM？试试MySQL流式查询一、前言 程序访问MySQL数据库时，当查询出来的数据量特别大时，数据库驱动把加载到的数据全部加载到内存里，就有可能会导致内存溢出（OOM）。
午夜.幽魂.男·2024-02-07 13:15

JDBC流式查询工具类

二、当遇到大数据量数据读取时，jdbc的流式读取可以提高一定的查询速度，对内存占用的优化比较明显。
@jtfBoby·2024-02-07 13:13

jdbc开启mysql流式处理

目录环境结论分析环境jdk8mysql-connector-java8.0.22结论在查询数据量较大时，为避免内存占用过大，除了使用分页查询外，还可以使用jdbc流式处理。
liangbo7·2024-02-07 13:40

人工智能 | 深度学习的进展

随着算法和模型的改进、计算能力的提升以及数据量的增长，深度学习的应用范围不断扩大，对各行各业产生了深远的影响。深度
卡尔曼的BD SLAMer·2024-02-07 13:02

Elasticsearch单个索引数据量过大的优化

当Elasticsearch（ES）中的单个索引（index）的数据量变得过大时，可能会遇到性能下降、查询缓慢、管理困难等问题。
围城客·2024-02-07 11:46

Redis核心技术与实战【学习笔记】 - 26.Redis数分布优化（应对数据倾斜问题）

数据倾斜有两类：数据量倾斜：在某些情况下，实例上的数据分布不均衡，某个实例上的数据特别多。数据访问
陈建111·2024-02-07 11:10

python动态交互图表_Python 调用 matplotlib 实现交互式数据可视化图表案例

交互式的数据可视化图表是NewIT新技术的一个应用方向，在过去，用户要在网页上查看数据，基本的实现方式就是在页面上显示一个表格出来，的而且确，用表格的方式来展示数据，显示的数据量会比较大，但是，这种数据展示方式很不直观
weixin_39585617·2024-02-07 10:23

Redis核心技术与实战【学习笔记】 - 27.限制Redis Cluster规模的因素（通信开销）

简述RedisCluster能保存的数据量以及支撑的吞吐量，跟集群实例规模相关。Redis官方给出了RedisCluster的规模上线，就是一个集群运行1000个实例。
陈建111·2024-02-07 07:13

在Java中使用redisTemplate操作缓存

背景在最近的项目中，有一个需求是对一个很大的数据库进行查询，数据量大概在几千万条。但同时对查询速度的要求也比较高。
SH的全栈笔记·2024-02-07 04:32

【云原生进阶之PaaS中间件】第三章Kafka-4.2-生产者工作原理剖析

随后会经过序列化，kafka并没有采用Java提供的序列化器，而是自己实现的序列化器，但是Java提供的序列化器，会在原有数据的基础上，增加很多的用于安全校验的数据，在大数据的场景下，每次传输的数据量很大
江中散人·2024-02-07 02:27

存算一体：架构创新，打破算力极限

1需求背景在全球数据量呈指数级暴涨，算力相对于AI运算供不应求的现状下，存算一体技术主要解决了高算力带来的高能耗成本矛盾问题，有望实现降低一个数量级的单位算力能耗，在功耗敏感的百亿级AIoT设备上、高能耗的数据中心
YoungerChina·2024-02-07 02:24

抖音直播间弹幕解析：点赞，评论，送礼，进入提示等（3：protobuf中proto文件的编写）

Protobuf之所以出色，原因如下：数据量低：Protobuf使用二进制格式，该格式比JSON
Softboy_TM·2024-02-07 01:40

C++之 位图&布隆过滤器

实际应用中一般用来在特别大的数据量中查找元素是否存在
Flying clouds·2024-02-07 01:02

【数字图像处理】2021期末复习考试重点大纲

本文目录数字图像处理期末复习1.填空（每空2分，共20分）1.均值滤波计算2.中值滤波计算3.水平方向一阶锐化计算4.无方向一阶锐化计算5.位图文件存储所需要的数据量计算2.问答（每题10分，共10分）
Rose J·2024-02-07 00:50

网络爬虫根据尺寸分类

目标规模特点技术要求爬取网页玩转网页小规模数量小，爬取速度不敏感使用Requests库就可以满足需求爬取网站爬取系列网站中规模数据量较大，对爬取速度敏感，爬慢了，数据就可能更新了可以使用Scrapy库来实现爬取全网大规模一般用于搜索引擎
WongKyunban·2024-02-06 20:49
上一页 4 5 6 7 8 9 10 11 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他