E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
亿级数据量技术探索
Redis系列--渐进式哈希
随着Redis的操作越来越多,dict中保存的
数据量
也会动态变化,当
数据量
增加或者减少到一定的程度,为了让负载因子维持在一个合
奇涛技术栈
·
2024-02-10 03:06
Redis系列
redis
哈希
哈希表
Redis scan渐进式遍历
redis查看key的通配符是keysfield*但是这个是全redis扫描,如果
数据量
比较多,而且在redis线程单线程的读写情况写,会造成性能降低可以通过scan的方式,分页查询语法:SCANcursor
Ye7073
·
2024-02-10 03:05
redis
redis
数据库
缓存
HTAP 能够取代 OLAP 吗?
在互联网浪潮出现之前,企业的
数据量
普遍不大,特别是核心的业务数据,通常一个单机的数据库就可以保存。那时候的存储并不需要复杂的架构,所有的线上请求OLTP和后台分析OLAP都跑在同一个数据库实例上
北漂一号
·
2024-02-10 02:26
深度学习的进展
随着算法和模型的改进、计算能力的提升以及
数据量
的增长,深度学习的应用范围不断扩大,对各行各业产生
Joseph DeRoss(周曦)
·
2024-02-10 02:10
深度学习
人工智能
优雅实现Springboot+ Mybatis动态数据源
数据量
超过500万行就要考虑分库分表和读写分离,那么我们在正向操作和逆向操作的时候,就需要动态的切换到相应的数据库,进行相关的操作。1.2解决思路现在
蹦跶的蜗牛
·
2024-02-10 02:07
Mybatis
SpringBoot
mybatis
spring
boot
java
面试官:
数据量
很大,分页查询很慢,怎么优化?
当需要从数据库查询的表有上万条记录的时候,一次性查询所有结果会变得很慢,特别是随着
数据量
的增加特别明显,这时需要使用分页查询。对于数据库分页查询,也有很多种方法和优化的点。
Tinner丶
·
2024-02-10 01:13
Databend 性能调优-基础篇
尤其是大数据领域,比如OLAP数据库通常服务于海量数据即席查询分析的场景,一些看似不起眼的底层调优却能在
数据量
级上进行优化叠加,从而达到优化系统整体分析查询的性能目的,可谓星星之火可以燎原。
Databend
·
2024-02-09 23:27
大数据思考:面对海量数据时,选择哪种模式才是更适合自己的?
虽然我们总是希望
数据量
越大越好,但近年来组织已经开始从追求大数据转向选择小而
Akamai中国
·
2024-02-09 18:47
云计算
大数据
云计算
Akamai
Linode
数据仓库
【架构】Excel导入数据使用双异步后,从 191s 优化到 2s
一、一般我会这样做:通过POI读取需要导入的Excel;以文件名为表名、列头为列名、并将数据拼接成sql;通过JDBC或mybatis插入数据库;操作起来,如果文件比较多,
数据量
都很大的时候,会非常慢。
奔向理想的星辰大海
·
2024-02-09 16:57
Java
技术研发
SpringBoot
架构
excel
数据库
DMA直接内存访问,STM32实现高速数据传输使用配置
1、DMA运用场景随着智能化、信息化的不断推进,嵌入式设备的数据处理量也呈现指数级增加,因此对于巨大的
数据量
处理的情况时,必须采取其它的方式去替CPU减负,以保证嵌入式设备性能。
牛马大师兄
·
2024-02-09 12:58
STM32系列经验教程
stm32
单片机
嵌入式硬件
深入挖掘AI应用场景的存储架构
以下是一种可能的研究路径:理解AI应用需求数据类型与规模:AI应用通常涉及大量数据处理,包括结构化、非结构化和半结构化数据,且
数据量
呈现指数级增长,因此首先需了解不同AI场景下的数据特点和规模。
古猫先生
·
2024-02-09 11:20
云技术
产业动态
人工智能
架构
利用低代码 BI 平台获得竞争优势:实现数据分析与业务决策的革新
转向数字解决方案已成倍增加了跨行业生成的
数据量
。大量数据可以更好地了解运营、客户和市场,还可以推动任何组织的创新。但是仅仅收集这些数据是不够的——你必须能够利用它来采取行动。
ZOHO卓豪
·
2024-02-09 11:47
低代码
数据分析
数据挖掘
iOS高效图片压缩:HEIC图像压缩
该格式由MPEG在2013年开发,声称保存的
数据量
是JPEG的两倍,并且支持多种类型的图像数据。
DearDan_f92e
·
2024-02-09 11:26
公司大数据展示模板【大屏可视化项目案例-23】
项目页面分析2.1呈现效果页面分析2.2页面加载时隐藏加载动画2.3样式布局三.本案例完整源码下载一.公司大数据展示模板【大屏可视化项目案例-23】1.1项目背景随着业务规模的不断扩大,公司面临着庞大且复杂的
数据量
一见已难忘的申公豹
·
2024-02-09 11:06
python
信息可视化
大屏
大数据展示
数据分析
11g(win)迁移升级12c(linux)
背景前言:原环境为11202的windows环境,
数据量
较大约20T目标环境为12201的linux环境使用linux和windows的数据文件互通原理,原库关库拷贝数据文件后,在目标端启动并升级升级流程
foxytale
·
2024-02-09 09:08
linux
运维
服务器
计算机网络基本知识(一)
吞吐量、时延、利用率速率记忆要点:10的三次方记忆要点:2的10次方带宽、吞吐量带宽单位:Hz网络的通信线路传送数据的能力带宽变大,单位时间内传输的数据更多了吞吐量单位时间内通过某个网络(或信道、接口)的
数据量
单位
4v1d
·
2024-02-09 08:33
计算机网络
计算机网络
网络
Git学习
特点:速度简单的设计对非线性开发模式的强力支持(允许上千个并行开发的分支)完全分布式有能力高效管理类似Linux内核一样的超大规模项目(速度和
数据量
)二、安装Git各平台安装包下载地址为:http://
星石传说
·
2024-02-09 07:27
其它
git
学习
elasticsearch
【Mybatis的一二级缓存】
缓存其实就是存储在内存中的临时数据,这里的
数据量
会比较小,一般来说,服务器的内存也是有限的,不可能将所有的数据都放到服务器的内存里面,所以,只会把关键数据放到缓存中,缓存因为速度快,使用方便而出名!
wming666
·
2024-02-09 06:40
java
oracle
mybatis
计算机网络带宽是什么意思,带宽是什么有什么意义
带宽是什么有什么意义带宽应用的领域非常多,可以用来标识信号传输的数据传输能力、标识单位时间内通过链路的
数据量
、标识显示器的显示能力。下面是YJBYS小编整理的相关带宽知识,希望对你有帮助!
我来看看就好1123
·
2024-02-09 05:36
计算机网络带宽是什么意思
频宽与带宽
在数字设备中,带宽指单位时间能通过链路的
数据量
。通常以bps来表示,即每秒可传输之位数。在IEEE802.11b/g标准中,Wi-Fi工作在2.4GHz频段;在IEEE802.11a
qq_42754484
·
2024-02-09 05:06
网络
数字图像处理实验记录八(图像压缩实验)
前言:做这个实验的时候很忙,就都是你抄我我抄你了一、基础知识1.为什么要进行图像压缩:图像的
数据量
巨大,对计算机的处理速度、存储容量要求高。
泉绮
·
2024-02-09 02:39
数字图像处理实验记录
图像处理
matlab
数据库索引设计原则与失效情况
索引创建原则
数据量
较大,且查询频繁的表:对于
数据量
庞大且频繁查询的表,索引可以有效提升查询速度,因此在这种情况下应优先考虑创建索引。
DecemberZero2
·
2024-02-09 01:15
数据库
STM32CAN总线接口发送和接收数据
CAN协议基础知识I2C.SPI总线多用于短距离传输,协议简单,
数据量
少,主要用于IC之间的通讯,而CAN总线则不同,CAN(ControllerAreaNetwork)总线定义了更为优秀的物理层、数据链路层
风花树_1987
·
2024-02-08 21:31
使用Python进行数据的描述性分析,用少量的描述性指标来概括大量的原始数据
在进行数据分析时,当研究者得到的
数据量
很小时,可以通过直接观察原始数据来获得所有的信息。但是,当得到的
数据量
很大时,就必须借助各种描述性指标来完成对数据的描述工作。
数据科学作家
·
2024-02-08 19:41
python
Python入门
数据分析
Python基础
Python学习
数据处理
统计分析
Mysql大表添加字段失败解决方案
表
数据量
不仅大,而且是一个热点表,访问频率特别高,而且该表的访问是在一个大事务中。加字段的时候一直在等待获取MDL写锁。这个等待也影响了后续表访问对MDL读锁的获取,导致后面的查询也都被堵塞了。
RobinCode
·
2024-02-08 18:09
知识分享
mysql
数据库
arcgis地理空间数据库学习记录02-地理数据库迁移
二、地理数据库迁移2.1
数据量
不是很多的情况下直接通过ArcMap导出到本地,之后再导入到新库2.2
数据量
较多的情况下对于Oracle数据库,可以使用oracle的数据泵工具进行地理数据库的迁移。
炒菜不加盐
·
2024-02-08 13:40
SDE
arcsde
oracle
arcgis
arcgis地理空间数据库学习记录01-复制地理数据库
最近梳理了一下arcgis的地理数据库,个人一直觉得arcgis的地理空间数据库是一个非常厉害的技术,但是除非大一些的企事业单位,用的人不多,一方面是
数据量
可能不是很多,另一方面是熟悉的人很少,需要相应的技术人员进行维护
炒菜不加盐
·
2024-02-08 13:09
SDE
arcsde
arcgis
地理数据库
在Godot中创建和使用SQLite数据库
在小
数据量
的时候可能没有什么问题,但是涉及大量的数据时,文件操作就会显得十分低效。另一方面,如果你想用Godot开发一些复杂的应用程序,尤其是与结构化存储的数据有关的,基于文件存
巽星石
·
2024-02-08 10:33
Godot
Godot代码1000例
sqlite
数据库
godot
自然语言处理(NLP)-第三方库(工具包):Faiss【向量最邻近检索工具】【为稠密向量提供高效相似度搜索】【多种索引构建方式,可根据硬件资源、
数据量
选择合适方式】【支持十亿级别向量的搜索】
一、Faiss介绍Faiss是FacebookAI团队开源的针对聚类和相似性搜索库,为稠密向量提供高效相似度搜索和聚类,支持十亿级别向量的搜索,是目前最为成熟的近似近邻搜索库。它包含多种搜索任意大小向量集(备注:向量集大小由RAM内存决定)的算法,以及用于算法评估和参数调整的支持代码。Faiss用C++编写,并提供与Numpy完美衔接的Python接口。除此以外,对一些核心算法提供了GPU实现。相
u013250861
·
2024-02-08 10:07
机器学习/ML
#
RS/召回层
#
LLM/数据处理
聚类
自然语言处理
Faiss
Spring AI - 使用向量数据库实现检索式AI对话
因为对话有最大Token的限制,因此很多场景下我们是无法直接将所有的数据发给AI的,一方面在
数据量
很大的情况下
PG Thinker
·
2024-02-08 07:44
GitHub开源项目
Spring
ChatGPT
spring
人工智能
数据库
flink反压及解决思路和实操
1.反压原因反压其实就是task处理不过来,算子的sub-task需要处理的
数据量
>能够处理的
数据量
,比如:当前某个sub-task只能处理1wqps的数据,但实际上到来2wqps的数据,但是实际只能处理
orange大数据技术探索者
·
2024-02-08 07:28
#
flink迁移
flink
大数据
Flink反压
各款Excel、word在线预览工具对比分析以及onlyoffice预览Excel加载时间长的解决方案
xlsx文件,onlyoffice服务器会自动将该文件转换为xlsx文件再进行渲染,耗时慢主要是这个转换的过程很慢,如果使用xlsx文件,就会跳过这一步,直接渲染,速度上肉眼可见的快;下面视频是展示两个相同
数据量
的文件
luopeng207663436
·
2024-02-08 07:24
excel
word
onlyoffice
excel预览
word预览
后端的技术设计文档
5.性能评估(非必需)对于并发量和
数据量
乐之者v
·
2024-02-08 06:45
A1-系统设计与架构
java
MySQL 处理大数据表的 3 种方案,建议收藏!!
场景评估表数据体量出现问题的原因如何解决单表
数据量
太大,查询变慢的问题方案一:数据表分区方案二:数据库分表分区分表的区别分区分表的联系分库分表存在的问题方案三:冷热归档以上三种方案我们如何选型场景当我们业务数据库表中的数据越来越多
永钊源码
·
2024-02-08 05:47
程序员
mysql
数据库
网络协议
网络
开发语言
100000行级别数据的 Excel 导入优化之路
在接手之前可能由于之前导入的
数据量
并不多没有对效率有过高的追求。
程序员蜗牛g
·
2024-02-08 04:02
springboot
代码优化技巧
excel
spring
boot
java
vue树形多列_基于element-ui el-table 开发虚拟列表(树形列表)
前言基于之前支持表单验证的el-table开发完成后,在
数据量
过大的时候,会出现渲染慢,表格卡顿等致命问题,而element-ui的el-table本身没有像antd一样提供虚拟列表的demo和相关支持
weixin_39957186
·
2024-02-07 19:16
vue树形多列
机器连接和边缘计算
在许多应用程序中,由于
数据量
非常大,以至于并非所有数据都可以传输到中央(云)平台,或者,应用程序需要很短的延迟时间,而这些只能通过在机器附近处理数据的方式来实现。
SoftingChina
·
2024-02-07 18:24
Softing
工业自动化
边缘计算
容器技术
网关
物联网
机器连接
ts总结4、TypeScript 的数组类型
一、TS中的数组类型:所有成员的类型必须相同,但是
数据量
可以是无限量的,当然也可以是零成员二、写法数组的第一种写法://第一种:在数组成员的类型后面,加上一对方括号。
皓月当空hy
·
2024-02-07 18:22
typscript
typescript
什么是大模型
随着
数据量
的不断增加和模型的复杂度提高,传统的机器学习方法已经无法有效处理,因此大模型成为了解决这一挑战的重要工具之一。本文将介绍大模型的基本概念、应用场景以及一些常见的大模型
码农阿豪
·
2024-02-07 17:10
好“物”分享
大模型
购物车商品数量编辑实现
绑定handleItemNumEdit事件,带上id和operation参数–{{item.num}}+编辑逻辑,获取operation,id,得到cart,判断索引,设置num
数据量
//商品数量的编辑功能
九品印相
·
2024-02-07 17:23
分布式小程序电商2
vue.js
前端
javascript
vue:sharedWorker共享工作者线程的使用
一.使用场景某项目某接口,请求返回的
数据量
较大,消耗服务器资源严重。如果在web端打开多个页签,同时请求该接口,会造成服务端负荷过重。这时,共享工作者线程(SharedWorker)就派上了用场。
小飞牛牛
·
2024-02-07 16:00
详解MYSQL中的平均值组大小
文章目录平均值组大小了解平均值组大小MySQL什么时候会使用平均值组大小平均值组大小对于索引选取的影响平均值组大小了解平均值组大小总
数据量
/值组=平均值组大小值组是一组具有相同键前缀值的行,及所有相等的键为一个值组
少林码僧
·
2024-02-07 16:19
mysql
数据库
深度学习的探索与实践
随着算法和模型的改进、计算能力的提升以及
数据量
的增长,深度学习的应用范围不断扩大,对各行各业产生了深远的影响。方向一:深度学习的
爱内卷的学霸一枚
·
2024-02-07 16:38
深度学习
什么是对象存储系统
对象云存储有助于应对不断增长的
数据量
。它是当今可用的最有效的解决方案之一。什么是对象存储简单来说,就是存储非结构化数据。可扩展性是对象存储本质上是一种云服务的原因。
互联网哪些事情
·
2024-02-07 15:28
服务器
云服务器
什么是对象存储
对象云存储有什么优势
什么是对象存储系统
特网云
对象存储系统是什么
java mysql并发 流_Mysql中使用JDBC流式查询避免
数据量
过大导致OOM
一、前言java中MySQLJDBC封装了流式查询操作,通过设置几个参数,就可以避免一次返回数据过大导致OOM。二、如何使用2.1之前查询publicvoidselectData(StringsqlCmd)throwsSQLException{validate(sqlCmd);Connectionconn=null;PreparedStatementstmt=null;ResultSetrs=nu
weixin_39595008
·
2024-02-07 13:47
java
mysql并发
流
MySQL如何流式读取千万级大数据(数据分析)
流式查询的流程代码实现普通的查询方法代码流式查询方法代码执行的测试结果与分析流式读取优势应用场景随着系统的运作,业务数据的流入,我们系统中的信息也越来越多,在
数据量
达到百万甚至千万级以上时,我们如何
祥天呀
·
2024-02-07 13:46
数据库
mysql
数据库
sql
jdbc
MySQL 流式查询
大
数据量
查询容易OOM?试试MySQL流式查询一、前言 程序访问MySQL数据库时,当查询出来的
数据量
特别大时,数据库驱动把加载到的数据全部加载到内存里,就有可能会导致内存溢出(OOM)。
午夜.幽魂.男
·
2024-02-07 13:15
数据库
mysql
流式查询
JDBC流式查询工具类
二、当遇到大
数据量
数据读取时,jdbc的流式读取可以提高一定的查询速度,对内存占用的优化比较明显。
@jtfBoby
·
2024-02-07 13:13
java
mysql
流式查询
java
前端
服务器
jdbc开启mysql流式处理
目录环境结论分析环境jdk8mysql-connector-java8.0.22结论在查询
数据量
较大时,为避免内存占用过大,除了使用分页查询外,还可以使用jdbc流式处理。
liangbo7
·
2024-02-07 13:40
java
mysql
人工智能 | 深度学习的进展
随着算法和模型的改进、计算能力的提升以及
数据量
的增长,深度学习的应用范围不断扩大,对各行各业产生了深远的影响。深度
卡尔曼的BD SLAMer
·
2024-02-07 13:02
人工智能
人工智能
深度学习
进展
机器学习
上一页
2
3
4
5
6
7
8
9
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他