大数据量

你真的理解透彻高并发了吗？来看看架构师眼里的高并发

原因很简单：随着流量变大，会遇到各种各样的技术问题，比如接口响应超时、CPUload升高、GC频繁、死锁、大数据量存储等等，这些问题能推动我们在技术深度上不断精进。
架构学习基地·2023-09-23 10:59

【第11题】CF987C Three displays

www.luogu.com.cn/problem/solution/CF987C标签：OI、Codeforces、动态规划、区间DP题解过程动态规划题目重要推导状态迁移方程，推导出方程，代码就好些了；坑点在下面，第一次我开的太小，大数据量时直接爆
小码匠和老码农·2023-09-22 11:04

支付宝一面：多线程事务怎么回滚？说用 @Transactional 可以回去等通知了！

背景介绍1，最近有一个大数据量插入的操作入库的业务场景，需要先做一些其他修改操作，然后在执行插入操作，由于插入数据可能会很多，用到多线程去拆分数据并行处理来提高响应时间，如果有一个线程执行失败，则全部回滚
·2023-09-22 11:48

性能优化--全文搜索引擎（Elasticsearch）

二、解决办法解决大数据量的搜索问题，可以引进全文搜索引擎。它的核心技术在于全文检索技术。全文搜索引擎：在海量的数据中，检索与用户查询条件匹配的相关记录，然后按一定的排列顺序将结果返回给用
生命智峰·2023-09-22 05:29

JAVA采用S7通信协议访问西门子PLC

github.com/xingshuangs/iot-communicationgitee:https://gitee.com/xingshuang/iot-communication支持单数据读写，多数据读写，大数据量自动分包读写支持序列化批量多地址且地址不连续的读写支持读取
XS_YOUYOU·2023-09-22 02:57

Flink-SQL 读取hbase 问题总结

flink-sql读取hbase维度数据配置若维度数据插入后几乎不发生更新,或不发生更新,可以用hbase存储大数据量维度数据可以同步异步读取hbase数据,提高flink与外部hbase交互的并发数flink-sql
dymkkj·2023-09-21 21:40

面对大数据量渲染，前端工程师如何保证页面流畅性?

面对大数据量渲染的需求,前端开发工程师就面临巨大的性能优化压力。如果直接渲染全部数据,页面会出现明显的卡顿甚至假死,严重影响用户体验。那么如何在实现功能的同时,
xiexikk·2023-09-21 17:34

spring boot + sql server大数据量批量新增

先发出来注释慢慢完善/***获取类中所有属性注解@TableId和@TableField**@paraminstance*@return*@throwsNoSuchFieldException*/publicstaticMapgetDeclaredFieldsInfo(Objectinstance)throwsNoSuchFieldException{Mapmap=newHashMap();Cla
帆仔哟·2023-09-21 12:53

vue之大文件分段上传、断点续传

技术要求主要有以下几方面：支持超大数据量、10G级别以上稳定性
weixin_52041354·2023-09-21 00:19

MySQL学习系列（3）-每天学习10个知识

目录1.全文搜索（Full-TextSearch）vs.LIKE操作符2.MySQL中的大数据量处理3.分区（Partitioning）在MySQL中的作用和用法4.MySQL中的数据复制（Replication
云边散步·2023-09-20 23:05

分库分表理论

1、分库分表的原因关系性数据库易成为系统性能瓶颈、单机存储容量、连接数、处理能力等都很有限，而数据的四大特性要求又导致了数据库没法向web应用服务器那样易于扩展，在大数据量情况下就有了分库分表（也成为Sharding
小样儿的茅草屋·2023-09-20 23:38

【必示说第七期】IT系统变更风险防控

对智能运维行业来说，无论是以AI为代表新兴产业的促进，还是对金融领域监管的加强，以及对数字经济加速后带来的庞大数据量的运维需求，都会极大促进智能运维领域的健康发展。
BizSeer必示科技·2023-09-20 19:25

TDengine 入门教程①——时序数据库简单介绍和产品对比

查询次数少，但是查询能力要很强，因为每次查询都在大数据量中大海
小康师兄·2023-09-20 19:08

Vue:使用vue-codemirror编写文本比对功能

②vue-codemirror:优点:vue-codemirror搭配diff-match-patch可进行大数据量
今天周一天气晴·2023-09-20 16:29

SourceTree 提示RPC failed; result=22, HTTP code = 411的解决方法

首先进入具体的仓库中：1.从下图圈出的地方中进入设置界面image.png2.然后打开项目中隐藏的.git文件夹，在config配置文件中添加[http]postBuffer=52428800表示上传的最大数据量为
查果果·2023-09-20 14:43

Java8 Stream 数据流，大数据量下的性能效率

Stream是JavaSE8类库中新增的关键抽象，它被定义于java.util.stream（这个包里有若干流类型：Stream代表对象引用流，此外还有一系列特化流，如IntStream，LongStream，DoubleStream等），Java8引入的的Stream主要用于取代部分Collection的操作，每个流代表一个值序列，流提供一系列常用的聚集操作，可以便捷的在它上面进行各种运算。集合
风月无边·2023-09-20 04:14

api接口安全以及https

对大数据量进行加解密时性能较低。二：https下面是拷来的，写的很好，原文链接：http://baijiahao.baidu.com/s?
我们生活在果壳中·2023-09-19 08:10

BLE Mesh蓝牙mesh传输大数据包传输文件照片等大数据量通讯

1、BLEMesh数据传输现状BLEMesh网络技术是低功耗蓝牙的一个进阶版，Mesh扩大了蓝牙在应用中的规模和范围，因为它同时支持超过三万个网络节点，可以跨越大型建筑物，不仅可以使得医疗健康应用更加方便快捷，还能监测像学校这类的大型公共场所随时监测学生的安全状况。BLEMesh覆盖范围通过mesh网络的relay(中继)功能来实现的，即在mesh网络中，消息可以被临近的节点relay出去，这样经
cszhang·2023-09-18 21:32

Reactor 第十一篇 WebFlux集成Redis

而WebFlux是Spring框架提供的响应式编程模型，在处理高并发和大数据量的情况下具有很好的性能和扩展性。
·2023-09-18 15:51

删除大数据量表的列的一个好方法

很多开发的朋友可能遇到过这样的情况：一个数据量很大的表，业务需要添加一个字段（添加字段很快），在测试环境测试以后，还想再做一遍，就需要删除这个字段，这时纠结的问题发生了：删除字段是如此漫长，而且最后经常会无缘无故中断了，白花花的几个小时就这么浪费了，还搞的心情很烦躁。。。。今天发现了一个好方法，这里跟大家分享一下：造成删除字段失败的很大原因是回滚段被耗尽，下面看看我的测试：1.建两个结构和数据量一
9b282fe44e88·2023-09-18 07:11

小白备战大厂算法笔试(九)——九大排序算法

对于大数据量情况，运行效率显得尤为重要。就地性：顾名思义，原地排序通过在原数组上直接操作实现排序，无须借助额外的辅助数组，从而节省内存。通常情况下，原地排序的数据搬运操作较少，运
Palp1tate·2023-09-17 23:28

深度思考计算机网络面经之三

下面我会详细地描述滑动窗口的概念：窗口的大小：滑动窗口的大小（以字节为单位）表示发送方在等待确认之前可以发送的最大数据量。
xxx_520s·2023-09-16 21:53

Redis简介

常见Nosql数据库：​RedismemcacheHBaseMongoDB​特征：可扩容，可伸缩，大数据量下高性能，灵活的数据模型，高可用2.Redis特征：1.数据间没有必然的关联关系2.内部采用单线程机制进行工作
wjg1024·2023-09-16 12:39

系统数据导出优化

初始导出流程如下在这里插入图片描述原因分析1、业务数据处理异常出现比较少，测试的正常操作难以提前发现，系统运行过程中，产生了特定数据可能就会出现的bug2、数据量大导致内存溢出目前系统最大数据量导出为单表
little多米·2023-09-16 11:00

计算机竞赛 机器学习股票大数据量化分析与预测系统 - python 计算机竞赛

文章目录0前言1课题背景2实现效果UI界面设计web预测界面RSRS选股界面3软件架构4工具介绍Flask框架MySQL数据库LSTM5最后0前言优质竞赛项目系列，今天要分享的是机器学习股票大数据量化分析与预测系统该项目较为新颖
Mr.D学长·2023-09-14 15:50

重构优化第三方查询接口返回大数据量的分页问题

#问题描述用户线上查询其上网流量详单数据加载慢，且有时候数据没有响应全~1、经排除是调用第三方数据量达10w条响应会超时，数据没正常返回2、现有线上缓存分页也是加载慢数据不能正常展示3、第三方接口返回类似报文jsonj：4、我们要返回页面的报文json：#解决方案：>第1种方案：历史遗留问题，第三方提供的接口是一次性返回数据，没考虑到用户查询一个月的数据量会超过几万条，所以我们作为调用方也只能通过
dengxw00·2023-09-14 08:25

Reactor 第十一篇 WebFlux集成Redis

而WebFlux是Spring框架提供的响应式编程模型，在处理高并发和大数据量的情况下具有很好的性能和扩展性。
十二又十三·2023-09-14 08:21

4 分布式数据库有哪些特点？

分布式系统的核心理念是让多台服务器协同工作，完成单台服务器无法处理的任务，尤其是高并发或者大数据量的任务。  
老菜鸟的每一天·2023-09-12 07:30

BLE Mesh蓝牙mesh网多跳大数据量高带宽传输数据方法

1、BLEMesh数据传输现状BLEMesh网络技术是低功耗蓝牙的一个进阶版，Mesh扩大了蓝牙在应用中的规模和范围，因为它同时支持超过三万个网络节点，可以跨越大型建筑物，不仅可以使得医疗健康应用更加方便快捷，还能监测像学校这类的大型公共场所随时监测学生的安全状况。BLEMesh覆盖范围通过mesh网络的relay(中继)功能来实现的，即在mesh网络中，消息可以被临近的节点relay出去，这样经
cszhang·2023-09-12 04:01

用Java怎么实现有每天有1亿条记录的DB储存？MySQL上亿记录数据量的数据库如何设计？

1.这么大数据量首先建议使用大数据的DB，可以用springbatch来做类似这样的处理。定量向DB存储数据。如果需要定时，可以考虑quartz。
WeChat——E·2023-09-11 21:27

【Redis】Redis 的学习教程（八）之 BitMap、Geo、HyperLogLog

Redis除了五种常见数据类型：String、List、Hash、Set、ZSet，还有一些不常用的数据类型，如：BitMap、Geo、HyperLogLog等等，它们在各自的领域为大数据量的统计1.BitMapBitMap
sco5282·2023-09-11 11:07

数据库的基础优化

MySql优化标签（空格分隔）：数据库本文转自http://www.cnblogs.com/zhyunfe/p/6209074.html1.选取最适用的字段属性MySQL可以很好的支持大数据量的存取，但是一般说来
hainingwyx·2023-09-11 09:39

每秒插入8.5w条数据不再是mysql单表insert的极限

的极限很多同学都有这样的困扰：确实，如果你的项目体量不大，不管是数据层还是应用层，都很难接触到性能优化但是我们可以自己造数据啊今天我带来了一个demo，不仅让你能把多线程运用到实际项目中，还能用它往数据库造测试数据，让你体验下大数据量的表优化定个小目标
水原先生·2023-09-11 04:36

交换机性能参数计算公式

1、背板带宽背板带宽，是指交换机接口处理器或接口卡，和数据总线间所能吞吐的最大数据量。背板带宽标志了交换机总的数据交换能力。
OpenClouds·2023-09-10 03:42

疑难解答｜我是学Java的，想从事大数据相关工作，该怎么规划学习？

想做数据处理尤其是大数据量处理的相关工作必须兼具计算机科学基础和统计基础。现在有一个高大上的职业叫数据科学家，有人说数据科学家就是一个比程序员更懂统计的统计学家，一个比统计学家更会编程的程序员。
yoku酱·2023-09-09 13:14

向es中插入大数据量数据解决方案

1.解决方案:生成Vo实体类生成数据转换为JsonString写入本地文件再使用curl命令向es中插入json文件curl-H"Content-Type:application/json"-XPOSTlocalhost:9201/[email protected]十万条数据大概时间:3min2.遇到的问题:在生成的json文件中没有指定对应的索引和文档类型要使用root权限
Archer~·2023-09-08 21:19

前端开发中如何高效渲染大数据量

我们是袋鼠云数栈UED团队，致力于打造优秀的一站式数据中台产品。我们始终保持工匠精神，探索前端道路，为社区积累并传播经验价值。本文作者：琉易liuxianyu.cn  在日常工作中，较少的能遇到一次性往页面中插入大量数据的场景，数栈的离线开发（以下简称离线）产品中，就有类似的场景。本文将分享一个实际场景中的前端开发思路，实现高效的数据渲染，提升页面性能和用户体验。一、场景介绍  在离线的数据开发模
·2023-09-08 18:35

【面试】如何保证百万级数据的页面被流畅地访问？

“百万级数据”、“页面”、“流畅“、”访问”这四个关键字我觉得应该是跟“大数据量”、“前端”、“性能”、“请求”对标的。首先“百万级数据”根本不会存在直接加载到前端页面这种场景吧，
kida_yuan·2023-09-08 16:19

MongoDB 官方文档笔记之分片 Sharding

为什么要分片大数据量和高吞吐量会对机器性能造成较大压力，通过将数据分配到多台机器上，来降低单机的负载，提高整体性能，还可以通过增加分片来实现系统扩容，另外分片也提高了整体服务的可用性。
·2023-09-08 10:05

1分钟实现MySQL大数据量迁移任务

但在大部分场景中，可能遇到的是多张表构成的大数据量场景下的数据搬迁问题。因为搬迁数据量较大，迁移的时长、稳定性及准确性都受到极大的挑战，常见的迁移工具通常不能很好得支持。
NineData·2023-09-05 14:39

1小时迁移500GB 的MySQL数据

但在大部分场景中，可能遇到的是多张表构成的大数据量场景下的数据搬迁问题。因为搬迁数据量较大，迁移的时长、稳定性及准确性都受到极大的挑战，常见的迁移工具通常不能很好得支持。
·2023-09-05 11:03

Java elasticsearch scroll模板实现

一、scroll说明和使用场景scroll的使用场景：大数据量的检索和操作scroll顾名思义，就是游标的意思，核心的应用场景就是遍历elasticsearch中的数据；通常我们遍历数据采用的是分页，elastcisearch
Viogs·2023-09-05 07:35

数据库操作-MySQL 安装-MySQL

所以，现在我们使用**关系型数据库管理系统（RDBMS）**来存储和管理大数据量。所谓的关系型数据库，是建立在关系模型基础上的数据库，借助于集合代数等数学概念和
云生丶·2023-09-05 05:23

myBatis-plus/myBatis 流式查询，解决大数据量查询慢而且内存溢出的异常

@[TOC](myBatis-plus/myBatis流式查询，大数据量查询)myBatis这个开源框架的好处就不再赘述，myBatis-plus则更是myBatis的增强工具，框架给我提供很多查询数据方式
一个瓜_0284·2023-09-05 05:50

敏捷BI和传统BI的区别？

敏捷BI较之传统BI所体现出的快速部署、大数据量秒级分析、可视化数据分析等优点获得了市场青睐。
Acleus·2023-09-03 22:53

人工智能重塑芯片设计

姓名:刘畅学号：15020199045转自：https://zhuanlan.zhihu.com/p/48908043【嵌牛导读】：技术增加了芯片粒度，但随着架构需要处理更大数据量，设计起点也变了。
薰风初入弦Isono_5c51·2023-09-03 18:44

接口自动化之—发展背景

比如性能测试、配置测试、大数据量输入测试等。适应场景(1)回归测试，重复单一的数据录入或是击键等测试操作造成了不必要的时间浪
荒原_狼·2023-09-02 11:39

spark支持深度学习批量推理

spark适用场景大数据量自定义方法处理、类sql处理传统机器学习方法（k-means、xgboost、lr…）分布式深度学习推理目前在10亿+数据量的推理场景中使用，需要用户自己实现批数据准备，基于RDD
死亡之翼归来·2023-09-01 05:41

el-table中保留分页选中

对于数据表格，貌似这种需求不是非常常用，对于小数据量来说，checkbox就已经能够足够满足我们的要求，但往往对于大数据量可能需要通过表格来实现选择。
会功夫的李白·2023-08-31 17:59

Vue源码之目录结构

circleci//包含CircleCI持续集成/持续部署工具的配置文件├─.github//项目相关的说明文档，上面的说明文档就在此文件夹├─benchmarks//基准,性能测试文件，Vue的跑分demo，比如大数据量的
一枚蛋·2023-08-31 10:59
上一页 6 7 8 9 10 11 12 13 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他