数据量

注册消防师技术实务框架分析

之所以难，是因为这门考试知识点特别多、数据量大，而且数据有些一样、有些相近、有些不一样。另外，不仅要记准知识点，还要会运用，且还要前后几个知识点串联起来运用，如果有一处知识不知道，那么题还是做不出来。
呼呼海爸·2024-02-19 23:03

MySQL篇之分库分表

一、为什么要分库分表1.目的1.分担了访问压力2.解决存储压力2.分库分表的时机1.前提，项目业务数据逐渐增多，或业务发展迅速，单表的数据量达1000W或20G以后。
学java的冲鸭·2024-02-19 22:06

hadoot离线与实时的电影推荐系统-计算机毕业设计源码10338

大量的电影数据的管理运营随着数据量的增长也变得越来越复杂，因此，如何综合各种算法的优势给用
FYKJ_2010·2024-02-19 22:55

作业帮 x TiDB丨多元化海量数据业务的支撑

随着公司产品和业务场景越来越丰富，数据量越来越大，业务方对数据库的使用需求也越来越多元化。本文介绍了作业帮对TiDB的探索历程，以及逐渐落地多个业务场景的使用实践。
·2024-02-19 21:31

SpringBoot中使用redis事务

事务的相关介绍可以参考：0、起因在一次线上事故中，我们定位到redis的使用存在大value，超过了dubbo的最大数据量限制，于是紧急将这个大的对象value拆分成单个的stringvalue。
wrr-cat·2024-02-19 20:16

Redis 集群(Cluster)

如果数据量很大，接近超出了master/slave所在机器的物理内存，就可能出现严重问题了。
ikun66666·2024-02-19 20:19

故障分析| Redis 故障诊断及常用运维命令—内存篇

排查思路是否数据量太大？是否客户端输入缓冲区有问题？是否复制积压缓冲区有问题？是否客户端输出缓冲区有问题？实用命令模拟Redis压力相关命令常⽤Re
爱可生开源社区·2024-02-19 17:57

作物模型狂奔：Apsim、Wofost、Dssat

大数据量必须要脚本去跑，目前Apsim和Wofost出了点成果，跟大家分享一下。欢迎各位道友留言、私聊、交流病情最好到B站上去留言啦，CSDN平很少登录需要指导的话，那就得让我挣点零花咯，嘿嘿。
F_Dregs·2024-02-19 15:47

MySQL篇之索引创建与失效

一、索引创建的原则1).针对于数据量较大，且查询比较频繁的表建立索引。2).针对于常作为查询条件（where）、排序（orderby）、分组（groupby）操作的字段建立索引。
学java的冲鸭·2024-02-19 14:51

日常节省 30%计算资源：阿里云实时计算 Flink 自动调优实践

从而可以根据数据量的大小，选择合适的资源处理数据。但流作业是一种long-running的
Apache Flink·2024-02-19 14:46

【大数据面试题】007 谈一谈 Flink 背压

出现背压的原因上游数据突然增大比如数据源突然数据量增大多倍，下游处理速度跟不上。就像平时的小饭店能处理的很轻松，突然到了过年人多了很多，就会需要客人排队。网络，机器异常等这个也好理解
Jiweilai1·2024-02-19 13:35

指纹识别-流程

如果说得笼统一点，可以认为指纹的数据量小易处理。所以，在IPhone5s之后，指纹识别用在手机等终端设
xp562870732·2024-02-19 13:29

STM32 使用SPI读写FLASH（W25Q64型号）

文章目录手册中的指令读取FlashID函数读取DeviceID扇区擦除对Flash写操作整页写不固定数据量读数据手册中的指令第一列代表指令名（写使能，读状态，写状态，擦除）第二列代表指令码，程序中使用此进行操作第三列至
为了维护世界和平_·2024-02-19 11:55

RapidMiner缺失数据处理——去掉数据大量缺失的变量

最近做数据挖掘，发现RapidMiner是一款数据清洗、处理和转换的好工具，尤其在数据量不大的情况下。和R语言相比，RapidMiner在数据处理方面要简单直观得多。
carlwu·2024-02-19 11:59

补题报告————组合数的末十位

思路：我们之前学过，类似C(n,r)这种算式我们有三种做法：杨辉三角；直接用公式；但是我试了杨辉三角后发现根本不行，因为杨辉三角所需的是一个二维数组，但是数据量不允许开那么大，杨辉三角如下：11112113311464115101051
coduck_lys·2024-02-19 10:25

怎么用ETL工具实现MQ消息同步

怎么用ETL工具实现MQ消息同步随着企业业务的不断扩张和数据量的不断增加，消息队列（MQ）已经成为了很多企业进行异步消息传递和数据同步的首选方案。
·2024-02-19 10:43

深度学习的进展

随着算法和模型的改进、计算能力的提升以及数据量的增长，深度学习的应用范围不断扩大，对各行各业产生了深远的影响。深度
JayGboy·2024-02-19 10:00

只修改一个关键参数，就会毁了整个百亿参数大模型？ | 新程序员

本文将分享大语言模型训练过程中产生的多种独特现象，推导在二阶段预训练时如何巧妙平衡数据量与背景知识的注入，从理论与实践的角度揭示其内在运作机制，深入剖析语言核心区与维度依赖理论的作用及其带来的深刻影响。
《新程序员》编辑部·2024-02-19 10:54

Hive调优——count distinct替换

离线数仓开发过程中经常会对数据去重后聚合统计，而对于大数据量来说，count(distinct)操作消耗资源且查询性能很慢，以下是调优的方式。
爱吃辣条byte·2024-02-15 10:58

基于neo4j的汽车领域知识图谱问答系统

介绍：请使用前务必读一下README.md，系统主要是汽车领域相关知识图谱问答系统，包括了汽车的价格、品牌等十几个关系实体，十几个关系，数据量实体7000+，关系9000+整个系统使用django构建，
程序员～小强·2024-02-15 10:57

Hive的相关概念——分区表、分桶表

多重分区表二、Hive分桶表2.1分桶表的概念2.2分桶表的创建2.3分桶表的数据加载2.4分桶表的作用一、Hive分区表1.1分区表的概念Partition分区表是hive的一种优化手段表，当Hive表数据量大
爱吃辣条byte·2024-02-15 10:57

多表查询

目录统计出一张数据表中的数据量查询dept表中的数据量查询emp表中的数据量实现emp与dept的多表查询笛卡尔积消除笛卡尔积把数据表emp的别名定为e，数据表dept的别名定为d，然后在查询中分别使用
橙子味冰可乐·2024-02-15 10:51

[缓存] - 3.金融交易系统缓存架构设计

1.交易数据特点1.1数据量极大交易系统的数据量特大，主要来自以下几种类型的数据。1.1.1行情行情是交易系统最为重要的数据，交易就是在不断变化的行情中寻找时机来实现盈利的。
don't_know·2024-02-15 09:52

[BIZ] - 1.金融交易系统数据特点

1.1数据量极大交易系统的数据量特大，主要来自以下几种类型的数据。1.1.1行情行情是交易系统最为重要的数据，交易就是在不断变化的行情中寻找时机来实现盈利的。
don't_know·2024-02-15 09:52

浅谈缓存最终一致性的解决方案

1引言对于互联网业务来说，传统的直接访问数据库方式，主要通过数据分片、一主多从等方式来扛住读写流量，但随着数据量的积累和流量的激增，仅依赖数据库来承接所有流量，不仅成本高、效率低、而且还伴随着稳定性降低的风险
简说Linux·2024-02-15 09:09

浅谈本地缓存的应用

以前集中式架构，尤其是企业IT系统，用物理机或虚拟机部署，需要缓存的数据量很大，为了合理利用机器资源
梦之救赎·2024-02-15 08:38

Redis由浅到深层次讲解和springboot实战（服务器层面的搭建部署）

随着用户增多，网站出现以下问题数据量增加到一定程度，单机数据库就放不下了数据的索引（B+Tree）,一个机器内存也存放不下访问量变大后（读写混合），一台服务器承受不住。
三横同学·2024-02-15 08:06

TiDB 在医疗保障信息平台的应用实践

在某地市医疗保障信息平台的实践中，TiDB分布式数据库有效实现了在线交易和实时分析服务，日均QPS达22,000，总数据量接近30TB，降低了系统开发和维护成本，推动医疗保障信息平台的数字化和智能化发展
TiDB_PingCAP·2024-02-15 08:53

Oracle数据库

以下是Oracle分区表的一些优点：提高查询性能：通过对数据进行分区，可以只针对特定分区执行查询操作，从而减少需要扫描的数据量，提高查询效率。
编织幻境的妖·2024-02-15 08:41

C语言万年历设计制作

农历算法采用数据数组方法，200年日历数据量不大。程序启动时读入即可。数据结构18位，如daList[2000]=“110010010110000205”;前12位表
老花眼猫·2024-02-15 07:29

揪出MySQL磁盘消耗迅猛的真凶

Part1:写在最前当一张单表10亿数据量的表放在你面前，你将面临着什么？
weixin_34242819·2024-02-15 05:03

【MySQL进阶之路】亿级数据量表SQL调优实战

亿级数据量表SQL调优实战先说一下案例背景：在电商平台中，有一个商品表，数据量级别上亿，有一天晚上突然出现大量的慢查询告警，导致每一个数据库连接执行慢查询耗费几十秒的时间，以至于数据
11来了·2024-02-15 05:32

【MySQL进阶之路】十亿量级评论表SQL调优实战

十亿量级评论表SQL调优实战先说一下案例背景：在电商系统的评论表中，数据量非常大，达到了十亿量级，因此对评论的数据库进行分库分表处理，在分库分表之后，基本上单表的评论数据在百万级别左
11来了·2024-02-15 05:32

深度学习相关知识--池化

池化作用：1.减少运算量，这个还好理解，因为数据量变少了，后期计算量肯定也少了2.防止过拟合，因为池化可以把一张大图变成一张小图，但是保留了重要特征，这样使得模型学习时能
已经大四了，继续努力·2024-02-15 04:12

了解什么是文档型数据库？

，非关系型数据库（NoSQL）逐渐成为未来数据管理的重要一环，其中，文档型数据库尤为突出，一方面，其无模式的特点能够适应各种数据变化，满足数据环境复杂化的趋势；另一方面，其高度的扩展性满足了日益增长的数据量管理需求
DocDB小仙女·2024-02-15 04:41

TiDB 在医疗保障信息平台的应用实践

在某地市医疗保障信息平台的实践中，TiDB分布式数据库有效实现了在线交易和实时分析服务，日均QPS达22,000，总数据量接近30TB，降低了系统开发和维护成本，推动医疗保障信息平台的数字化和智能化发展
·2024-02-15 03:25

PCIe扫盲——一个Memory Read操作的例子

如下图所示，Requester的应用层（软件层）首先向其事务层发送如下信息：32位（或者64位）的Memory地址，事务类型（TransactionType），数据量（以DW为单
小学究鑫鑫·2024-02-15 01:20

读写频繁的数据库表，怎么优化提高效率

优化SQL查询语句：优化查询语句，可以减少查询的数据量和查询时间，从而提高效率。例如，使用合适的WHERE子句、JOIN子句等。使用缓存：对于频繁查询的结果，可以将其缓存起来，避免重复查询，提高效率。
code_搬运工·2024-02-14 23:37

【华为OD】C卷真题：200分 信道分配 Java代码实现[思路+代码]

阶为r的信道的容量为2^r比特；2)所有用户需要传输的数据量都一样
五木大大·2024-02-14 22:31

【华为OD】C卷真题：200分 信道分配 C语言代码实现[思路+代码]

阶为r的信道的容量为2^r比特；2)所有用户需要传输的数据量都一样：D比特；3)一个用户可以分配多个信道，但每个信道只能分配给一个用户；4)只有当分配给一个用户的
五木大大·2024-02-14 22:01

贼好用，冰河开源了这款精准定时任务和延时队列框架！！

然而，这种方式存在着重大的缺陷：如果数据量大的话，频繁的扫描数据表会对数据库造成巨大的压力；难以支撑大规模的分布式定时任务；难以支持精准的定时任务；大量浪费CPU的资源；扫描的数据大部分是不需要执行的任务
冰河团队·2024-02-14 21:39

吴恩达机器学习—大规模机器学习

学习大数据集数据量多，模型效果肯定会比较好，但是大数据也有它自己的问题，计算复杂如果存在100000000个特征，计算量是相当大的，在进行梯度下降的时候，还要反复求损失函数的偏导数，这样一来计算量更大。
魏清宇·2024-02-14 21:14

ApacheCN 交流社区热点汇总 2019.3

【每日一问】1000W数据量，喂给xgboost的特征大概是多少维度
布客飞龙·2024-02-14 21:40

Hive经典面试题

1.Hive表关联查询，如何解决数据倾斜的问题1）倾斜原因：map输出数据按keyHash的分配到reduce中，由于key分布不均匀、业务数据本身的特、建表时考虑不周、等原因造成的reduce上的数据量差异过大
Yang_6234·2024-02-14 20:03

显存位宽。

位宽越大，每个时钟周期内能够处理的数据量就越多，从而提高了显卡的性能。2.常见类型：市场上常见的显存位宽有128位、256位、384位以及更高端的4096位（HBM）等。
小小娱乐·2024-02-14 18:45

Spark通过jdbc性能调优--采用分区的方式从oracle读数据

spark通过jdbc读取Oracle，当数据量很大的时候会出现两个问题：读取数据异常缓慢，甚至卡死大表中进行操作也会出现OOM的问题调优常规的读取数据库的方式如下ods_bdz=spark.read.format
korry24·2024-02-14 18:08

Redis相关介绍

数据库为什么使用NoSQL关系型数据库无法应对每秒上万次的读写请求表中的存储记录数量有限无法简单的通过增加硬件、服务节点来提高系统性能关系型数据库大多是收费的，对硬件要求较高，软硬件成本较高NoSQL优势大数据量
xmh-sxh-1314·2024-02-14 15:24

防御保护常用知识

防火墙的主要职责在于：控制和防护---安全策略---防火墙可以根据安全策略来抓取流量之后做出对应的动作防火墙分类主要有四类：防火墙吞吐量---防火墙同一时间能处理的数据量多少防火墙的发展主要经过以下阶段
東霜鲟雪·2024-02-14 12:54

面试:大数据和深度学习之间的关系是什么?

大数据的定义与特点:大数据指的是规模(数据量)、多样性(数据类型)和速度(数据生成及处理速度)都超出了传统数据处理软件和硬件能力范围的数据集。
华农DrLai·2024-02-14 06:16

Protobuf-net3.2.8中的protogen.exe之使用

目录protobuf是个好东西遇到问题顺便研究一下命令行程序如何调试protobuf是个好东西protobuf是一个轻量级的数据格式，相比json，它的数据量为json的1/3，且存储方式为2进制，并进行了压缩
ThinkCG·2024-02-14 06:40
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他