lhdz_bj
lhdz_bj

CockroachDB架构——分布层

CockroachDB架构的分布层提供了集群数据的统一视图。
--注意：
1）如果您还没有准备好，我们建议先阅读架构概览部分。 
一.概览
为了从任何节点访问集群中的所有数据，CockroachDB按照整体排序映射来存储键值对。该键空间描述集群中数据的所有信息及其位置，并将其分为我们称为的"范围"，其为连续的键空间块，以便每个键值总是能在单个范围内找到。
CockroachDB实施排序映射以开启：
1）简化查找（Simple lookups）：因为我们要鉴别哪个节点复制某部分数据，查询能快速定位其需要的数据的位置。
2）高效扫描（Efficient scans）：通过定义数据的顺序，扫描期间发现特定范围内的数据变的容易。
1.整体排序的映射结构
整体排序的映射包括连个基本元素：
1）系统数据，其包括描述集群中数据位置的元范围（在很多其他集群范围和本地数据元素中）。
2）用户数据，其存储集群的表数据。
1）元范围
集群中所有范围的位置存储于键空间开始部分的一个两级索引中，称为元范围，其一级（meta1）寻址二级，二级（meta2）寻址集群中的数据。重要的是，每个节点有定位meta1范围（称为其范围描述符，下面详述）位置的信息，且该范围从不会被拆分。
该元范围结构默认可以对4EiB的用户数据进行寻址：我们可以寻址2^(18+18)=2^36个范围；每个范围寻址2^26B，这样，我们可以对2^(36+26)B=2^62B=4EiB的数据进行寻址。但是，如果范围更大，这个容量可能得到进一步扩展。
元范围几乎像常规范围一样处理，且就像集群中KV数据的其他元素一样进行访问和复制。
每个节点缓冲之前访问的meta2范围数值，这会将来对这些数据的访问。无论何时节点发现其缓冲的某个meta2特定键值无效，就会通过该meta2范围的常规读取对该缓冲进行更新。
2）表数据
节点元范围之后是集群存储的KV数据。
每张表及其二级索引最初映射到单个范围，该范围内的每个键值对表示该表（因为该表按照主键排序，因此，也称为主键）或二级索引中的一个数据行。一旦范围达到512MiB，其将拆分为两个范围。当表及其索引持续增长时，该过程也会继续下去。一旦一张表拆分为多个范围，表和二级索引将可能分别存储到单独的范围内。但是，一个范围还是可能包含表和二级索引的数据。
默认的512MiB范围大小对我们来说是一个合适的点，其足够小，以便其在节点间进行快速移动，但又足够大，以便存储一套更可能被一起访问的有意义的连续数据集。这些范围在集群内调动以确保数据在意外事件中的生存性。
这些表的范围被复制（在适当命名的复制层中），并有存储于meta2范围内的每个副本的地址。
2.使用整体排序的映射
当某个节点接收到一个请求时，其将查看元范围并对请求中的键值与meta2范围内的键值进行对比以发现需要将该请求路由到哪个节点。
这些元数据会被大量缓冲，因此，这通常会被本地处理而无需发送RPC到实际包含该meta2范围的节点。
该节点接着将那些KV操作发送到前面meta2范围内识别到的租约持有者。但是，这些数据可能已发生移动，因此，不再存储这些数据的节点将向请求节点返回数据目前的存储位置。这种情况下，我们必须回到meta2范围获取最新信息并进行重试。
3.与其他层的交互
CockroachDB中，分布层与其他层的关系为：
1）从同一节点的事务层接收请求。
2）鉴别哪些节点应该接收该请求，并将该请求发送到相应节点的复制层。

二.技术细节与组件
1.gRPC
gRPC是节点间用于通信的软件。因为分布层是与其他节点通信的第一层，所以，CockroachDB将gRPC实施在该层。
gRPC需要将输入和输出格式化为协议缓冲（protobufs）。为了利用gRPC,CockroachDB实施了定义在api.proto中的基于协议缓冲的API。
有关gRPC更多的信息，可以参考官方gRPC文档。
2.BatchRequest
所有的KV操作请求都被绑定到一个protobuf，称为BatchRequest。这些批处理的目的地通过BatchRequest头部标识，以及指向该请求事务记录的指针。（另一方面，当一个节点响应一个BatchRequest时，其使用一个protobuf--BatchRequest。）
该BatchRequest也被用于在节点间用gRPC发送请求，gRPC接收和发送协议缓冲（protocol buffers）。
3.DistSender
网关/协调节点的DistSender从其自己的TxnCoorSender接收BatchRequests。DistSender接着负责分解BatchRequests并将一套新BatchRequests路由到其通过meta2范围识别出包含这些数据的节点。其使用缓冲将请求发送到相应的租约持有者，但也准备试验其他副本，按照"proximity"顺序。仅将缓冲说是租约持有者的副本移到副本的前面进行试验，接着，按顺序给它们发送一个RPC。
非租约持有者接收的请求失败，并报出指向副本最后已知租约持有者的错误。这些请求通过网关节点更改的租约进行透明重试，且从来不会到达客户端。
当节点开始相应这些命令时，DiskSender也对这些结果进行汇聚并准备将其返回客户端。
4.元范围KV结构
就像集群中所有其他数据一样，元范围作为KV对被构造。元范围有类似结构：
metaX/successorKey -> LeaseholderAddress, [list of other nodes containing data]
其中，元素及描述如下：
1）metaX：元范围的级别。这里，我们使用简化的meta1和meta2，但这些在cockroach中实际分别表示为x02和\x03。
2）successorKey：比您扫描的键值更大的第一个键值。这使得CockroachDB的扫描效率更高；其仅仅扫描键值直到发现一个比要找的键值大的数值，且那是其发现相关数据的位置。
键值空间末端的successorKey被标识为maxKey。
3）LeaseholderAddress：主要负责读写的副本，称为租约持有者。复制层包含有关租约的更多信息。
下面是一个例子：
meta2/M -> node1:26257, node2:26257, node3:26257
这种情况下，节点1上的副本为租约持有者，节点2和节点3也包含副本。
例子:
我们想象有一个按字母顺序排序的列，我们用它来进行查找。这里是元范围近似的样子：
meta1包含meta2副本所在节点的地址。
#指向键值[A-M)的meta2范围
meta1/M -> node1:26257, node2:26257, node3:26257

#指向键值[M-Z]的meta2范围 
meta1/maxKey -> node4:26257, node5:26257, node6:26257
meta2包含集群中每个范围的副本所在节点的地址，其中，第一个为租约持有者。

#包含[A-G)
meta2/G -> node1:26257, node2:26257, node3:26257

#包含[G-M)
meta2/M -> node1:26257, node2:26257, node3:26257

#包含[M-Z)
meta2/Z -> node4:26257, node5:26257, node6:26257

#包含[Z-maxKey)
meta2/maxKey->  node4:26257, node5:26257, node6:26257
5.表数据KV结构
键-值数据，其用下面的结构表示表中的数据：
/

// ->
表本身以主键列上的index_id为1的索引存储，表中其他列被认作存储/覆盖列。
6.范围描述符
CockroachDB中的每个范围包含元数据，称为范围描述符。一个范围描述符包含下列内容：
1）一个连续RangeID
2）该范围包含的键值空间（即，包含的键值）；例如：在上述表数据KV结构中的第一个和最后一个<索引列值>。这决定了meta2范围的键值。
3）包含该范围副本节点的地址，及第一个位置的租约持有者（其负责读写）。这决定了meta2范围的键值。
因为范围描述符包含meta2范围的键值数据，所以，每个节点的meta2缓冲也存储范围描述符。
当发生如下事件时，范围描述符被更新：
1）更改范围的Raft组成员（更多细节将在复制层讨论）。
2）租约持有者发生改变。
3）范围拆分。
所有这些对范围描述符的更新发生在本地该范围上，接着，传播到meta2范围。
7.范围拆分
默认地，CockroachDB试图保持范围/副本的大小为512MiB。一旦范围达到该限制，将被拆分成两个更小的范围（由连续的键值空间组成）。
范围拆分期间，节点创建一个新的Raft组，其包含与被拆分的范围的所有相同成员。现在有两个范围的事实也意味着有一个用新键值空间边界更新meta2的事务，也包括用范围描述符的节点的地址。

三.与其他层的技术交互
1.分布和事务层
分布层的DistSender接收来自本身节点TxnCoordSender的BatchRequests，其驻留在事务层。
2.分布和复制层
分布层将BatchRequests路由到包含数据范围的节点，其最终被路由到Raft组领导者或租约持有者，其在复制层被处理。

四.个人观点
1.分布层的作用真的是承上启下，上面接收来自事务层的请求，下面将这些请求分解后再发给复制层进行处理。
1.分布层在每款NewSQL产品中都会存在，虽然叫法可能不同，但类似的功能层应该都是存在的，这是数据分布式存储的基础和关键，所以，也没什么好说的。
 

你可能感兴趣的:(Newsql,cock,roach,cockroach,Distribution,架构)

  • HarmonyOS Next 会议应用——多设备协同与应用接续 harmonyos
    在当今数字化办公的大趋势下，高效的会议协作变得尤为重要。HarmonyOSNext提供了强大的分布式能力，为开发支持多设备协同与应用接续的会议应用创造了有利条件。本文将详细阐述如何基于HarmonyOSNext开发这样一个会议应用，以提升会议协作效率。会议应用的多端协同架构设计核心功能会议共享：允许参会者在不同设备间共享会议相关的资料、文件、演示文稿等，实现信息的实时互通。设备无缝切换：支持用户在
  • 单体架构、集群、分布式、微服务的区别！ 码熔burning 微服务架构分布式微服务
    目录一、单体架构二、集群‍♀️‍♂️三、分布式架构四、微服务架构️五、总结我的其他文章也讲解的比较有趣，如果喜欢博主的讲解方式，可以多多支持一下，感谢！✨更多请看个人主页：码熔burning其他优质专栏：【✨设计模式】【SpringBoot】【多线程】【Redis】…等一、单体架构是什么：想象一下，你开了一家小餐馆，所有的功能都在一个地方完成：点餐、做饭、收银、打扫卫生，所有员工都在一个屋檐下工作
  • Qt-模型视图框架 空凝眸_ 跨平台开发_Qtqt
    一简介1.模型视图架构(Model/ViewArchitecture)是Qt中用于处理和展示数据的一种设计模式，它将数据的管理(模型Model)、数据的可视化(视图View)、用户与数据的交互(控制器，通常是通过委托(代理)Delegate实现)分离开来，从而提高了代码的可重用性和可维护性。二分类1.模型1.1说明：模型是数据的容器，用于管理原始数据，模型提供了一种标准的接口，使得数据可以被不同的
  • 华为云数据库GaussDB(for Cassandra)揭秘：内存异常增长的排查经历 科技说 jvmjava开发语言
    内存异常增长的排查经历背景介绍华为云数据库GaussDB(forCassandra)是一款基于计算存储分离架构，兼容Cassandra生态的云原生NoSQL数据库；它依靠共享存储池实现了强一致，保证数据的安全可靠。核心特点是：存算分离、低成本、高性能。问题描述GaussDB(forCassandra)自研架构下遇到一些挑战性问题，比如cpu过高，内存泄漏，内存异常增长，时延高等问题，这些也都是开发
  • REST API详解 Mr.NickJJ RESTfulAPI
    原文地址http://blog.csdn.net/hello_hwc/article/details/44150793一REST的概念REST（RepresentationalStateTransfer）含状态传输是一种软件架构风格。要点资源由URI（统一资源定位符）的来指定。通过资源的表现形式来操作资源对资源的操作包括获取、创建、修改和删除资源，对应HTTP协议提供的GET、POST、PUT和D
  • Python 3.8.10 AMD64 安装包 卢枫岱
    Python3.8.10AMD64安装包项目地址:https://gitcode.com/open-source-toolkit/03899描述本仓库提供了一个Python3.8.10的AMD64安装包，旨在解决原下载地址网速过慢的问题，帮助用户节省下载时间。资源文件文件名:python-3.8.10-amd64.exe版本:Python3.8.10架构:AMD64使用方法点击仓库中的python
  • 【仓颉三方库】 数据库驱动——redis-sdk 「已注销」 仓颉鸿蒙开发移动开发数据库redislog4jharmonyos网络缓存
    特性支持RESP2和RESP3协议接口设计兼容jedis接口语义丰富的管理命令支持支持单连接多线程模式支持发布订阅模式支持哨兵模式和集群模式完备的单元测试覆盖架构简洁，易于扩展开发计划2024.3.22完成支持单机模式的RESP2和RESP3协议的客户端，提供Beta版本2024.4.16完成支持Sentinel集群模式的客户端，提供Beta版本2024.5.31完成支持Redis集群模式的客户端
  • 单线程 Redis 如何实现高可用？深入图解主从复制与哨兵模式 以恒1 redis数据库缓存
    单线程Redis如何实现高可用？深入解析主从复制与哨兵模式一、主从模式：高可用的基石主从模式是Redis实现高可用的基础架构，通过数据冗余和读写分离提升系统可靠性。其核心结构如下：角色功能主节点唯一可写节点，接收所有写操作并同步数据到从节点从节点只读节点，复制主节点数据，分担读请求压力，故障时可能升级为主节点主从模式的优势：数据冗余：从节点备份主节点数据，避免单点故障导致数据丢失。读写分离：主节点
  • 深入探索 STM32 微控制器：从基础到实践 菜只因C stm32嵌入式硬件单片机
    一、引言在当今的嵌入式系统领域，STM32系列微控制器凭借其高性能、低功耗、丰富的外设以及广泛的应用场景，成为了众多开发者的首选。无论是在工业控制、智能家居、医疗设备，还是在消费电子等领域，STM32都展现出了强大的生命力和适应性。本文将带领大家深入了解STM32微控制器，从其基本概念、架构特点，到开发环境的搭建以及实际应用中的代码实现，全方位地探索STM32的世界。二、STM32简介STM32是
  • Celia智能助手2.0架构演进与性能突破 大霸王龙 系统分析业务架构python人工智能开发语言prompt系统分析师
    Celia智能助手2.0架构演进与性能突破——多模态AI系统的工程化实践与创新2025-03-05作者：智能系统架构师一、架构演进路线1.1架构对比分析问题问题问题方案方案方案1.0版本单点CLIP服务MySQL全量存储静态资源分配2.0版本CLIP模型蒸馏向量分层存储动态资源调度1.2性能基准测试指标V1.0V2.0提升幅度QPS8502200158%检索延迟(P99)1.2s0.35s70%存
  • Java后端面试到底要如何准备？ 财高八斗者 Java程序员JavaJava编程java面试jvm
    我把面试准备拆成以下几个步骤：1.写简历2.整理好自己最熟悉的项目，相对有代表性的项目。3.整理自己的技术栈4.收拾好自己的自我介绍5.被八股文6.模拟面试7.针对模拟面试表现出来的问题进行改进8.开始投投简历本人10年开发经验，做过coder、做过领导、也做过架构师，面试过500人+。现在全职做技术分享和面试辅导。针对自己多年的面试经验，以及被面试的经验，我自己整理了一份面试小抄：《面试小抄》《
  • 电子电气架构 --- 拓扑架构集中的趋势及其演变 车载诊断技术 EV（电动汽车）常规知识必备车载电子与软件框架架构网络协议数据库汽车gateway拓扑架构集中的趋势及其演变
    我是穿拖鞋的汉子，魔都中坚持长期主义的汽车电子工程师。老规矩，分享一段喜欢的文字，避免自己成为高知识低文化的工程师：简单，单纯，喜欢独处，独来独往，不易合同频过着接地气的生活，除了生存温饱问题之外，没有什么过多的欲望，表面看起来很高冷，内心热情，如果你身边有这样灵性的人，一定要好好珍惜他们眼中有神有光，干净，给人感觉很舒服，有超强的感知能力有形的无形的感知力很强，能感知人的内心变化喜欢独处，好静，
  • ChatGPT与DeepSeek：开源与闭源的AI模型之争 我们的五年 游戏实现chatgpt人工智能
    目录一、模型架构与技术原理二、性能能力与应用场景三、用户体验与部署灵活性四、成本与商业模式五、未来展望与市场影响六、总结随着人工智能技术的飞速发展，ChatGPT和DeepSeek作为两大领先的AI语言模型，成为了行业内外关注的焦点。它们在技术架构、应用场景、用户体验和成本等方面存在显著差异，尤其是开源与闭源的模式，使得两者在市场竞争中各有优势。本文将对ChatGPT和DeepSeek进行全面对比
  • 云原生✖️ AI 时代的微服务架构最佳实践—— CloudWeGo 技术沙龙·北京站报名开启 后端go人工智能
    活动介绍CloudWeGo开源两年多以来，社区发展迅速，生态日益丰富，落地企业用户已超过40家，涵盖AI、电商、金融、游戏等多个行业。同时，随着云原生技术和AI技术的持续蓬勃发展，我们发现企业用户也面临着越来越多性能、成本和稳定性方面的挑战，系统需要支持弹性伸缩和潮汐流量下的稳定性，因而也越发需要一套高性能、易扩展、功能丰富的微服务架构。诚挚邀请社区用户和开发者共同参与CloudWeGo技术沙龙。
  • 基于K8S设计实现机器学习管理调度平台 richenlin 机器学习
    设计和实现一套基于Kubernetes(K8s)的机器学习管理调度平台，目标是利用K8s的容器化和调度能力，提供高效的资源管理、任务调度、可扩展性及灵活性，适应机器学习（ML）训练、推理等不同场景的需求。以下是平台设计的主要模块和实施步骤：1.系统架构概述该平台需要一个多层架构，其中K8s作为底层容器调度和资源管理平台，机器学习任务管理与调度层作为平台的核心模块。平台应具备高可用、弹性伸缩、任务监
  • 解释 Node.js 中的异步编程模型，如何使用回调、Promise 和async / await 处理异步操作？ 程序员黄同学 node.js前端开发JavaScriptnode.js
    一、Node.js异步模型基础Node.js采用单线程事件循环机制，通过libuv库实现非阻塞I/O操作。这种架构决定了异步编程是其核心特性。当遇到I/O操作（如文件读写、网络请求）时，主线程会将任务交给底层线程池处理，自己继续执行后续代码。操作完成后通过回调通知主线程。二、异步处理的三驾马车1.回调函数（Callback）最基础的异步处理方式，将函数作为参数传递给异步方法：constfs=req
  • 《基于WebGL的matplotlib三维可视化性能调优》——让大规模3D数据流畅运行在浏览器端！ Eqwaak00 matplotlibwebglmatplotlib3d开发语言python科技
    引言：当科学计算遇见浏览器革命传统三维可视化在浏览器中面临百万级数据点时往往力不从心，每秒帧数（FPS）断崖式下跌。本文将解锁matplotlib与WebGL的融合之道，通过GPU加速渲染+数据压缩算法+计算负载转移三大杀招，实现浏览器端千万级粒子系统60FPS流畅交互。一、WebGL渲染引擎架构设计1.1传统渲染管线瓶颈分析mermaid：graphTDA[CPU数据准备]-->B[主线程传输]
  • AI生成的web框架 包含前后端 k8s管理等 LCY133 人工智能前端kubernetes
    好的，我现在需要根据用户提供的技术栈来设计一个Web平台的搭建方案。用户提到的技术包括前端、后端、算法，GitLab、Jenkins，阿里云ACK和ECS，MongoDB、Redis，Docker、K8s、Nginx。我需要综合考虑这些技术的整合，确保整个架构的高效、可靠和可扩展。首先，用户之前已经得到了一个架构方案，现在可能希望进一步细化或者调整。我需要回顾之前的方案，看看是否有遗漏或可以优化的
  • Transformer架构简略：DeepSeek 的底层基石 windwant 人工智能人工智能transformer架构
    2017年，一篇名为《AttentionisAllYouNeed》的论文横空出世，提出了Transformer架构，彻底改变了自然语言处理（NLP）领域的格局。它不仅在各种NLP任务上取得了突破性进展，更成为了当今人工智能领域最具影响力的架构之一。一、从RNN到Transformer：突破瓶颈，开创先河在Transformer出现之前，循环神经网络（RNN）及其变体（如LSTM、GRU）是处理序列
  • 低功耗设计：（2）系统级优化 steadfastly 低功耗设计IC设计SoC设计低功耗设计系统架构IC设计
    在芯片设计中，功耗优化是影响性能、续航、散热和成本的关键因素。功耗的来源主要涉及供电电压、时钟频率、器件数量以及工艺制程（影响阈值电压和漏电流）。从功耗构成来看，我们可以从不同层次入手进行优化，以提升整体能效。不同层次对功耗的影响：层次功耗占比影响典型优化方法系统级>70%软硬件协同、功耗管理架构级40%~70%电压/频率调整、多电压域、电源门控、异步设计电路级15%~40%时钟门控、独热码编码、
  • 常见加密软件厂商的参数对比 大刘讲IT 安全网络安全
    本文主要介绍主要的加密软件的一些公开资料的对比，不做任何价值推断和评价，请根据企业实际的需求进行合理评估选择。一、核心加密机制对比1.算法架构与密钥管理IP-Guard亿赛通天锐绿盾迅软DSE文件创建厂商策略触发式AES-256加密全生命周期SM4加密智能分类AES+SM4混合加密行为触发动态密钥轮换分布式密钥池集中式密钥服务器双因子认证+分片存储量子密钥预分发试验维度IP-Guard亿赛通天锐绿
  • DeepSeek与ChatGPT：AI语言模型的全面对决与开发者洞察 硅基打工人 AI人工智能chatgpt语言模型媒体经验分享自然语言处理
    大家好，我是硅基打工人呀！在2025年的人工智能领域，DeepSeek与ChatGPT两大语言模型的竞争成为全球开发者关注的焦点。本文将从技术架构、性能表现、应用场景及生态策略等维度，结合最新行业动态与用户实测数据，为开发者呈现这场技术对决的核心要点。一、技术架构对比：效率与规模的博弈DeepSeek的差异化设计混合专家（MoE）架构：通过动态激活部分参数（如R1模型每次仅调用370亿参数），显著
  • JAVA程序员架构师教程资料MCA高级开发教程-从初级到高级（免费下载分享） 2501_90850230 人工智能编程素材资源java开发语言架构师MCA
    架构师是负责系统整体架构设计的核心角色，其核心职责在于将业务需求转化为技术实现方案，确保系统的可扩展性、可维护性及高性能等非功能性需求‌15。他们需具备跨领域协调能力，既要深入技术细节（如技术选型、模块设计、代码规范），又要统筹全局，解决跨团队协作与边界划分问题‌教程下载JAVA程序架构师教程资料MCA高级开发教程下载https://pan.baidu.com/s/1ZWC_49O-S_V3UGc
  • 数据中心资源管理深度解析（上） 数据中心运维高级工程师 运维数据库大数据安全
    引言随着数据量的爆发式增长和业务需求的多样化，数据中心的资源管理面临着前所未有的挑战。如何高效地管理数据中心的资源，确保资源的合理分配、高效利用和可持续发展，已成为每一个数据中心管理者必须面对的问题。本文将深入探讨数据中心资源管理的各个方面，包括其目的、适用范围、遵循标准、组织架构及职责，以及资源管理的具体内容、原则和实现方法，旨在为从业者提供一份全面、实用的指南。一、数据中心资源管理的目的数据中
  • 我们为什么需要服务发现？服务发现的基本概念和流程，并通过实践案例说明如何利用服务发现构建微服务架构 Why Do We Need Service Discovery? AI天才研究院 Python实战自然语言处理人工智能语言模型编程实践开发语言架构设计
    作者：禅与计算机程序设计艺术1.简介在现代分布式系统架构中，服务发现（ServiceDiscovery）在微服务架构、云计算和容器化架构等方面扮演着至关重要的角色。服务发现旨在根据服务名、IP地址或其他标识符动态查找服务提供者的位置信息，包括网络地址、端口号、协议类型、QoS参数等。通常情况下，客户端应用需要通过服务发现模块获取服务提供者的可用性信息，并选择合适的服务实例进行访问，从而实现分布式系
  • 深度实测！如何用DeepSeek一键生成全栈项目代码？这5个技巧让你少写80%的代码 阿三0404 人工智能机器学习深度学习c5全栈
    导语：从怀疑到真香，一个全栈开发者的DeepSeek实测之路“最近程序员圈被DeepSeek刷屏了，有人用它3天搞定一个项目，也有人吐槽生成的代码漏洞百出。作为一名同时维护5个企业级项目的全栈工程师，我决定花一周时间深度实测，从登录页面到微服务架构，全面验证它的代码生成能力。结果令人震惊：**合理使用DeepSeek后，我的日常编码工作量减少了80%！**本文将分享我的踩坑经验、5个核心技巧，以及
  • 数据结构与算法必知基础知识 程序员bigsai 文章精选数据结构与算法数据结构算法数据结构与算法
    原创公众号：bigsai文章已收录在全网都在关注的数据结构与算法学习仓库欢迎star前言数据结构与算法是程序员内功体现的重要标准之一，且数据结构也应用在各个方面，业界更有程序=数据结构+算法这个等式存在。各个中间件开发者，架构师他们都在努力的优化中间件、项目结构以及算法提高运行效率和降低内存占用，在这里数据结构起到相当重要的作用。此外数据结构也蕴含一些面向对象的思想，故学好掌握数据结构对逻辑思维处
  • Vue.js中的MVVM FwgForth vue.jsflutter前端
    MVVM（Model-View-ViewModel）是一种软件架构模式，它在Vue.js中得到了广泛应用。本文将详细介绍MVVM模式在Vue.js中的实现方式，并提供相应的源代码示例。Model（模型）：在Vue.js中，模型代表应用程序的数据和业务逻辑。模型可以是从后端API获取的数据，也可以是前端应用程序内部的状态。在Vue.js中，我们可以使用Vue实例的data属性来定义模型。varapp
  • DeepSeek 各版本的区别 dushky ai语言模型AI编程
    DeepSeek各版本的区别主要体现在参数规模、架构设计、性能表现、硬件需求以及适用场景等方面，具体对比如下：一、参数规模与模型架构基础版（DeepSeek-V3）参数规模：6710亿参数（671B），采用混合专家（MoE）架构，每个Token激活约37B参数。定位：通用NLP任务，如智能客服、内容创作、知识问答等，强调高性价比和可扩展性。训练数据：14.8万亿Token预训练，推理速度较快（每秒
  • 远程调用Dubbo和OpenFeign的详解 格子先生Lab dubbospringcloud
    在微服务架构中，服务之间的远程调用（RPC）是核心功能之一。Dubbo和OpenFeign是两个常用的远程调用框架，分别适用于不同的场景。Dubbo是一个高性能的JavaRPC框架，而OpenFeign是SpringCloud生态中的声明式HTTP客户端，主要用于RESTful服务的调用。本文将详细介绍如何使用Dubbo和OpenFeign实现远程调用，并分析它们的适用场景。1.Dubbo简介Du
  • springmvc 下 freemarker页面枚举的遍历输出 杨白白 enumfreemarker
    spring mvc freemarker 中遍历枚举 1枚举类型有一个本地方法叫values（），这个方法可以直接返回枚举数组。所以可以利用这个遍历。 enum public enum BooleanEnum { TRUE(Boolean.TRUE, "是"), FALSE(Boolean.FALSE, "否");
  • 实习简要总结 byalias 工作
    来白虹不知不觉中已经一个多月了，因为项目还在需求分析及项目架构阶段，自己在这段 时间都是在学习相关技术知识，现在对这段时间的工作及学习情况做一个总结： （1）工作技能方面 大体分为两个阶段，Java Web 基础阶段和Java EE阶段 1）Java Web阶段 在这个阶段，自己主要着重学习了 JSP, Servlet, JDBC, MySQL，这些知识的核心点都过 了一遍，也
  • Quartz——DateIntervalTrigger触发器 eksliang quartz
    转载请出自出处：http://eksliang.iteye.com/blog/2208559 一.概述 simpleTrigger 内部实现机制是通过计算间隔时间来计算下次的执行时间，这就导致他有不适合调度的定时任务。例如我们想每天的 1：00AM 执行任务，如果使用 SimpleTrigger，间隔时间就是一天。注意这里就会有一个问题，即当有 misfired 的任务并且恢复执行时，该执行时间
  • Unix快捷键 18289753290 unixUnix；快捷键;
    复制，删除，粘贴： dd:删除光标所在的行                             &nbs
  • 获取Android设备屏幕的相关参数 酷的飞上天空 android
    包含屏幕的分辨率  以及 屏幕宽度的最大dp 高度最大dp   TextView text = (TextView)findViewById(R.id.text); DisplayMetrics dm = new DisplayMetrics(); text.append("getResources().ge
  • 要做物联网？先保护好你的数据 蓝儿唯美 数据
    根据Beecham Research的说法，那些在行业中希望利用物联网的关键领域需要提供更好的安全性。 在Beecham的物联网安全威胁图谱上，展示了那些可能产生内外部攻击并且需要通过快速发展的物联网行业加以解决的关键领域。 Beecham Research的技术主管Jon Howes说：“之所以我们目前还没有看到与物联网相关的严重安全事件，是因为目前还没有在大型客户和企业应用中进行部署，也就
  • Java取模（求余）运算 随便小屋 java
            整数之间的取模求余运算很好求，但几乎没有遇到过对负数进行取模求余，直接看下面代码： /** * * @author Logic * */ public class Test { public static void main(String[] args) { // TODO A
  • SQL注入介绍 aijuans sql注入
    二、SQL注入范例 这里我们根据用户登录页面 <form action="" > 用户名：<input type="text" name="username"><br/> 密 码：<input type="password" name="passwor
  • 优雅代码风格 aoyouzi 代码
    总结了几点关于优雅代码风格的描述： 代码简单：不隐藏设计者的意图，抽象干净利落，控制语句直截了当。 接口清晰：类型接口表现力直白，字面表达含义，API 相互呼应以增强可测试性。 依赖项少：依赖关系越少越好，依赖少证明内聚程度高，低耦合利于自动测试，便于重构。 没有重复：重复代码意味着某些概念或想法没有在代码中良好的体现，及时重构消除重复。 战术分层：代码分层清晰，隔离明确，
  • 布尔数组 百合不是茶 java布尔数组
      androi中提到了布尔数组;   布尔数组默认的是false,  并且只会打印false或者是true   布尔数组的例子;  根据字符数组创建布尔数组 char[] c = {'p','u','b','l','i','c'}; //根据字符数组的长度创建布尔数组的个数 boolean[] b = new bool
  • web.xml之welcome-file-list、error-page bijian1013 javaweb.xmlservleterror-page
    welcome-file-list 1.定义： <welcome-file-list> <welcome-file>login.jsp</welcome> </welcome-file-list>  2.作用：用来指定WEB应用首页名称。   error-page1.定义： <error-page&g
  • richfaces 4 fileUpload组件删除上传的文件 sunjing clearRichfaces 4fileupload
     页面代码               <h:form id="fileForm">            <rich:
  • 技术文章备忘 bit1129 技术文章
    Zookeeper http://wenku.baidu.com/view/bab171ffaef8941ea76e05b8.html http://wenku.baidu.com/link?url=8thAIwFTnPh2KL2b0p1V7XSgmF9ZEFgw4V_MkIpA9j8BX2rDQMPgK5l3wcs9oBTxeekOnm5P3BK8c6K2DWynq9nfUCkRlTt9uV
  • org.hibernate.hql.ast.QuerySyntaxException: unexpected token: on near line 1解决方案 白糖_ Hibernate
    文章摘自：http://blog.csdn.net/yangwawa19870921/article/details/7553181   在编写HQL时，可能会出现这种代码： select a.name,b.age from TableA a left join TableB b on a.id=b.id  如果这是HQL，那么这段代码就是错误的，因为HQL不支持
  • sqlserver按照字段内容进行排序 bozch 按照内容排序
    在做项目的时候，遇到了这样的一个需求：           从数据库中取出的数据集，首先要将某个数据或者多个数据按照地段内容放到前面显示，例如:从学生表中取出姓李的放到数据集的前面；          select * fro
  • 编程珠玑-第一章-位图排序 bylijinnan java编程珠玑
    import java.io.BufferedWriter; import java.io.File; import java.io.FileWriter; import java.io.IOException; import java.io.Writer; import java.util.Random; public class BitMapSearch {
  • Java关于==和equals chenbowen00 java
    关于==和equals概念其实很简单，一个是比较内存地址是否相同，一个比较的是值内容是否相同。虽然理解上不难，但是有时存在一些理解误区，如下情况： 1、 String a = "aaa"; a=="aaa"; ==> true 2、 new String("aaa")==new String("aaa
  • [IT与资本]软件行业需对外界投资热情保持警惕 comsci it
          我还是那个看法,软件行业需要增强内生动力,尽量依靠自有资金和营业收入来进行经营,避免在资本市场上经受各种不同类型的风险,为企业自主研发核心技术和产品提供稳定,温和的外部环境...       如果我们在自己尚未掌握核心技术之前,企图依靠上市来筹集资金,然后使劲往某个领域砸钱,然
  • oracle 数据块结构 daizj oracle块数据块块结构行目录
    oracle 数据块是数据库存储的最小单位，一般为操作系统块的N倍。其结构为： 块头－－〉空行－－〉数据，其实际为纵行结构。 块的标准大小由初始化参数DB_BLOCK_SIZE指定。具有标准大小的块称为标准块（Standard Block）。块的大小和标准块的大小不同的块叫非标准块（Nonstandard Block）。同一数据库中，Oracle9i及以上版本支持同一数据库中同时使用标
  • github上一些觉得对自己工作有用的项目收集 dengkane github
    github上一些觉得对自己工作有用的项目收集 技能类 markdown语法中文说明 回到顶部 全文检索 elasticsearch bigdesk elasticsearch管理插件 回到顶部 nosql mapdb 支持亿级别map, list, 支持事务. 可考虑做为缓存使用 C
  • 初二上学期难记单词二 dcj3sjt126com englishword
    dangerous 危险的 panda 熊猫 lion 狮子 elephant 象 monkey 猴子 tiger 老虎 deer 鹿 snake 蛇 rabbit 兔子 duck 鸭 horse 马 forest 森林 fall 跌倒；落下 climb 爬；攀登 finish 完成；结束 cinema 电影院；电影 seafood 海鲜；海产食品 bank 银行
  • 8、mysql外键(FOREIGN KEY)的简单使用 dcj3sjt126com mysql
    一、基本概念 1、MySQL中“键”和“索引”的定义相同，所以外键和主键一样也是索引的一种。不同的是MySQL会自动为所有表的主键进行索引，但是外键字段必须由用户进行明确的索引。用于外键关系的字段必须在所有的参照表中进行明确地索引，InnoDB不能自动地创建索引。 2、外键可以是一对一的，一个表的记录只能与另一个表的一条记录连接，或者是一对多的，一个表的记录与另一个表的多条记录连接。 3、如
  • java循环标签 Foreach shuizhaosi888 标签java循环foreach
    1. 简单的for循环 public static void main(String[] args) { for (int i = 1, y = i + 10; i < 5 && y < 12; i++, y = i * 2) { System.err.println("i=" + i + " y="
  • Spring Security（05）——异常信息本地化 234390216 exceptionSpring Security异常信息本地化
    异常信息本地化          Spring Security支持将展现给终端用户看的异常信息本地化，这些信息包括认证失败、访问被拒绝等。而对于展现给开发者看的异常信息和日志信息（如配置错误）则是不能够进行本地化的，它们是以英文硬编码在Spring Security的代码中的。在Spring-Security-core-x
  • DUBBO架构服务端告警Failed to send message Response javamingtingzhao 架构DUBBO
     废话不多说，警告日志如下，不知道有哪位遇到过，此异常在服务端抛出(服务器启动第一次运行会有这个警告)，后续运行没问题，找了好久真心不知道哪里错了。    WARN 2015-07-18 22:31:15,272 com.alibaba.dubbo.remoting.transport.dispatcher.ChannelEventRunnable.run(84)
  • JS中Date对象中几个用法 leeqq JavaScriptDate最后一天
    近来工作中遇到这样的两个需求 1. 给个Date对象，找出该时间所在月的第一天和最后一天 2. 给个Date对象，找出该时间所在周的第一天和最后一天   需求1中的找月第一天很简单，我记得api中有setDate方法可以使用 使用setDate方法前，先看看getDate var date = new Date(); console.log(date); // Sat J
  • MFC中使用ado技术操作数据库 你不认识的休道人 sqlmfc
    1.在stdafx.h中导入ado动态链接库 #import"C:\Program Files\Common Files\System\ado\msado15.dll" no_namespace rename("EOF","end")2.在CTestApp文件的InitInstance()函数中domodal之前写::CoIniti
  • Android Studio加速 rensanning android studio
    Android Studio慢、吃内存！启动时后会立即通过Gradle来sync & build工程。 （1）设置Android Studio a) 禁用插件 File -> Settings...  Plugins 去掉一些没有用的插件。 比如：Git Integration、GitHub、Google Cloud Testing、Google Cloud
  • 各数据库的批量Update操作 tomcat_oracle javaoraclesqlmysqlsqlite
    MyBatis的update元素的用法与insert元素基本相同，因此本篇不打算重复了。本篇仅记录批量update操作的 sql语句，懂得SQL语句，那么MyBatis部分的操作就简单了。 　　注意：下列批量更新语句都是作为一个事务整体执行，要不全部成功，要不全部回滚。 MSSQL的SQL语句 　WITH R AS（ 　　SELECT 'John' as name, 18 as
  • html禁止清除input文本输入缓存 xp9802 input
    多数浏览器默认会缓存input的值，只有使用ctl+F5强制刷新的才可以清除缓存记录。如果不想让浏览器缓存input的值，有2种方法： 方法一： 在不想使用缓存的input中添加 autocomplete="off"; eg: <input type="text" autocomplete="off" name