分布式大数据处理引擎

ASP.NET Core 入门教学二十一 分布式追踪技术

分布式追踪技术在微服务架构中非常重要，它可以帮助开发者理解和监控应用程序在分布式环境中的行为。
充值内卷·2024-09-10 13:14

中间件的学习理解总结

目录一、定义与作用二、主要类型数据库中间件远程过程调用中间件面向消息的中间件事务处理中间件三、特点与优势独立性高效性可扩展性可靠性四、应用场景企业应用集成分布式系统电子商务移动应用开发五、数据库中间件功能细节
DCDDDDcccc·2024-09-10 13:14

像素流送技术，潜力巨大还是功能不足？

像素流送技术作为UE引擎自带的一款扩展性模块，尽管这项技术拥有一定的潜力，但与市场上成熟的云推流产品相比，它在配套功能方面仍显薄弱。都有哪些具体表现呢？
DolitD·2024-09-10 13:11

每个分布式营销团队都应该使用的5种分析工具

没有数据分析的营销就像没有计划的训练——当然，你可能会取得一些进展，但是你很可能没有将工作时间和努力投资在最有效的方式上。它是没有方向的，容易变成毫无目的的磨炼，通常会产生不可预测或次优的结果。但你已经了解这些了，所以你用GoogleAnalytics来追踪你网站的性能指标。你还可能会定期查看你的邮件和社交媒体营销平台内置的分析工具，以监控你的内容和广告表现。但这足够吗？特别是当你希望你的营销团队
AI进修生·2024-09-10 12:10

深入解析HDFS：定义、架构、原理、应用场景及常用命令

引言Hadoop分布式文件系统（HDFS，HadoopDistributedFileSystem）是Hadoop框架的核心组件之一，它提供了高可靠性、高可用性和高吞吐量的大规模数据存储和管理能力。
CloudJourney·2024-09-10 12:39

分布式事务

在微服务结构中，分布式事务是经常要考虑的问题。分布式事务解决方案有多种，有各自的优劣势和适用场景。主流的分布式事务框架库是阿里的seata，将根据seata库说明这些分布式事务的特点。
天黑了g·2024-09-10 11:59

事件顺序保护

背景在分布式结构中，异步通信时，有时需要保证时间产生和消费的顺序。例如，商品购物中，修改订单，删除订单两个命令操作，如果异步事件产生乱序，删除订单事件先消费处理，那么在修改订单时肯定会出错。
天黑了g·2024-09-10 11:59

简单介绍 docker

简单介绍docker简介Docker是一个开源的应用容器引擎，让开发者可以打包他们的应用以及依赖包到一个可移植的容器中，然后发布到任何流行的Linux或Windows操作系统的机器上，也可以实现虚拟化，
ZH_qaq·2024-09-10 09:16

详解 JuiceFS sync 新功能，选择性同步增强与多场景性能优化

此外，该工具还提供了增量同步、模式匹配（类似Rsync）、分布式同步等高级功能。
Juicedata·2024-09-10 05:51

性能、成本与 POSIX 兼容性比较： JuiceFS vs EFS vs FSx for Lustre

JuiceFS是一款为云环境设计的分布式高性能文件系统。AmazonEFS易于使用且可伸缩，适用于多种应用。AmazonFSxforLustre则是面向处理快速和大规模数据工作负载的高性能文件系统。
Juicedata·2024-09-10 05:21

如何进行架构技术方案选型?

在架构设计时,通常面临的一个难题是,如何选择架构的技术方案.这也是各种项目都会碰到的问题.我们到底是选择C/S，B/S模式，如果选择C/S,那么到底是三层C/S还是两层，到底要不要分布式，B/S的展示层是自己写
猫咪张·2024-09-10 04:44

SpringBoot：分布式架构的演进过程

2.大型主机比较复杂，培养人才的成本比较高。3.单点问题,如过大型机出现故障,整个系统都挂了运行不了,使企业的损失非常大。4.随着技术的进步,个人PC电脑的性能越来越高,成本也越来越低。阿里巴巴在2009年发起了一项去“IOE”的驱动IOE指的是IBM的小型机,Oracle的数据库和EMC的高端存储设备，2009年的去IOE的运动,一直到2003的支付宝的最后一台IBM的小型机的下线。为什么要去I
椰果学Android·2024-09-10 04:12

大型网站核心架构要素

伸缩性度量3.2伸缩性方案3.2.1应用服务器集群3.2.2缓存服务器集群3.2.3关系数据库集群3.2.4NoSQL数据库产品4扩展性4.1扩展性度量4.2扩展性方案4.2.1事件驱动架构4.2.2分布式服务
贾欣晓·2024-09-10 02:33

万字详解PHP+Sphinx中文亿级数据全文检索实战（实测亿级数据0.1秒搜索耗时）

Sphinx官方文档：http://sphinxsearch.com/docs/sphinx3.html极简概括：由C++编写的高性能全文搜索引擎的开源组件，C/S架构，跨平台（支持Linux、Windows
小松聊PHP进阶·2024-09-10 00:39

goleveldb的原理简述（基于golang的goleveldb库）

简介goleveldb是基于LSM-Tree实现的针对处理写多读少场景的解决方案，通常用于构建写多读少的存储引擎整体架构图如下基于用户接口层简述原理吧Get，按key查询数据，首先区内存中的数据，如果内存中没有则依次从硬盘中的
陈墨1234·2024-09-10 00:08

Hadoop HDFS中的NameNode、SecondaryNameNode和DataNode

HadoopHDFS中的NameNode、SecondaryNameNode和DataNode目录1.定义2.主要作用3.官方链接1.定义在HadoopHDFS（Hadoop分布式文件系统）中，有三个关键的组件
BigDataMLApplication·2024-09-10 00:38

zabbix 介绍

zabbix介绍1、Zabbix描述Zabbix是一个企业级的高度集成开源监控软件，提供分布式监控解决方案，可以用来监控设备、服务等的可用性和性能，其产品不分企业版和社区版，是一个真正的源代码开放产品，
crazy_zhangcong·2024-09-10 00:03

Zabbix的简介

Zabbix简介一、Zabbix介绍Zabbix是一个企业级的、开源的、分布式的监控套件Zabbix可以监控网络和服务的监控状况.Zabbix利用灵活的告警机制，允许用户对事件发送基于Email的告警.
蜡笔晓心·2024-09-09 23:31

影响幸福感的外部因素

因为你的生活会被汽车轰鸣声，引擎加速声，不耐烦的喇叭声搅乱的支离破碎。研究显示，无论过了多久，人都无法做到完成适应噪声干扰。甚至有研究显示，人有时为了适应噪声，认知功能会因而受损。
An_d1fa·2024-09-09 23:59

Yarn介绍 - 大数据框架

YARN的概述YARN是一个资源调度平台，负责为运算程序提供服务器运算资源，相当于一个分布式的操作系统平台，而MapReduce等运算程序则相当于运行于操作系统之上的应用程序YARN是Hadoop2.x
why do not·2024-09-09 23:58

浅析大数据Hadoop之YARN架构

YARN提供了资源管理和资源调度等机制1.1原HadoopMapReduce框架对于业界的大数据存储及分布式处理系统来说，Hadoop是耳熟能详的卓越开源分布式文件存储及处理框架，对于Hadoop框架的介绍在此不再累述
haotian1685·2024-09-09 22:26

开源AI图像识别：支持扫描文件批量识别快速对接数据库存储

开源项目介绍(可本地部署，支持国产化)思通数科研发了一款多模态AI能力引擎，专注于提供自然语言处理（NLP）、情感分析、实体识别、图像识别与分类、OCR识别和语
思通数科x·2024-09-09 22:24

kubernetes online depoly | kubeadm 快速部署kubernetes v1.25 集群 |单matser

目录一、环境准备二、安装Containerd三、安装Kubernetes四、部署网络插件一、环境准备软件环境：操作系统AlmaLinux9容器引擎ContainerdKubernetes1.25服务器规划
深耕云原生·2024-09-09 21:21

Flink的时间与watermarks详解

当我们在使用Flink的时候，避免不了要和时间(time)、水位线(watermarks)打交道，理解这些概念是开发分布式流处理应用的基础。那么Flink支持哪些时间语义？
大数据技术与数仓·2024-09-09 21:44

年中盘点 | 刺激战场：半年新增671款Dapps，区块链版吃鸡谁得天下？

在2017年末，被称作“区块链新物种”的Dapp将我们迅速带入了区块链3.0时代，随之而来的是各大公链之争、Dapp开发激励计划陆续推出、分布式应用数量剧增，“空投”福利也成为吸引玩家参与的一种重要手段
DappVision·2024-09-09 21:57

Docker 引擎

Docker引擎是一个包含以下主要组件的客户端服务器应用程序。一种服务器，它是一种称为守护进程并且长时间运行的程序。RESTAPI用于指定程序可以用来与守护进程通信的接口，并指示它做什么。
嘟嘟小猪·2024-09-09 21:47

浅谈Docker引擎

在Docker首次发布的时候，Docker引擎由两个核心构成，即：LXC和Dockerdaemon。
秦偏执·2024-09-09 21:47

【Docker深入浅出】Docker引擎架构介绍

文章目录一.docker引擎介绍1.Dockerdaemon：实现DockerAPI，通过API管理容器2.containerd：负责容器的生命周期3.runc：用于创建和启动容器二.启动容器的过程1.
roman_日积跬步-终至千里·2024-09-09 20:14

弹性搜索引擎Elasticsearch：本地部署与远程访问指南

弹性搜索引擎Elasticsearch作为一种分布式、可扩展的搜索和分析引擎，受到广泛欢迎。本文将介绍Elasticsearch的本地部署与远程访问，帮助读者更好地利用这一强大的工具。
猴哥是肖鸿·2024-09-09 20:39

C/S模式优缺点

C/S模式优缺点优点：1.结构简单，系统中不同类型的任务分别由客户和服务器承担，有利于发挥不同机器平台的优势；2.支持分布式、并发环境，特别是当客户和服务器之间的关系是多对多时，可以有效地提高资源的利用率和共享程度
nxyc_twz·2024-09-09 20:08

实时数仓之实时数仓架构(Hudi)(1)，2024年最新熬夜整理华为最新大数据开发笔试题

+Hudi：湖仓一体数据管理框架，用来管理模型数据，包括ODS/DWD/DWS/DIM/ADS等；+Doris：OLAP引擎，同步数仓结果模型，对外提供数据服务支持；+Hbase：用来存储维表信息，维表数据来源一部分有
2401_84181221·2024-09-09 19:04

python 物理引擎_在 Gym 上构建会动的人工智障1（python）

背景说明作者最近使用processing的一个重要目标就是为学生的编程学习设计具体的应用场景，最近突然发现有一个包已经提供了部分功能，所以探索一下。这个包就是我们今天的主人公：Gym。Gym是用于开发和比较强化学习算法的python包，但是我们也完全可以使用它来作为我们自己程序的应用背景，并提供可视化。简单的说，就是我们使用自己写的小程序，而不是强化学习算法，来尝试完成其中的任务，并把完成任务的过
weixin_39542608·2024-09-09 19:30

python 物理引擎 摩擦力_Python物理引擎

Python的强大源自众多领域大牛的支持，例如物理引擎方面，就有N多模块支持PyODEPyODEisasetofopen-sourcePythonbindingsforTheOpenDynamicsEngine
简单的艾伦·2024-09-09 18:00

OpenHarmony 5.0 纯血鸿蒙系统

OpenHarmony5.0Beta1版本标准系统能力持续完善，ArkUI完善了组件通过CAPI调用的能力；应用框架细化了生命周期管理能力，完善了应用拉起、跳转的能力；分布式软总线连接能力和规格进一步增强
ejinxian·2024-09-09 18:57

如何从0开始搭建一个大语言模型并进一步训练微调?

生成式AI技术已成为产业升级的新晋引擎，加速推动数字经济高速发展，开发者则需要快速掌握生成式AI技能，并熟练掌握领先的工具平台，在竞争激烈的技术变革时代脱颖而出，实现“技术躺赢”。
高校俱乐部·2024-09-09 18:26

程序员如何平衡日常编码工作与提升式学习？--编程之路：平衡与成长的艺术

例如，谷歌的搜索引擎算法就是一个经典的编程案例，它通过高效的算法和
青云交·2024-09-09 17:24

区块链和智能合约能否实现分布式去中心化债券和股票市场？

“区块链和智能合约能否实现分散式债券和股票市场？加密货币可以消除政府通胀的威力。增强隐私性的货币可能会扼杀收入所得税。像OpenBazaar这样的分散市场可以阻止收取销售税。是否可以有分散的金融市场来消除资本利得税。“我必须为我的答案作序5000多年来，主权政府带领人类进步。这些政府通过在其管辖的辖区内维持强制力的垄断行使权力。几乎所有这些君主都以压迫的方式进行管理。大多数人允许和支持各种形式的奴
区块星空·2024-09-09 17:59

【三】分布式训练---单机多卡与多机多卡组网（飞桨paddle2.0+）更加推荐spawn方式！

1.单机多卡启动并行训练飞桨2.0增加paddle.distributed.spawn函数来启动单机多卡训练，同时原有的paddle.distributed.launch的方式依然保留。paddle.distributed.launch通过指定启动的程序文件，以文件为单位启动多进程来实现多卡同步训练。以前在aistudio脚本任务说明里，就是推荐这种方法启动多卡任务。launch这种方式对进程管理
汀、人工智能·2024-09-09 16:14

starrocks和clickhouse数据库比较

下面是这两者的一些主要比较点：1.基础架构与设计目标Starrocks:Starrocks是一个专注于实时数据分析的平台，常用于大数据处理和商业智能应用。
CodeMaster_37714848·2024-09-09 16:12

Spring Cloud全解析：注册中心之Eureka架构介绍

类似多机房部署，保证服务稳定性A:Availability，可用性C:Consistency，一致性对于任意一个系统只能同时满足两个，一个分布式系统不可能同时很好的满足一致性、可用性和分区容错性CA单点集群
拾光师·2024-09-09 14:24

深度学习框架 人工智能操作系统 训练&前向推理 PyTorch Tensorflow MindSpore caffe 张量加速引擎TBE 深度学习编译器 多面体 polyhedral AI集群框架

深度学习框架人工智能操作系统训练&前向推理深度学习框架发展到今天，目前在架构上大体已经基本上成熟并且逐渐趋同。无论是国外的Tensorflow、PyTorch，亦或是国内最近开源的MegEngine、MindSpore，目前基本上都是支持EagerMode和GraphMode两种模式。AI嵌入式框架OneFlow&清华计图Jittor&华为深度学习框架MindSpore&旷视深度学习框架MegEn
EwenWanW·2024-09-09 13:54

fescar源码分析4-TM

下面是TM的定义：TransactionManager(TM):明确全局事务的范围：开始一个全局事务，提交或者回滚一个全局事务简单来说，就是分布式事务的业务发起方。
leiwingqueen·2024-09-09 12:39

TiDB数据库

TiDB是由PingCAP开发的开源分布式SQL数据库，设计初衷是为了解决传统单机关系型数据库在处理大规模数据和高并发事务时的扩展性和性能问题。
傲雪凌霜，松柏长青·2024-09-09 12:43

K8S（Kubernetes）开源的容器编排平台安装步骤详解

首先要在所有节点上安装Docker引擎。安装KubernetesMaster：在集群中选择一台主机作为Master节点，安装K8S的控制平面组件，如APIServer、
爱摄影的程序猿·2024-09-09 12:11

Java 入门指南：初识 JVM Java虚拟机（Java Virtual Machine）

文章目录引言JVM架构类加载器子系统（ClassLoaderSubsystem）运行时数据区（RuntimeDataArea）执行引擎（ExecutionEngine）垃圾回收器（GarbageCollector
ZachOn1y·2024-09-09 11:10

ELK架构介绍

Elasticsearch提供分布式存储和搜索能力；Logstash负责数据收集和处理，而Kibana则提供数据可视化和分析界面。
星河漫漫l·2024-09-09 11:40

Hbase的简单使用示例

HBase是基于HadoopHDFS构建的分布式、列式存储的NoSQL数据库，适用于存储和检索超大规模的非结构化数据。它支持随机读写，并且能够处理PB级数据。
傲雪凌霜，松柏长青·2024-09-09 11:40

论分布式系统的设计与实现

本人任职某运营商解决方案架构师职位，因工作需要考取了软考的系统架构师认证，并顺利的通过了考试一点点心得分享如下：选择题（就是刷，刷到你出肌肉记忆，闭眼就知道选项）案例题（就是背，很多简答题的回答都是公式化的比如看到活动图和状态图就知道它俩有啥区别，刚开始可能会有点恼火，准备的过程可能就像背面试题一样，很多东西是通的）论文题（最讲究技巧和套路的一门考试，相信很多高项的同学都是挂在论文上了，而架构师的
不戴眼镜的朱学长·2024-09-09 11:38

2023-03-15

1.简述引擎有哪些类型，各类搜索引擎的工作原理是什么。.
困的晕_5c43·2024-09-09 11:23

UE5引擎工具链知识点

当我们提到“引擎工具链的开发”时，通常指的是为游戏开发或其他类型的软件开发创建一系列工具和技术栈的过程。
四代水门·2024-09-09 11:35
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他