E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
ceph分布式去中心化文件系统
大模型训练和推理
文章目录一、NLP基础1.Tokenizer2.positionencoding3.注意力机制与transformer架构二、大模型训练1.SFT训练2.RLHF训练3.
分布式
并行训练技术(1)模型并行
李明朔
·
2024-08-30 01:27
AIGC
深度学习
人工智能
云计算day13
一、Git概述Git是一种
分布式
版本控制系统,用于跟踪和管理代码的变更。它是由LinusTorvalds创建的,最初被设计用于Linux内核的开发。
巭氼
·
2024-08-29 23:42
云计算
中间件简介
它们在
分布式
系统、网络通信和应用集成中起着关键的作用。那么常见的中间件有哪些呢?消息队列中间件:消息队列中间件允许应用程序之间异步地发送和接收消息。
Will_1130
·
2024-08-29 22:38
中间件
虚拟机安装hadoop,hbase(单机伪集群模式)
就像当初做爬虫一样(虽然很简单),在数据爆发的现在,传统的数据库mysql,oracle显然在处理大数据量级的数据时显得力不从心,所以有些特定的业务需要引进能够处理大数据量的数据库,hadoop提供了
分布式
文件系统
流~星~雨
·
2024-08-29 21:31
大数据相关
hadoop
hbase
大数据
深度全面讲解fs.readFileSync:Node.js中的同步文件读取
在Node.js中,fs模块是用于与
文件系统
交互的核心模块之一。它提供了一系列的方法用于文件的读取、写入、删除等操作。其中,fs.readFileSync是一个常用的同步方法,用于读取文件的内容。
软考鸭
·
2024-08-29 20:25
javascript帮助文档
nodejs帮助文档
node.js
javascript
Apache Kafka 快速学习大纲
Kafka概述定义Kafka传统定义:Kafka是一个
分布式
的基于发布/订阅模式的消息队列(MessageQueue),主要应用于大数据实时处理领域。
aaaak_
·
2024-08-29 19:46
大数据
kafka
apache
学习
大数据实训笔记7:kafka
概述Kafka是一个开源的
分布式
事件流平台(EventStreamingPlatform),被数千家公司用于高性能数据管道、流分析、数据集成和关键任务应用。
Roslin_v
·
2024-08-29 19:14
大数据
kafka
云原生应用(7)之Docker容器数据持久化存储机制
一、Docker容器数据持久化存储介绍物理机或虚拟机数据持久化存储由于物理机或虚拟机本身就拥有大容量的磁盘,所以可以直接把数据存储在物理机或虚拟机本地
文件系统
中,亦或者也可以通过使用额外的存储系统(NFS
技术路上的苦行僧
·
2024-08-29 18:10
云原生应用与架构设计
云原生
docker
容器
docker容器数据持久化
QPS提升10倍怎么设计-JAVA后端经常用到的技术
例如,使用
分布式
服务器集群,将请求均匀地分配到各个节点上,避免单个服务器负载过高。升级服务器的硬件配置,如提高CPU性能、增加内存容量、使用更快的存储设备等。例如,采用多核处理
九张算数
·
2024-08-29 17:00
java
开发语言
优秀的开源项目
目录热key多线程并行秒级百G级日志工具ES操作工具消息推送平台HTTP客户端业务层的
分布式
限流组件企业级微服务解决方案热keyhotkey:京东App后台中间件,毫秒级探测热点数据,毫秒级推送至服务器集群内存
点滴~
·
2024-08-29 16:28
开源
树数据结构(Tree Data Structures)的全面指南:深度解析、算法实战与应用案例
从
文件系统
的组织到数据库的索引,从编译原理的语法分析到人工智能的决策制定,树数据结构无处不在。本文将深入探讨树数据结构的基本概念、类型、遍历方式及其在实际应用中的广泛案例。
Chauvin912
·
2024-08-29 16:24
数据结构
科普
数据结构
算法
分布式
中间件
1.Nacos服务注册和服务发现原理图:1.服务提供方将集群信息注册到Nacos,并定期心跳包提供健康信息,宕机即剔除2.服务消费方定期拉取订阅信息,获取服务实例列表3.服务集群的负载均衡是在消费者一方进行选择负载均衡:四层(传输层,ip+端口),七层(应用层,在四层ip+端口的基础上,添加一些用户级负载均衡规则,例如过滤特定的url访问请求);nginx同时支持四层和七层负载均衡,硬件负载均衡器
C15751X
·
2024-08-29 16:54
分布式
中间件
Python知识点:如何使用HBase与HappyBase进行
分布式
存储
使用HBase与HappyBase进行
分布式
存储是处理大规模数据的有效方式。HBase是一个基于Hadoop的开源
分布式
数据库,可以处理非常大的表。
杰哥在此
·
2024-08-29 15:51
Python系列
分布式
python
hbase
编程
面试
思二勋:web3.0是打造应对复杂市场敏捷组织的关键
本文内容摘自思二勋所著的《
分布式
商业生态战略》一书。数字化时代,需要企业具备敏捷应对变化的能力,以敏捷反应应对客户和市场的迅速变化。
学客汇
·
2024-08-29 14:15
商业研究
web3
敏捷组织
组织的数字化转型
区块链
分布式自治组织
【观点】区块链的未来:
分布式
商业;企业的未来:
分布式
商业生态战略
本文内容摘自思二勋所著的《
分布式
商业生态战略》一书。近两年,商业经济环境的不确定性越来越明显,市场经济受到疫情、技术、政策等多方因素影响越来越难以预测,黑天鹅事件时有发生。
学客汇
·
2024-08-29 14:14
商业观察
商业研究
区块链
分布式
经验分享
新书推荐:《
分布式
商业生态战略:未来数字商业新逻辑与企业数字化转型新策略》
近两年,商业经济环境的不确定性越来越明显,市场经济受到疫情、技术、政策等多方因素影响越来越难以预测,黑天鹅事件时有发生。在国内外经济方面,国际的地缘政治对商业经济产生着重大的影响,例如供应链中断,核心技术的自主创新及国产化,以及美联储的持续加息对市场经济的影响,等等。国内经济也在承压发展,尽管内需总体回暖,但市场活力不足、内生动力不强、市场资源利用率低下等问题不容忽视。而在技术革新商业经济方面,如
学客汇
·
2024-08-29 14:44
商业研究
商业观察
分布式
CPU/内存/综合性能评估工具汇总-1:lmbench
、概括嵌入式开发中对要设计的产品、立项的项目进行设计时,往往需要对关键芯片进行性能评估,本文主要总结基于linux系统的产品在性能评估时的工具使用总结,在aarch64(arm64平台下测试),板卡根
文件系统
为
So_shine
·
2024-08-29 14:42
linux调试工具和性能量化
性能优化
单例模式(singleton)- python实现
这个模式通常用于管理共享资源,如数据库连接或
文件系统
的操作,其中重复的实例化可能会导致问
懂一点的陈老师
·
2024-08-29 12:00
设计模式
单例模式
python
开发语言
Spark权威指南读书笔记(二):结构化API
第四章结构化API概述结构化API主要指三种核心
分布式
集合类型API:Dataset、DataFrame、SQL表和视图DataFrame和Dataset类型DataFrame和Dataset是具有行和列的类似于数据表的集合类型
kaiker
·
2024-08-29 11:23
Python
分布式
任务处理库之dramatiq使用详解
Dramatiq是一个用于
分布式
任务处理的Python库,旨在提供简单、可靠的任务队列解决方案。与其他任务队列库相比,Dramatiq更加轻量级,且易于上手。
Rocky006
·
2024-08-29 09:41
python
开发语言
Spark-RDD迭代器管道计算
一、上下文《Spark-Task启动流程》中讲到我们提交Stage是传入的是这个Stage最后一个RDD,当Task中触发ShuffleWriter、返回Driver数据或者写入Hadoop
文件系统
时才触发这个
隔着天花板看星星
·
2024-08-29 07:24
spark
大数据
scala
Kylin的工作原理及使用分享操作指南
ApacheKylin是一个
分布式
的分析引擎,专为大数据环境中的快速分析和查询而设计。它通过构建OLAP(联机分析处理)立方体,使得对海量数据的实时分析成为可能,极大地提升了数据查询的效率。
vvvae1234
·
2024-08-29 05:14
kylin
Metasploit漏洞利用系列(九):MSF渗透测试 - DistCC后门漏洞实战
DistCC是一个
分布式
编译系统,旨在通过网络分发编译任务以加速编译过程。然而,不当的配置或特定版本的漏洞可能为攻击者留下可乘之机,使其能够利用DistCC服务作为跳板,入侵目标系统。
Alfadi联盟 萧瑶
·
2024-08-29 02:55
网络安全
分布式
唯一id的7种方案
背景为什么需要使用
分布式
唯一id?如果我们的系统是单体的,数据库是单库,那无所谓,怎么搞都行。
木小同
·
2024-08-29 02:53
面试
分布式
分布式id
雪花算法
Linux——
文件系统
层次结构,绝对路径
一、
文件系统
层次结构linux中所有文件存储在
文件系统
中,
文件系统
层次结构可以类比为一颗到立的树,最顶层为根目录/,根目录/底又分了/etc,/bin,/boot,/dev等子目录,而这些子目录底下又可以生成子目录分支
宁檬精
·
2024-08-29 01:18
linux
服务器
运维
Openstack 与
Ceph
集群搭建(下): Openstack部署
文章目录文章参考部署节点准备1.修改Host文件与hostname名称2.安装NTP软件3.网卡配置信息4.开启Docker共享挂载5.安装python虚拟环境6.安装kolla-ansible7.加载AnsiblegalaxyrequirementsOpenstack安装前预配置1.配置密码2.配置multinode文件3.修改全局配置文件Openstack正式安装1.启动bootstrap-s
范枝洲
·
2024-08-29 01:43
系统运维
openstack
ceph
UnQLite:多语言支持的嵌入式NoSQL数据库深入解析
批量文件存储3.游标的使用4.UnQLite-Python使用示例4.UnQLite数据库引擎架构5.1Key/Value存储层5.2文档存储层5.3可插拔的存储引擎5.4事务管理器与分页模块5.5虚拟
文件系统
橘色的喵
·
2024-08-29 01:12
nosql
数据库
Key/Value
ACID
嵌入式
SQLite
NoQLite
Hdfs的机架感知与副本放置策略
1.介绍Apachehadoop机架感知Hadoop
分布式
文件系统
(Hdfs)作为ApacheHadoop生态系统的的核心组件之一,通过机架感知和副本放置策略来优化数据的可靠性,可用和性能.Hdfs的机架感知和副本放置策略是其设计的关键组成部分
sheansavage
·
2024-08-29 01:42
hdfs
hadoop
大数据
JMS 原理
为什么需要JMS用RPC中间件技术已广泛应用于
分布式
系统之间的通信,但是这些技术也显示出了局限性:同步通信:客户发出调用后,必须等待服务对象完成处理并返回结果后才能继续执行客户和服务对象的生命周期紧密耦合
LynnGuo
·
2024-08-29 00:53
ROS Node
ROS节点是ROS中实现模块化、
分布式
和可扩展性的关键组件之一。在ROS中,节点是通过ROS核心(ROSMaster)进行通信和协调的。
GYHlf
·
2024-08-28 23:31
操作系统
ROS
LLM_Robotics
ROS
Robot
操作系统
Bitcoin ,Ethereum and Solana
Bitcoin比特币(Bitcoin,简称BTC)是一种基于区块链技术的
去中心化
数字货币,由中本聪(SatoshiNakamoto)在2008年提出,并于2009年正式推出。
0010000100
·
2024-08-28 23:58
Web3
区块链
linux一切皆是文件_Linux中“一切皆文件”是什么意思?
反过来说,是Linux和GNU世界定的规范,任何东西都挂在
文件系统
之上,即使它们不是文件,也以文件的形式来呈现。
冯刚廷
·
2024-08-28 22:26
linux一切皆是文件
如何理解Linux中万物皆文件?
它表达了在Linux系统中,所有设备、进程、网络连接、文件和目录等各种实体都被抽象为文件的概念,通过
文件系统
进行统一管理和访问的思想。
王摇摆
·
2024-08-28 22:26
Linux
linux
服务器
运维
XML-RPC-1概述
XML-RPC是一个远程过程调用(远端程序呼叫)(remoteprocedurecall,RPC)的
分布式
计算协议,通过XML将调用函数封装,并使用HTTP协议作为传送机制。
weixin_30340775
·
2024-08-28 22:26
RPC框架之Dubbo
问题1:为什么要把系统拆分成
分布式
的?为啥要用dubbo?1.为什么要将系统进行拆分?
猫猫桑
·
2024-08-28 22:56
Java
Rust: Reading and Writing Files
ReadingandWritingFilesWeneedsomewaytoactuallygetdatafromthefilesystemsowecanprocessit,andwriteitbackwhenwe’redone我们需要某种方法从
文件系统
中实际获取数据
0010000100
·
2024-08-28 22:53
Rust
rust
数据库
mysql
为什么搜索引擎可以检索到网站?
分布式
计算:提高处理速度。缓存机制:快速返回热门查询结果。用户行为分析:优化搜索结
程序员T哥
·
2024-08-28 22:23
搜索引擎
爬虫
网络安全
网络爬虫
网络协议
java
python
教程:在Spring Boot应用中集成OAuth 2.0认证
在现代的
分布式
系统中,使用OAuth2.0认证可以有效地保护API端点和用户数据。本文将介绍如何在S
微赚淘客系统开发者@聚娃科技
·
2024-08-28 22:52
spring
boot
后端
java
Java高级技术day75:Zookeeper与Dubbo
Zookeeper的介绍1.Zookeeper介绍:顾名思义zookeeper就是动物园管理员,他是用来管hadoop(大象)、Hive(蜜蜂)、pig(小猪)的管理员,ApacheHbase和ApacheSolr的
分布式
集群都用到了
开源oo柒
·
2024-08-28 20:54
B+树的原理及实现
B+树的原理及实现一、引言B+树是一种基于B树的树形数据结构,它在数据库和
文件系统
的索引中有着广泛的应用。
eqa11
·
2024-08-28 17:42
b树
数据结构
【RH124知识点问答题】第13章 访问 Linux
文件系统
2.
文件系统
是什么?3.挂载是什么?挂载点是什么?4.怎么理解块设备?5.在SATA附加存储中,第一磁盘上的第一个分区和第二磁盘的第二个分区分别对应哪个块设备文件?
summer.335
·
2024-08-28 16:07
RH124知识点问答题
Linux
linux
运维
服务器
bash
clickhouse集群部署
单节点设置为了延迟演示
分布式
环境的复杂性,我们将首先在单个服务器或虚拟机上部署ClickHouse。ClickHouse通常是从deb或rpm包安装,但对于不支持它们的操作系统也有其他方法。
林鸟鸟
·
2024-08-28 14:29
clickhouse
clickhouse
服务器
k8s上的clickhouse集群部署并创建
分布式
表(附详细参数说明和参考链接)
k8s上的clickhouse集群部署并创建
分布式
表制作docker镜像创建configmap创建clickhouseservicepod创建clickhouseclientpod创建Service创建
分布式
表部署总体参考
KirutoCode
·
2024-08-28 14:56
开发技能
k8s必知必会
目录1、简述etcd及其特点etcd是CoreOS团队发起的开源项目,是一个管理配置信息和服务发现(servicediscovery)的项目,它的目标是构建一个高可用的
分布式
键值(key-value)数据库
小卒曹阿瞒
·
2024-08-28 13:54
八股文
分布式
网络
big
data
CentOS(7.x、8)上安装EMQX
EMQX是一个高度可扩展的
分布式
MQTT消息服务器,适用于IoT、M2M和移动应用程序。
功夫熊猫ok88
·
2024-08-28 11:10
CentOS
centos
linux
运维
Spring Boot 一个极简且完整的后台框架
先放几张图imageimageimage项目介绍SpringBoot,实现了一个极简单的后台框架image小编提供免费的Java架构学习资料(里面有高可用、高并发、高性能及
分布式
、Jvm性能调优、Spring
搬砖养女人
·
2024-08-28 10:33
数据库架构
java
spring
sql
tomcat
当外接硬盘接入到macOS上,只读不可写时,应当格式化
APFS(AppleFileSystem)是苹果公司开发的一种现代
文件系统
格式,用于macOS、iOS、watchOS
小江村儿的文杰
·
2024-08-28 09:29
macos
ARM/Linux嵌入式面经(十八):TP-Link联洲
.323协议2.SIP协议(会话发起协议)3.WebRTC(网页实时通信)4.其他协议io多路复用(select,poll,epoll)面试题linux软连接和硬链接区别1.链接方式2.存储空间3.跨
文件系统
TrustZone_Hcoco
·
2024-08-28 08:20
ARM/Linux嵌入式面试
arm开发
linux
android
架构
嵌入式
2_linux-常用命令1
前言:linux基本原则用户接口命令形式ls部分说明
文件系统
查看服务器基本信息文件查看和处理命令目录基本操作命令vim操作Linux的基本原则:由目的单一的小程序组成;组合小程序完成复杂任务一切皆文件尽量避免捕获用户接口
graceful_black
·
2024-08-28 08:33
图数据库之ArangoDB
ArangoDB是一个多模型、开源的
分布式
数据库,支持文档、图和键值存储三种数据模型。它以其灵活性和强大的查询能力而著称,特别是在需要处理复杂数据关系的场景下。
james二次元
·
2024-08-28 07:46
图数据库
数据库
图数据库
arangodb
推荐系统
社交网络
上一页
1
2
3
4
5
6
7
8
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他