运维数据集运维自动化

字节跳动10万节点HDFS集群多机房架构演进之路(1)

如何高效运维如此超大规模的集群要回答这些问题需要HDFS从多个方向迭代优化，例如DanceNN的上线、运维平台的建设等，本文不会介绍字节跳动HDFS所有的演进方案，而是聚焦在HDFS多机房架构的演进策略上
2401_84122782·2024-09-05 21:23

flux 文生图大模型 自有数据集 lora微调训练案例

参考：https://github.com/ostris/ai-toolkit目前Flux出现了3个训练工具SimpleTunerhttps://github.com/bghira/SimpleTunerX-LABS的https://github.com/XLabs-AI/x-fluxai-toolkithttps://github.com/ostris/ai-toolkit待支持：https:/
loong_XL·2024-09-05 20:47

网络安全（黑客）自学

一、什么是网络安全网络安全可以基于攻击和防御视角来分类，我们经常听到的“红队”、“渗透测试”等就是研究攻击技术，而“蓝队”、“安全运营”、“安全运维”则研究防御技术。
白帽子凯哥·2024-09-05 17:57

【C++11】lambda表达式

文章目录lambda表达式C++98中的一个例子lambda表达式语法lambada表达式的使用捕获列表说明函数对象与lambda表达式lambda表达式C++98中的一个例子在C++98中，如果想要对一个数据集合中的元素进行排序
_麦子熟了·2024-09-05 17:53

Apache Spark简介

Spark提供了一种高效的方法来处理大规模数据集，可以在内存中进行快速计算，具有比传统的基于磁盘的数据处理引擎更高的性能。
不知名的小Q·2024-09-05 17:52

从0开始深度学习（4）——线性回归概念

1.1线性模型线性假设是指目标可以表示为特征的加权和，以房价和面积、房龄为例，可以有下面的式子：w称为权重（weight）b称为偏置（bias）、偏移量（offset）或截距（intercept）给定一个数据集
青石横刀策马·2024-09-05 15:47

【Python机器学习】机器学习任务中常见的数据异质问题和模型异构问题是什么？解决策略是什么？

文章目录数据异质模型异构数据异质数据异质问题（Heterogeneityindata）通常指数据集内部的不一致性，这些不一致性可能来自多种源。
惊鸿若梦一书生·2024-09-05 15:46

1+X云计算运维与开发(中级)实战案例——Kafka集群部署

前言Kafka是一种开源的流处理平台和消息系统，被设计用于构建实时数据管道和流式应用程序，可以处理大规模的实时数据流，并提供高吞吐量、持久性存储和分布式处理能力。在实时数据处理、日志聚合、指标监控、事件驱动架构等场景下，Kafka有着广泛的应用。它的高性能、可扩展性以及丰富的功能使其成为了大数据领域中的重要工具之一。Kafka中发布订阅的对象是topic。用户可以为每类数据创建一个topic，把向
kuuuugua·2024-09-05 15:41

jenkins+docker实现可持续自动化部署springboot项目

目录一、前言二、微服务带来的挑战2.1微服务有哪些问题2.2微服务给运维带来的挑战三、可持续集成与交付概述3.1可持续集成与交付概念3.1.1持续集成3.1.2持续交付3.1.3可持续集成与交付核心理念
小码农叔叔·2024-09-05 14:37

knn分类代码实现（超详解）

本文未赘述原理，觉得知道knn的优秀的同志们都有一定的了解，直接上代码，本代码作为一个参考，希望大家能够结合本人的代码自己去做一遍，虽然可以直接调knn或有数据集，本文呈现的更多的是底层。
小锐->技术成就梦想,梦想成就辉煌。·2024-09-05 14:06

第R3周：天气预测

本文为[365天深度学习训练营]中的学习记录博客参考文章：第R3周：LSTM-火灾温度预测（训练营内部可读）作者：[K同学啊]任务说明：该数据集提供了来自澳大利亚许多地点的大约10年的每日天气观测数据。
Jessica2017lj·2024-09-05 13:30

Oracle日常运维命令

一、日常巡检命令1、检查Oracle实例状态SQL>setpages600lines600SQL>selectinstance_name,host_name,startup_time,status,database_statusfromv$instance;说明：“STATUS”表示Oracle当前的实例状态，必须为“OPEN”；“DATABASE_STATUS”表示Oracle当前数据库的状态，
一心只为学·2024-09-05 13:29

基于流谱理论的SSL/TLS协议攻击检测方法

随着安全套接层/安全传输层（SSL/TLS）加密协议的广泛使用，针对SSL/TLS协议本身发起的SSL/TLS攻击日益增多，因此通过搭建网络流采集环境，构建了包含4种SSL/TLS攻击网络流与正常网络流的网络流数据集
米朵儿技术屋·2024-09-05 12:57

NL2SQL技术方案系列(2)：全系列技术选型完整版：从通用技术选型(向量、图数据库)、大模型选择、Prompt工程、前沿技术方案展示

NL2SQL技术方案系列(2)：全系列技术选型完整版：从通用技术选型(向量、图数据库)、大模型选择、Prompt工程、前沿技术方案展示NL2SQL基础系列(1)：业界顶尖排行榜、权威测评数据集及LLM大模型
汀、人工智能·2024-09-05 12:25

Spark

它提供了对大数据集的容错机制，支持并行操作。DataFrame：DataFrame是基于RDD
傲雪凌霜，松柏长青·2024-09-05 11:20

Hadoop-MapReduce机制原理

阶段图1、MapReduce概述  HadoopMapReduce是一个分布式计算框架，用于轻松编写分布式应用程序，这些应用程序以可靠，容错的方式并行处理大型硬件集群（数千个节点）上的大量数据（多TB数据集
H.S.T不想卷·2024-09-05 11:46

【目标检测】MMRotate旋转目标检测训练自定义DOTA格式数据集

1.安装环境1.1.Conda虚拟环境condacreate--namemmrotatepython=3.8-ycondaactivatemmrotate1.2.安装PyTorchpipinstalltorch==1.12.1+cu113torchvision==0.13.1+cu113torchaudio==0.12.1--extra-index-urlhttps://download.pyto
ericdiii·2024-09-05 10:10

二、MMRotate旋转框目标检测训练DOTA数据集（模型推理与部署，保存推理结果为xml文件并构建镜像）

在上一篇文章中介绍了MMRotate的概述、安装和训练Dota数据集全流程，由于文章篇幅限制还剩下一部分模型的推理和部署环节没有写，为避免后续对这部分工作的遗忘，决定还是补充上这部分的笔记，仅作记录，如有不足之处还请指出
清如许.·2024-09-05 10:07

零基础转行学网络安全怎么样？能找到什么样的工作？

零基础转行学习网络安全是完全可行的，但需要明确的是，网络安全是一个既广泛又深入的领域，包含了网络协议、系统安全、应用安全、密码学、渗透测试、漏洞挖掘、安全编程、安全运维等多个方面。。
爱吃小石榴16·2024-09-05 08:58

PYTHON：Scipy的曲线适合NxM阵列？

但是，我们可以将二维矩阵视为N个一维数据集，然后对每个一维数据集应用`curve_fit`来找到对应的一维曲线拟合参数。
潮易·2024-09-05 08:54

Object Tracking

（鱼数据集、声呐视频、MOT）TheCaltechFishCountingDataset:ABenchmarkforMultiple-ObjectTrackingandC
ZoneIan·2024-09-05 07:50

华为云服务-运维篇-负载均衡介绍与平台算法使用_华为负载均衡设备(1)

本地负载均衡不需要花费高额成本购置高性能服务器，只需利用现有设备资源,就可有效避免服务器单点故障造成数据流量的损失，通常用来解决数据流量过大、网络负荷过重的问题。同时它拥有形式多样的均衡策略把数据流量合理均衡的分配到各台服务器。如果需要在现在服务器上升级扩充，不需改变现有网络结构、停止现有服务，仅需要在服务群中简单地添加一台新服务器。2.4、全局负载均衡2.4.1、简介全局负载均衡针对不同地理位置
一个射手座的程序媛·2024-09-05 07:19

【30天玩转python】Python简介与安装

它以简单易懂的语法和强大的功能性迅速流行，广泛应用于Web开发、数据分析、人工智能、自动化运维等多个领域。
爱技术的小伙子·2024-09-05 04:29

使用Pandas进行数据分析

Pandas纳入了大量库和一些标准的数据模型，提供了高效地操作大型数据集所需的工具。pandas提供了大量能使我们快速便捷地处理数据的函数和方法。你很快就会发现，它是使Python成为强大
2301_81698853·2024-09-05 03:55

【Linux服务器故障排查实用指南】

原文地址：【Linux服务器故障排查实用指南】作者：蚁巡运维平台#运维#http://www.antvision.cn/由于造成网络问题的因素多种多样，因此网络故障排查技能就成了每位服务器或网络服务负责人必不可少的重要素质
weixin_34214500·2024-09-05 01:11

Python列表全解析：从入门到精通

一、列表的基本概念列表是Python中一种有序、可变的数据集合，能够存储多个元素，这些元素可以是任何数据类型。列表使用方括号[]定义，元素之间用逗号,分隔。例如：my_list=[1,2,3,'a
Bro_cat·2024-09-05 01:08

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（二十四）

本站以分享各种运维经验和运维所需要的技能为主《python零基础入门》：python零基础入门学习《python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中
向往风的男子·2024-09-05 00:07

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（十九）

本站以分享各种运维经验和运维所需要的技能为主《python零基础入门》：python零基础入门学习《python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中
向往风的男子·2024-09-05 00:07

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（二）

本站以分享各种运维经验和运维所需要的技能为主《python零基础入门》：python零基础入门学习《python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中
向往风的男子·2024-09-05 00:37

【从问题中去学习k8s】k8s中的常见面试题（夯实理论基础）（二十三）

本站以分享各种运维经验和运维所需要的技能为主《python零基础入门》：python零基础入门学习《python运维脚本》：python运维脚本实践《shell》：shell学习《terraform》持续更新中
向往风的男子·2024-09-04 23:02

Python教程：使用 Python 和 PyHive 连接 Hive 数据库

更新数据5.4删除数据6.表的描述信息和数据库操作6.1获取表描述6.2列出所有数据库6.3切换数据库7.关闭连接8.使用示例9.完整代码在大数据时代，Hive提供了一种简便的方式来处理和分析大规模的数据集
旦莫·2024-09-04 23:32

AI模型：追求全能还是专精？

常见的AI模型类型包括：监督学习模型：这些模型通过训练数据集学习，数据集中包含了输入和对应的输出标签。例子包括决策树、支持向量机（SVM）、神经网络等。
Lill_bin·2024-09-04 23:00

【机器学习】任务二：波士顿房价的数据与鸢尾花数据分析及可视化

1.3scikit-learn库：1.4TensorFlow1.5Keras2.波士顿房价的数据分析及可视化2.1波士顿房价的数据分析2.1.1步骤一：导入所需的模块和包2.1.2步骤二：从Keras库中加载波士顿房价数据集
FHYAAAX·2024-09-04 21:16

探索Ansible自动化运维：提高效率的关键工具

探索Ansible自动化运维：提高效率的关键工具在现代IT环境中，自动化已经成为提高效率、减少错误和优化资源利用的重要手段。
一个代码猎人·2024-09-04 19:05

第T4周：使用TensorFlow实现猴痘病识别

天深度学习训练营中的学习记录博客原作者：K同学啊文章目录一、前期工作1.设置GPU（如果使用的是CPU可以忽略这步）2.导入数据3.查看数据二、数据预处理1、加载数据2、数据可视化3、再次检查数据4、配置数据集三
oufoc·2024-09-04 18:03

机器学习算法 —— LightGBM

博客的简介（文章目录）目录背景描述数据说明数据来源LightGBMLightGBM原理简介LightGBM的优点LightGBM的缺点LightGBM的应用基于英雄联盟数据集的LightGBM分类实战函数库导入数据读取
ZShiJ·2024-09-04 18:30

解决AutoDL远程服务器训练大模型的常见问题：CPU内存不足与 SSH 断开

特别是在使用大规模数据集和多线程数据加载时，内存消耗可能会迅速增长，最终导致训练任务
微凉的衣柜·2024-09-04 17:26

数据分析项目——物流数据行业数据分析

这里又是一个经典的数据分析项目——物流数据行业数据分析，有需要项目配套数据集的可以关注私信我免费获取(●'◡'●)PS：本文中全部代码都在JupyterNotebook中编写完成，可以使用JupyterNotebook
~在杰难逃~·2024-09-04 17:54

pytorch利用简单CNN实现葡萄病虫害图片识别

3数据集我没有数据集，仅有的一些图片是之前委托我做程序的bro给的
麦麦大数据·2024-09-04 16:19

基线配置讲解

再就是由于不同供应商的支持原因，导致现存的操作系统和应用版本跨度很广，安全人员或运维人员资源不够的情况下很难支持做基线配置工作。
梦龙zmc·2024-09-04 15:47

多图详解kafka生产者消息发送过程

:fire:《Kafka运维管控平台LogiKM》:fire::pencil2:更强大的管控能力:pencil2::tennis:更高效的问题定位能力:tennis::sunrise:更便捷的集群运维能力
JAVAQXQ·2024-09-04 15:13

华为OD机试真题-日志采集-2024年OD统一考试（E卷）

题目描述日志采集是运维系统的的核心组件。日志是按行生成，每行记做一条，由采集系统分批上报。如果上报太频繁，会对服务端造成压力;如果上报太晚，会降低用户的体验;·如果一次上报的条数太多，会导致超时失败。
ai因思坦·2024-09-04 15:42

识别实验笔记和经验总结

在进行图像分类模型对比实验时，为了确保对比的公平性和可靠性，以下几个因素需要重点考虑：数据集的一致性：数据集分割：确保训练集、验证集和测试集的划分是一致的。各模型使用相同的训练数据和测试数据。
Wils0nEdwards·2024-09-04 14:02

语义分割笔记

在语义分割任务中，提升自制数据集上baselinemodel的平均交并比（mIoU）和平均精度（mAcc）的难度取决于多个因素。
Wils0nEdwards·2024-09-04 14:02

NL2SQL技术方案系列(4)：金融领域NL2SQL技术方案以及行业案例实战讲解2

NL2SQL技术方案系列(4)：金融领域NL2SQL技术方案以及行业案例实战讲解2NL2SQL基础系列(1)：业界顶尖排行榜、权威测评数据集及LLM大模型（SpidervsBIRD）全面对比优劣分析[Text2SQL
汀、人工智能·2024-09-04 09:30

NL2SQL进阶系列(4)：ConvAI、DIN-SQL、C3-浙大、DAIL-SQL-阿里等16个业界开源应用实践详解[Text2SQL]

NL2SQL进阶系列(4)：ConvAI、DIN-SQL等16个业界开源应用实践详解[Text2SQL]NL2SQL基础系列(1)：业界顶尖排行榜、权威测评数据集及LLM大模型（SpidervsBIRD
汀、人工智能·2024-09-04 09:59

2022-2023学年广州市中等职业学校学生技能竞赛网络建设与运维赛项样题

2022-2023学年广州市中等职业学校学生技能竞赛网络建设与运维赛项样题2023年09月一、竞赛内容分布“网络建设与运维”竞赛共分四个部分，其中：第一部分：网络运维及安全部署项目（450分）第二部分：
爱网猫·2024-09-04 09:29

SQL必知必会（第4版）读书笔记

第1课了解SQL1.1数据库基础1.1.1数据库数据库是一个以某种有组织的方式存储的数据集合。数据库（database）保存有组织的数据的容器（通常是一个文件或一组文件）。
·云扬··2024-09-04 07:17

【深度学习 transformer】使用pytorch 训练transformer 模型,hugginface 来啦

Datasets：这是一个用于加载和预处理NLP数据集的库，与Tran
东华果汁哥·2024-09-04 06:39

NLP中的词向量及其应用

领域适应是一种技术，它允许机器学习和转移学习模型来映射小生境数据集，这些数据集都是用同一种语言编写的，但在语言上仍然不同。例如
喜欢打酱油的老鸟·2024-09-04 05:01
上一页 2 3 4 5 6 7 8 9 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他