机器学习云计算集群posix

【解决（几乎）任何机器学习问题】：处理分类变量篇（上篇）

这篇文章相当长，您可以添加至收藏夹，以便在后续有空时候悠闲地阅读。本章因太长所以分为上下篇来上传，请敬请期待很多⼈在处理分类变量时都会遇到很多困难，因此这值得⽤整整⼀章的篇幅来讨论。在本章中，我将讲述不同类型的分类数据，以及如何处理分类变量问题。什么是分类变量？分类变量/特征是指任何特征类型，可分为两⼤类：⽆序，有序⽆序变量是指有两个或两个以上类别的变量，这些类别没有任何相关顺序。例如，如果将性别
X.AI666·2024-02-19 13:01

云计算实训室建设方案2024

云计算课程体系云计算实训课程体系设计依据一、培养目标唯众公司提供创新技术教育和服务的目标，旨在提高人才培养质量，扩大就业创业，推动经济转型升级，以及培育新的经济发展动能。
武汉唯众智创·2024-02-19 13:00

C语言指针进阶

(char*)1.字符常量2.字符串常量二、指针数组三、数组指针1.数组指针的定义2.数组名vs&数组名3.数组指针的使用总结前言提示：这里可以添加本文要记录的大概内容：例如：随着人工智能的不断发展，机器学习这门技术也越来越重要
空杯心！·2024-02-19 13:00

云计算基础-华为存储实验

存储配置流程创建硬盘域（CK，包括热备CK）创建存储池（CKG、Extent）创建LUN、LUN组、将LUN加入LUN组创建主机、主机组、将主机加入主机组创建映射视图（LUN组和主机组的映射）1.创建CK创建硬盘域就是创建CK，CK可以包含各种不同类型的硬盘一个硬盘域可以创建多个存储池热备策略：预留多少空间当热备空间硬盘域创建成功后可以看到该CK的状态等信息2.创建CKG及extent(图片为视频
比特微联·2024-02-19 13:28

云计算基础-大页内存

大页内存功能概述什么是大页内存简单来说，就是通过增大操作系统页的大小来减小页表，从而避免快表缺失主要应用场景主要运用于内存密集型业务的虚拟机，比如对于运行数据库系统的虚拟机，采用HugePages(大页)后，可以提升数据库的整体性能(越20%)，并有效减小性能抖动内存基本概念CPU访问内存时，是去通过寻址去访问内存的，寻址最终寻的是内存的物理地址，物理地址是通过虚拟地址映射出去的，在这里引入了一个
比特微联·2024-02-19 13:58

云计算基础-快照与克隆

快照及克隆什么是快照快照是数据存储的某一时刻的状态记录，也就是把虚拟机当前的状态保存下来(快照不是备份，快照保存的是状态，备份保存的是副本)快照优点速度快，占用空间小快照工作原理在了解快照原理前，首先需要知道两个概念：索引/数据和差分盘索引和数据（indexnode/datablock）首先要了解，每一个文件系统都是有两部分组成的：索引和数据（indexnode/datablock）,索引有时候也
比特微联·2024-02-19 13:28

云计算基础-虚拟机迁移原理

什么是虚拟机迁移虚拟机迁移是指将正在运行的虚拟机实例从一个物理服务器（或主机）迁移到另一个物理服务器（或主机）的过程，而不会中断虚拟机的运行。虚拟机拟机迁移分类虚热迁移：开机状态下迁移冷迁移：关机状态下迁移虚拟机可以迁移哪些东西？1.虚拟机的配置文件2.虚拟机的内存呢3.虚拟机的磁盘文件虚拟机配置文件迁移虚拟机配置文件迁移就是从主机A将虚拟机的配置文件移动至主机B的过程首先看配置文件，在执行迁移前
比特微联·2024-02-19 13:28

云计算基础-备份和容灾

什么是备份？什么是容灾？备份：备份是容灾的基础，通常指在数据中新内，将全部或部分数据集合从应用主机的硬盘或阵列复制到其他存储介质的过程。备份的本质就是存储数据的“复制”，目的是以外发生后的数据恢复备份本质是把一份数据复制到另一份数据上，比如把生产存储的数据复制到其他地方(备份存储等)，当生产存储故障了，可以用备份的存储数据恢复或使用备份存储顶替生产存储容灾：容灾系统是指在相隔较远的异地，建立两套或
比特微联·2024-02-19 13:28

云计算基础-计算虚拟化-CPU虚拟化

CPU指令系统在CPU的工作原理中，CPU有不同的指令集，如下图，CPU有4各指令集：Ring0-3，指令集是在服务器上运行的所有命令，最终都会在CPU上执行，但是CPU并不是说所有的命令都是一视同仁的，它会把命令分为不同的指令集Ring0指令集称之为内核态指令集，改啊指令集里面啊运行的主要是操作系统访问硬件、关键数据结构，运行中断等。Ring1-2指令集主要运行的是设备驱动的命令Ring3指令集
比特微联·2024-02-19 13:58

云计算基础 -NUMA

UMAUMA中文翻译叫：一致性内存访问多个CPU通过同一根前端总线（FSB）来访问内存（所有的内存访问都需要通过北桥芯片来完成），若多个CPU访问内存的不同内存单元还是相同内存单元，同一时刻，只有一个CPU能够访问内存随着CPU内核越来越多，性能越来越强，现在已经有双路、四路的服务器，若是UMA架构的话，前端总线很容易造成瓶颈NUMANUMA中文翻译：非一致性内存访问NUMA解决了UMA架构所有C
比特微联·2024-02-19 13:58

云计算基础-虚拟化概述

虚拟化概述虚拟化是一种资源管理技术，能够将计算机的各种实体资源（如CPU、内存、磁盘空间、网络适配器等）予以抽象、转换后呈现出来并可供分割、组合为一个或多个逻辑上的资源。这种技术通过在计算机硬件上创建一个抽象层，将单台计算机的硬件元素（处理器、内存、存储等）分成多个虚拟计算机（通常称为虚拟机(VM)）。每个虚拟机都会运行自己的操作系统(OS)，其行为就像一台独立的计算机，即使它只在一部分实际底层计
比特微联·2024-02-19 13:28

云计算基础-云计算概念

云计算定义云计算是一种基于互联网的计算方式，通过这种计算方式，共享的软硬件资源和信息可以按需提供给计算机和其他设备。云计算依赖资源共享以达成规模经济，类似基础设置(如电力网)。
比特微联·2024-02-19 13:27

云计算基础-存储基础

存储概念什么是存储：存储就是根据不同的应用程序环境，通过采取合理、安全、有效的方式将数据保存到某些介质上，并能保证有效的访问，存储的本质是记录信息的载体。存储的特性：数据临时或长期驻留的物理介质需要保证数据能够及时的被读取或者保存需要保证数据完整安全有效什么是文件系统：文件系统是操作系统用于明确存储设备（常见的是磁盘，也有基于NANDFlash的固态硬盘）或分区上的文件的方法和数据结构，即在存储设
比特微联·2024-02-19 13:27

云计算----虚拟化概述、CPU虚拟化、内存虚拟化、IO虚拟化、aSV虚拟化、aSAN等技术原理

1、虚拟化概述（1）虚拟化的几个概念GuestOS：运行在虚拟机之上的操作系统GuestMachine：虚拟出来的虚拟机Hypervisor(VirtualMachineMonitor)：虚拟化软件层／虚拟机监控器HostOS：运行在物理机之上的OSHostMachine：物理机（2）Hypervisor架构TYPE-II(宿主型、高居型）：VMM之下还有一层宿主操作系统，GuestOS对硬件资源
冷鞘·2024-02-19 13:53

云计算基础-存储虚拟化（深信服aSAN分布式存储）

什么是存储虚拟化分布式存储是利用虚拟化技术“池化”集群存储卷内通用X86服务器中的本地硬盘，实现服务器存储资源的统一整合、管理及调度，最终向上层提供NFS、ISCSI存储接口，供虚拟机根据自身的存储需求自由分配使用资源池中的存储空间
比特微联·2024-02-19 13:19

Sqoop 入门基础

它提供了一种快速高效的方式，将数据从关系型数据库导入到Hadoop集群进行分析，并支持将Hadoop集群中的数据导出到关系型数据库中。
香菜的开发日记·2024-02-19 13:17

常用ceph集群故障检查命令（第二篇）

*injectargs--osd_max_backfills=100查看集群pool详细信息cephosdpoollsdetail转移osd上的pg#转移cephosdpg-
无敌锅包肉·2024-02-19 13:14

K8S常用命令

文章目录一、概念1、集群简介2、kubernetes概念3、Namespace4、Pod5、Label6、Pod控制器(Deployment)7、Service二、快速开始1、nodes2、namespace
ha_lydms·2024-02-19 13:13

安装部署k8s集群

系统：CentOSLinuxrelease7.9.2009(Core)准备3台主机192.168.44.148k8s-master92.168.44.154k8s-worker01192.168.44.155k8s-worker023台主机准备工作关闭防火墙和selinuxsystemctldisablefirewalld--nowsetenforce0sed-i's/SELINUX=enforc
有谁看见我的剑了？·2024-02-19 13:11

K8S-API接口token配置成功秘籍

-nkube-system|greptoken复制秘钥到postmanurl是集群https://IP:6443header是Token=秘钥如果报错Errorfromserver(Forbidden)
xcagy·2024-02-19 13:36

KubeSphere api硬件资源接口获取的玩法

API服务器为REST操作提供服务，并为集群的共享状态提供前端，其他所有组件通过它进行交互。使用KubeSphereAPIKubeSphere3.0将ks-apigateway和ks-acc
xcagy·2024-02-19 13:36

19-k8s的附加组件-coreDNS组件

一、概念coreDNS组件：就是将svc资源的名称解析成ClusterIP；kubeadm部署的k8s集群自带coreDNS组件，二进制部署需要自己手动部署；[root@k8s231~]#kubectlgetpods-owide-Ak8s
心机の之蛙·2024-02-19 13:34

Kubernetes基础(二十一)-k8s的服务发现机制

其中之一重要的特性就是服务发现机制，它使得应用程序能够在K8s集群中动态地发现和访问其他服务。本文将深入研究K8s中的服务发现机制，探讨其原理、使用方法以及通过详细的示例演示其工作过程。
alden_ygq·2024-02-19 13:03

K8S之运用污点、容忍度设置Pod的调度约束

污点污点是定义在k8s集群的节点上的键值属性数据，可以决定拒绝那些pod。给了Node选则的主动权，给Node打个污点，不容忍的Pod就调度不上来。
sissie喵~·2024-02-19 13:02

云原生之容器编排实践-在K8S集群中使用Registry2搭建私有镜像仓库

背景基于前面搭建的3节点Kubernetes集群，今天我们使用Registry2搭建私有镜像仓库，这在镜像安全性以及离线环境下运维等方面具有重要意义。
Heartsuit·2024-02-19 13:01

云原生之容器编排实践-基于CentOS7搭建三个节点的Kubernetes集群

背景前面采用minikube作为Kubernetes环境来体验学习Kubernetes基本概念与操作，这样避免了初学者在裸金属主机上搭建Kubernetes集群的复杂度，但是随着产品功能的逐渐完善，我们需要过渡到生产环境中的
Heartsuit·2024-02-19 13:31

政安晨：【完全零基础】认知人工智能（一）【超级简单】的【机器学习神经网络】 —— 预测机

开个头很多小伙伴们很想亲近人工智能与机器学习领域，然而这个领域里的核心理论、算法、工具给人感觉都太过“高冷”，让很多小伙伴们望而却步，导致一直无法入门。如何捅破这层窗户纸？
政安晨·2024-02-19 13:26

【大厂AI课学习笔记】【2.1 人工智能项目开发规划与目标】（4）数据准备的流程

数据采集观测数据人工收集调查问卷线上数据库2.数据清洗有缺失的数据有重复的数据有内容错误的数据，例如逻辑错误、格式错误有不需要的数据3.数据标注数据标注即通过分类、画框、标注、注释等，对图片、语音、文本等数据进行处理，标记对象的特征，以作为机器学习标签的过程
giszz·2024-02-19 13:47

政安晨：【完全零基础】认知人工智能（二）【超级简单】的【机器学习神经网络】—— 底层算法

如果小伙伴第一次看到这篇文章，可以先浏览一下我这个系列的上一篇文章：政安晨：【完全零基础】认知人工智能（一）【超级简单】的【机器学习神经网络】——预测机https://blog.csdn.net/snowdenkeke
政安晨·2024-02-19 12:09

探索XGBoost：深度集成与迁移学习

导言深度集成与迁移学习是机器学习领域中的两个重要概念，它们可以帮助提高模型的性能和泛化能力。
Echo_Wish·2024-02-19 12:34

单细胞转录组基础分析六：伪时间分析

Monocle进行伪时间分析的核心技术是一种机器学习算法——反向图形嵌入(ReversedGraphEmbedding)。
Seurat_Satija·2024-02-19 12:25

ACK One：构建混合云同城容灾系统

作者：蔡靖对于当前业务运行在IDC内的Kubernetes集群中，希望通过云计算为云下业务提供同城灾备的高可用冗余能力，可利用阿里云分布式云容器平台ACKOne[1]来提供统一得流量、应用和集群管理，实现业务流量的多集群路由和灾难情况下的流量的自动平滑容灾
·2024-02-19 12:35

从互联网到云计算再到 AI 原生，百度智能云数据库的演进

1数据库行业发展概述如果说今年科技圈什么最火，我估计大家会毫不犹豫选择ChatGPT。ChatGPT是2022年11月30日由OpenAI发布的聊天应用。它创造了有史以来用户增长最快的纪录：自11月30日发布起，5天就拥有了100万活跃用户，两个月就达到了一亿用户。对比其他热门应用，同样达到一亿用户量级，TikTok花了九个月，而像Instagram，Whatsapp等应用则超过了两年时间。Cha
·2024-02-19 12:33

使用 Java 客户端通过 HTTPS 连接到 Easysearch

这一里程碑式的更新为开发人员带来了前所未有的便利性，使得与Easysearch集群的交互变得更加简洁和直观。通过Easysearch-client，开发者可以直接使用Java方法和数
·2024-02-19 12:31

2.17日学习打卡----初学Dubbo(二)

入门案例需求介绍配置开发环境dubbo-producerdubbo-consumer运行测试IDEA开启DashBoard面板二.Dubbo高级特性序列化协议安全地址缓存超时时间与配置覆盖关系重试机制多版本负载均衡集群容错服务降级服务限流原理服务限流实现结果缓存一
中北萌新程序员·2024-02-19 12:54

ACK One：构建混合云同城容灾系统

作者：蔡靖对于当前业务运行在IDC内的Kubernetes集群中，希望通过云计算为云下业务提供同城灾备的高可用冗余能力，可利用阿里云分布式云容器平台ACKOne[1]来提供统一得流量、应用和集群管理，实现业务流量的多集群路由和灾难情况下的流量的自动平滑容灾
·2024-02-19 12:31

2 分钟，了解 4 个极为有用的 MetricsQL 函数

夜莺社区的朋友如果问时序库的选型，我一般都会推荐VictoriaMetrics，除了其性能、稳定性、集群扩展能力之外，VictoriaMetrics还扩展了PromQL，提供了MetricsQL，即增强了
·2024-02-19 12:00

4张图片就可以微调扩散模型

基础概念1、生成模型和文本到图像的合成生成模型是一类机器学习模型，旨在生成与给定数据集相似的新数据
·2024-02-19 12:29

生成式网络与判别式网络

生成式网络（GenerativeNetworks）和判别式网络（DiscriminativeNetworks）是两类在机器学习和深度学习中常见的网络类型，它们在数据处理和学习任务中扮演不同的角色。
一条小小yu·2024-02-19 12:23

机器学习、深度学习、强化学习、迁移学习的关联与区别

本文主要了解并初步探究机器学习、深度学习、强化学习、迁移学习的关系与区别，通过清晰直观的关系图展现出四种“学习”之间的关系。
半亩花海·2024-02-19 12:43

预训练和微调在迁移学习中的作用

在机器学习和深度学习中，"pre-training"（预训练）和"fine-tuning"（微调）是两个常见且重要的概念，它们通常在迁移学习场景中使用，以提高模型在特定任务上的性能。
一条小小yu·2024-02-19 12:42

Python环境下基于深度判别迁移学习网络的轴承故障诊断

目前很多机器学习和数据挖掘算法都是基于训练数据和测试数据位于同一特征空间、拥有相同数据分布的假设。然而在现实应用中，该假设却未必存在。
哥廷根数学学派·2024-02-19 12:36

【大数据】HADOOP-Yarn集群界面UI指标项详解（建议收藏哦）

目录首页（Cluster）节点信息SchedulerMetrics：集群调度信息节点信息详解（Nodes）应用列表信息（applications）队列详情页（Scheduler）指标详细说明（非常重要）
笑起来贼好看·2024-02-19 11:08

Matlab DNN多层感知机进行图像分类——附源码分享

非得用matlab来搞机器学习的东西？不是不是，matlab也有集成了许多机器学习算法，当然，都是一些非常基础的机器学习算法。深度学习还是得向python看齐。
我是狮子搏兔·2024-02-19 11:34

Hadoop-Yarn-NodeManager都做了什么

我下载的是hadoop-3.2.4，那就一起来看下吧Indexof/dist/hadoop/core二、上下文在我的博客中已经简要的分析了NodeManager的启动过程，NodeManager是管理整个集群资源的直接角色
隔着天花板看星星·2024-02-19 11:00

Hadoop搭建之 start-yarn.sh 报错

在搭建伪分布式的Hadoop集群环境时，在配置基础环境了并成功开启了HDFS组件后，jps查看已运行的名称节点和数据节点进程，[hadoop@masterhadoop]$jps8994NameNode10396Jps9087DataNode9279SecondaryNameNode
万里长江雪·2024-02-19 11:58

hadoop-2.7.4-nodemanager无法启动问题解决方案

近期新配了hadoop-274版本的集群，发现有一个小问题，DataNode无法顺利启动。
半肉哥·2024-02-19 11:27

21-k8s中pod的调度-污点和污点容忍

一、污点的概念所谓的污点，就是给k8s集群中的节点设置的污点，通过设置污点，来规划资源创建时所在的节点；污点的类型解释说明PreferNoshedule节点设置这个五点类型后；表示，该节点接受调度，但是会降低调度的概率
心机の之蛙·2024-02-19 11:51

云原生之容器编排-Docker Swarm

系统上可以很好的工作，但是现实中不可能只有一台Linux系统，一台Linux系统不可能有足够的资源运行所有的云原生应用系统，为了支撑整个业务平台，势必要在很多台Linux系统运行云原生应用系统，共同组成一个容器集群
鬓戈·2024-02-19 11:48

Jlink+OpenOCD+STM32 Vscode 下载和调试环境搭建

对于Mingw的安装比较困难，国内的网无法正常在线下载组件，需要手动下载x86_64-8.1.0-release-posix-seh-rt_v6-rev0.7z版本的软件包，添加环境变量，并将mingw32
JoYER_cc·2024-02-19 11:12
上一页 30 31 32 33 34 35 36 37 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他