Spark弹性分布式数据集

[数据集][目标检测]电力场景输电线均压环歪斜检测数据集VOC+YOLO格式303张2类别

数据集格式：PascalVOC格式+YOLO格式(不包含分割路径的txt文件，仅仅包含jpg图片以及对应的VOC格式xml文件和yolo格式txt文件)图片数量(jpg文件个数)：303标注数量(xml
FL1623863129·2024-08-30 15:27

揭示灵活分布式云平台的速效降本之道

2023年，Akamai委托ForresterConsulting进行了一项研究，重点关注了商业企业如何通过分布式云架构满足自己的各项需求。本文我们就一起看看这项研究的主要成果。“底线”是
Akamai中国·2024-08-30 15:56

[2020]tensorflow2.1-GPU + CUDA +CUDNN配置过程记录

最近几天做视频数据集的时候要用到tensorflow2的gpu训练版本，要安装对应版本的cuda和cudnn，网上的教程五花八门，我尝试了很多论坛的方法，有些能用有些不可以（也可能是我操作错误），经过两天调试终于能够运行了
夏迪End·2024-08-30 15:56

Lianwei 安全周报|2024.08.13

指南还建议云服务必须符合安全性、验证以及弹性标准。详情：https://w
联蔚盘云·2024-08-30 14:51

xGen-MM (BLIP-3): A Family of Open Large Multimodal Models

该框架由精心策划的数据集、训练配方、模型
UnknownBody·2024-08-30 13:47

太阳能电池板缺陷数据集

太阳能电池板缺陷数据集，4500张，包含txt和xml两种格式。
计算机视觉从业者·2024-08-30 13:43

动手学深度学习（pytorch）学习记录20-自定义层[学习记录]

自定义层可以让模型更加灵活，以适应特定的任务或数据集。目录没有参数的自定义层带参数的层没有参数的自定义层下面的CenteredLayer类要从其输入中减去均值。
walfar·2024-08-30 13:13

PyTorch深度学习实战（26）—— PyTorch与Multi-GPU

当拥有多块GPU时，可以利用分布式计算（DistributedComputation）与并行计算（ParallelComputation）的方式加速网络的训练过程。
shangjg3·2024-08-30 12:10

2020-10-26至2020-11-01

自己多留心吧，加班不可避免，但要学会弹性安排好时间。做好一件事情很容易，但一生做好一件事情很不容易，多耐心，放低姿态，踏踏实实。做好自己该做的事情，放宽身心，不要自己给自己太大压力。
独行者103·2024-08-30 11:06

模糊C-means算法原理及Python实践

FCM算法通过为每个数据点分配模糊隶属度，将数据点划分到不同的聚类中心，从而实现对数据集的聚类分析。以下是模糊C-me
doublexiao79·2024-08-30 11:32

工地工程车分类检测数据集 6300张 带标注 voc yol

数据集特点类型：工地工程车分类检测数据集。格式：VOC和YOLO格式，适用于训练目标检测模型。规模：共包含6300张图像。
计算机视觉从业者·2024-08-30 11:30

遥感影像-语义分割数据集：Vaihingen数据集详细介绍及训练样本处理流程

原始数据集详情Vaihingen是一个相对较小的村庄，有许多独立的建筑和小的多层建筑。
GIS潮流·2024-08-30 10:56

graphrag论文精读

然而，RAG方法在处理涉及整个文本语料库的全局问题时效果不佳，比如“数据集中主要的主题是什么？”这些问题本质上是一个面向查询的总结任
Ramos_zl·2024-08-30 09:48

深度学习速通系列:贝叶思&SVM

它通常用于分类问题，特别是当数据集较小或存在类别不平衡时。贝叶斯方法可以处理不确定性，并且可以通过增加新的数据来更新先验概
Ven%·2024-08-30 08:13

数据库基本概述

1.2、数据库数据库是指长期存储在计算机内的、有组织的、可共享的数据集合。1.3、数据库管理系统数据库管理系统(DBMS)是位于操作系统与用户之间的一层数据管理软件，是数据库系统的核心。
Cyzhouke·2024-08-30 08:05

PyTorch深度学习实战（27）—— PyTorch分布式训练

本节将详细介绍如何进行神经网络的分布式训练。
shangjg3·2024-08-30 07:37

Curator框架 以及基本API如何操作

为了更好的实现java操作zookeeper服务器，后来出现Curator框架，非常的强大，目前已经是Apache的顶级项目，里面提供了更多丰富的操作，例如session超时重连、主从选举、分布式计数器
JAVA代码搬运工·2024-08-30 06:33

常见的实时数仓方案

实时部分以消息队列的方式实时增量消费，一般以Flink+Kafka的组合实现，维度表存在关系型数据库或者HBase；离线部分一般采用T+1周期调度分析历史存量数据，每天凌晨产出，更新覆盖前一天的结果数据，计算引擎通常会选择Hive或者Spark
北极冰雨·2024-08-30 05:27

神经网络分类任务python入门

目录Mnist分类任务读取Mnist数据集转换成tensor才能参与后续建模训练torch.nn.functional创建一个model来更简化代码使用TensorDataset和DataLoader来简化整个过程
三十度角阳光的问候·2024-08-30 05:24

【闲谈】聚类算法的金融数据挖掘应用及实践

目录一数据挖掘技术在金融领域应用概述二聚类算法介绍三聚类算法在金融数据挖掘中的应用1.聚类算法在客户细分领域的应用2.聚类算法在客户信用评估领域的应用四算法实践与个人体会1.聚类算法的实践——以k-means算法为例的银行客户数据集分析
爱写代码的July·2024-08-30 05:51

Python实现等距映射（ISOMAP）降维算法

目录Python实现等距映射（ISOMAP）降维算法的博客引言ISOMAP算法原理ISOMAP的优势与局限Python实现ISOMAP算法1.创建ISOMAP类2.在瑞士卷数据集上应用ISOMAP3.结果分析总结运行结果
闲人编程·2024-08-30 02:00

【目标检测数据集】瓶子分类识别数据集1万张3类VOC+YOLO格式（玻璃瓶金属瓶塑料瓶数据集）

数据集格式：PascalVOC格式+YOLO格式(不包含分割路径的txt文件，仅仅包含jpg图片以及对应的VOC格式xml文件和yolo格式txt文件)图片数量(jpg文件个数)：10106标注数量(xml
熬夜写代码的平头哥∰·2024-08-30 01:00

大模型训练和推理

文章目录一、NLP基础1.Tokenizer2.positionencoding3.注意力机制与transformer架构二、大模型训练1.SFT训练2.RLHF训练3.分布式并行训练技术（1）模型并行
李明朔·2024-08-30 01:27

2025秋招大语言模型落地实践面试题

数据资源3.1如何标注一个监督微调（SFT）数据集？3.2在众包
微凉的衣柜·2024-08-30 01:26

NL2SQL进阶系列(5)：论文解读业界前沿方案（DIN-SQL、C3-SQL、DAIL-SQL、SQL-PaLM）、新一代数据集BIRD-SQL解读

NL2SQL进阶系列(5)：论文解读业界前沿方案（DIN-SQL、C3-SQL、DAIL-SQL）、新一代数据集BIRD-SQL解读NL2SQL基础系列(1)：业界顶尖排行榜、权威测评数据集及LLM大模型
汀、人工智能·2024-08-30 01:25

云计算day13

一、Git概述Git是一种分布式版本控制系统，用于跟踪和管理代码的变更。它是由LinusTorvalds创建的，最初被设计用于Linux内核的开发。
巭氼·2024-08-29 23:42

中间件简介

它们在分布式系统、网络通信和应用集成中起着关键的作用。那么常见的中间件有哪些呢？消息队列中间件：消息队列中间件允许应用程序之间异步地发送和接收消息。
Will_1130·2024-08-29 22:38

爆改yolov8|利用BSAM改进YOLOv8，高效涨点

1，本文介绍BSAM基于CBAM进行改进，经实测在多个数据集上都有涨点。BSAM（BiLevelSpatialAttentionModule）是一个用于提升深度学习模型在空间特征处理中的能力的模块。
不想敲代码！！！·2024-08-29 22:37

虚拟机安装hadoop，hbase（单机伪集群模式）

就像当初做爬虫一样（虽然很简单），在数据爆发的现在，传统的数据库mysql，oracle显然在处理大数据量级的数据时显得力不从心，所以有些特定的业务需要引进能够处理大数据量的数据库，hadoop提供了分布式文件系统
流~星~雨·2024-08-29 21:31

探索AWS EC2：提升企业云计算能力的理想选择

亚马逊弹性计算云（EC2）作为AWS提供的核心服务之一，为企业提供了强大的云计算解决方案，助力业务的快速发展和创新。九河云在这里给大家说说AWS的EC2。
九河云·2024-08-29 20:21

MySQL 实现模糊匹配

针对更为复杂的搜索需求，尤其是在处理大型数据集时，结合使用IK分词器（虽然IK分词器本身主要用于中文分词，在Elasticsearch等搜索引擎中广泛应用，但可以通过一些创造性的方法间接应用于MySQL
flying jiang·2024-08-29 20:50

Apache Kafka 快速学习大纲

Kafka概述定义Kafka传统定义：Kafka是一个分布式的基于发布/订阅模式的消息队列（MessageQueue），主要应用于大数据实时处理领域。
aaaak_·2024-08-29 19:46

大数据实训笔记7：kafka

概述Kafka是一个开源的分布式事件流平台(EventStreamingPlatform)，被数千家公司用于高性能数据管道、流分析、数据集成和关键任务应用。
Roslin_v·2024-08-29 19:14

程序猿成长之路之数据挖掘篇——Kmeans聚类算法

Kmeans是一种可以将一个数据集按照距离（相似度）划分成不同类别的算法，它无需借助外部标记，因此也是一种无监督学习算法。
zygswo·2024-08-29 18:39

QPS提升10倍怎么设计-JAVA后端经常用到的技术

例如，使用分布式服务器集群，将请求均匀地分配到各个节点上，避免单个服务器负载过高。升级服务器的硬件配置，如提高CPU性能、增加内存容量、使用更快的存储设备等。例如，采用多核处理
九张算数·2024-08-29 17:00

优秀的开源项目

目录热key多线程并行秒级百G级日志工具ES操作工具消息推送平台HTTP客户端业务层的分布式限流组件企业级微服务解决方案热keyhotkey:京东App后台中间件，毫秒级探测热点数据，毫秒级推送至服务器集群内存
点滴~·2024-08-29 16:28

分布式中间件

1.Nacos服务注册和服务发现原理图：1.服务提供方将集群信息注册到Nacos，并定期心跳包提供健康信息，宕机即剔除2.服务消费方定期拉取订阅信息，获取服务实例列表3.服务集群的负载均衡是在消费者一方进行选择负载均衡：四层（传输层，ip+端口），七层（应用层，在四层ip+端口的基础上，添加一些用户级负载均衡规则，例如过滤特定的url访问请求）；nginx同时支持四层和七层负载均衡，硬件负载均衡器
C15751X·2024-08-29 16:54

【目标检测数据集汇总】各类目标检测数据集VOC+YOLO格式地址汇总

序号项目名称下载地址1【目标检测数据集】西红柿番茄成熟度检测640张3类别VOC+YOLO格式.zip点我下载2【目标检测数据集】轮船分类检测数据集500张4类别VOC+YOLO格式.zip点我下载3【
熬夜写代码的平头哥∰·2024-08-29 16:24

Python知识点：如何使用HBase与HappyBase进行分布式存储

使用HBase与HappyBase进行分布式存储是处理大规模数据的有效方式。HBase是一个基于Hadoop的开源分布式数据库，可以处理非常大的表。
杰哥在此·2024-08-29 15:51

思二勋：web3.0是打造应对复杂市场敏捷组织的关键

本文内容摘自思二勋所著的《分布式商业生态战略》一书。数字化时代，需要企业具备敏捷应对变化的能力，以敏捷反应应对客户和市场的迅速变化。
学客汇·2024-08-29 14:15

【观点】区块链的未来：分布式商业；企业的未来：分布式商业生态战略

本文内容摘自思二勋所著的《分布式商业生态战略》一书。近两年，商业经济环境的不确定性越来越明显，市场经济受到疫情、技术、政策等多方因素影响越来越难以预测，黑天鹅事件时有发生。
学客汇·2024-08-29 14:14

新书推荐：《分布式商业生态战略：未来数字商业新逻辑与企业数字化转型新策略》

近两年，商业经济环境的不确定性越来越明显，市场经济受到疫情、技术、政策等多方因素影响越来越难以预测，黑天鹅事件时有发生。在国内外经济方面，国际的地缘政治对商业经济产生着重大的影响，例如供应链中断，核心技术的自主创新及国产化，以及美联储的持续加息对市场经济的影响，等等。国内经济也在承压发展，尽管内需总体回暖，但市场活力不足、内生动力不强、市场资源利用率低下等问题不容忽视。而在技术革新商业经济方面，如
学客汇·2024-08-29 14:44

Spark MLlib 数据预处理－特征变换

2019独角兽企业重金招聘Python工程师标准>>>Tokenizer（分词器）算法介绍：Tokenization将文本划分为独立个体（通常为单词）。RegexTokenizer基于正则表达式提供更多的划分选项。默认情况下，参数“pattern”为划分文本的分隔符。或者可以指定参数“gaps”来指明正则“patten”表示“tokens”而不是分隔符，这样来为分词结果找到所有可能匹配的情况。调用
weixin_33841722·2024-08-29 14:40

spark应用程序转换_4.Spark特征提取、转换和选择 - 简书

在实际机器学习项目中，我们获取的数据往往是不规范、不一致、有很多缺失数据，甚至不少错误数据，这些数据有时又称为脏数据或噪音，在模型训练前，务必对这些脏数据进行处理，否则，再好的模型，也只能脏数据进，脏数据出。这章我们主要介绍对数据处理涉及的一些操作，主要包括：特征提取特征转换特征选择4.1特征提取特征提取一般指从原始数据中抽取特征。4.1.1词频－逆向文件频率(TF-IDF)词频－逆向文件频率(T
weixin_39956182·2024-08-29 14:10

6章2节：认识birthwt数据集，EpiDisplay和Gmodels扩展包的应用

在R语言的广泛应用领域中，数据集的选择与理解起着至关重要的作用。它既为学习R语言奠定了基础数据，又为我们开展统计分析和模型构建提供了强有力的支持。
数据科学和人工智能兴趣组·2024-08-29 13:33

[数据集][目标检测]玻璃瓶塑料瓶检测数据集VOC+YOLO格式8943张2类别

数据集格式：PascalVOC格式+YOLO格式(不包含分割路径的txt文件，仅仅包含jpg图片以及对应的VOC格式xml文件和yolo格式txt文件)图片数量(jpg文件个数)：8943标注数量(xml
FL1623863129·2024-08-29 12:30

Spark权威指南读书笔记（二）：结构化API

第四章结构化API概述结构化API主要指三种核心分布式集合类型API：Dataset、DataFrame、SQL表和视图DataFrame和Dataset类型DataFrame和Dataset是具有行和列的类似于数据表的集合类型
kaiker·2024-08-29 11:23

YOLOV5训练时P、R、mAP等值均为0的问题

当YOLOv5的训练P、R、mAP等指标为0时，通常有以下一些原因：数据集质量不佳：检查数据集中是否存在较大的类别不平衡或者太多的噪声。可能需要重新清理数据集以确保标签正确且具有可解释性。
该醒醒了~·2024-08-29 11:53

[论文笔记] LLM数据集——LongData-Corpus

https://huggingface.co/datasets/yuyijiong/LongData-Corpus1、hf的数据在开发机上要设置sshkey，然后cat复制之后在设置在hf上2、中文小说数据在云盘上清华大学云盘下载：#!/bin/bash#BaseURLbase_url="https://cloud.tsinghua.edu.cn/d/0670fcb14d294c97b5cf/fi
心心喵·2024-08-29 10:17

基于yolov8的绝缘子缺陷检测系统python源码+onnx模型+评估指标曲线+精美GUI界面

该系统通过深入分析并标注绝缘子数据集，训练YOLOv8模型以精确识别输电线上的绝缘子及其缺陷状态。利用多尺度检测、FPN结构以及CSPDarknet网络等技术，YOLO
FL1623863129·2024-08-29 10:16
上一页 12 13 14 15 16 17 18 19 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他