数据质量

细拆Python爬虫代码，建设自己的GPT助手！

如果数据质量高、覆盖面广、多样性强，训练出来的
我是雷老师·2024-02-07 08:20

人工智能：数据分析之数据预处理、分析模型与可视化

一、数据预处理的目的和关键步骤数据预处理是数据分析的第一步，它的目的是提高数据质量，确保分析结果的准确性。数据预处理的关键
白话Learning·2024-02-06 18:58

为什么传统数据中台搞不下去了

现在大厂又开始拆中台了，传统行业中很多企业花大价钱构建的数据中台要么是成为一个摆设一个玩具，要么就处于“IT疲于应付、业务极度不满、数据质量混乱、开发成本周期失控”的窘境。
Trident敏捷数据开发平台·2024-02-06 07:57

R语言量化投资（1）

而是关注如何收集数据，提高数据质量，来解决实际的业务问题。
Liam_ml·2024-02-05 20:41

今日arXiv最热NLP大模型论文：IBM研究院提出Genie方法，自动生成高质量数据集

但传统的数据集创建方法通常依赖人工，耗时耗力成本高，另外数据集的来源复杂，噪声大，比如新闻媒体稿或者社交媒体，数据质量难以保证。
夕小瑶·2024-02-04 16:35

从传统到现代:易点易动固定资产管理系统利用RFID技术高效管理固定资产

传统管理模式的不足传统的手工登记式管理模式在企业固定资产管理中存在很多问题:信息录入缺乏规范,数据质量难把控。无法实现全面覆盖和实时跟踪各项资产。盘点效率低下,存在漏工舞弊的风险。
doris6100·2024-02-04 16:54

“互联网+水务”——智慧水务2.0推动水务行业产业结构变革

通过数据清洗工作，识别并改善数据重复、数据缺失、数据异常等问题，提升数据质量。
郭靖守襄阳【软芯民用】·2024-02-04 09:14

第七章 主管信息系统和数据仓库

[TOC]第七章主管信息系统和数据仓库7.0前言EIS是数仓之前的概念EIS没有注重基础结构（数据源、数据质量、数据流通等）DSS是现代的EIS，与数仓紧密相连7.1EIS概述EIS典型用途趋势分析关键指标度量和跟踪向下钻取问题监控竞争分析关键性能指标监控
晨磊的微博·2024-02-04 04:53

离线数仓-数据治理

目录一、前言1.1数据治理概念1.2数据治理目标1.3数据治理要解决的问题1.3.1合规性元数据合规性数据质量合规性数据安全合规性1.3.2成本存储资源成本计算资源成本二、数据仓库发展阶段2.1初始期2.2
爱吃辣条byte·2024-02-03 13:51

银行数据仓库体系实践（16）--数据应用之财务分析

而且数据质量校
南极找南·2024-02-02 13:40

数据管控：提升数据质量与安全性的关键

在当今数字化时代，数据已成为企业和组织最宝贵的资产之一。然而，随着数据量的快速增长和数据使用场景的日益复杂，数据管控也面临着越来越多的挑战。有效的数据管控对于确保数据的质量、完整性、安全性以及合规性至关重要。一、数据管控的重要性数据管控是指通过一系列策略、技术和流程来管理和保护数据的完整性、保密性和可用性。它包括对数据的访问控制、使用限制、存储保护、传输加密等方面的管理。1.数据安全：数据管控是保
正儿八经的数字经·2024-02-02 11:31

一文讲透神经网络的激活函数

拟合效果的好坏取决于数据质量及模型的结构，像逻辑回归、感知机等线性模型的拟合能力是有限的，连xor函数都拟合不了，那神经网络模型结构中提升拟合能力的关键是什么呢？
算法进阶·2024-02-02 11:43

智慧城市环境监测需求分析

面对当前生态文明建设的新形势和新要求，我国生态环境监测事业发展还存在网络范围和要素覆盖不全，建设规划与信息发布不统一，信息化水平和共享程度不高，监测与监管结合不紧密，监测数据质量有待提
扣jio黑萝莉·2024-02-02 10:08

数据治理体系建设

数据治理体系是银行构建数据质量和数据标准的组织体系，包含组织、制度、流程等，为银行提供统一的数据标准和规范。
悦数图数据库·2024-02-02 07:54

dolphinscheduler-data-quality-3.1.0 部署

dophinscheduler-3.1.0安装standalone-server模式，参考https://blog.csdn.net/windydreams/article/details/127678233编译数据质量源码为了保障后期正常运行
风的心愿·2024-01-31 15:27

数据资产管理在腾讯游戏的实践

在游戏大数据管控中，面临着众多问题与痛点：数据多样化，缺少统一标准计算逻辑理解一不致，导致统计结果有偏差数据全链路质量问题，层次复杂、不能快速定位问题游戏数据管控的问题与难点数据质量偏低给数据应用带来的各种
王知无·2024-01-31 15:57

模型的收敛

模型的收敛取决于多个因素，包括学习率、数据质量、模型架构等。当模型收敛时，损失函数不再显著减小，模型的性能在训练数据和验证数据上达到一个相对稳定的状态。过
幸运小新·2024-01-31 11:56

【深度学习： Encord Active平台】Encord 中的数据、标签和模型质量指标

定义质量指标数据质量指标标签质量指标模型质量指标自定义质量指标结论在使用数据集或开发机器学习模型时，经常会发现自己在查找或假设具有某些属性的数据子集、标签或模型预测。
jcfszxc·2024-01-31 10:00

数据质量和数据治理的关系 | 京东云技术团队

在京东科技集团数据治理工作组第一次全体会议上，我就讲过数据治理和数据清洗之间的关系：数据清洗只是指通过识别和纠正数据中的错误、缺失、重复或不一致等问题，确保数据质量的过程。
京东云技术团队·2024-01-31 04:53

数字孪生项目开发的注意事项

2.数据质量和采集：数字孪生的质量高度依赖于输入数
super_Dev_OP·2024-01-31 04:39

问卷发放实战指南：提高问卷回收率与数据质量的技巧

进行问卷调查分为四步：制作问卷、发放问卷、收集问卷、分析问卷。其中，发放问卷起到了关键性的作用。他关乎到我们后续收集问卷是否顺利，收集到的问卷数据是否具备真实性和有效性。那么，怎么有效地进行问卷发放呢？1、清晰的问卷说明制作问卷的过程中有一个非常重要的一步——问卷说明。问卷说明是问卷的开场，会影响到问卷的回收率和完成率。我们要在问卷说明中写明本次调查的主题、目的、意义，以及希望填写者帮助我们做哪些
ZOHO卓豪·2024-01-31 01:16

【项目调研】村头王大爷家女儿王大红用GPT学习了基于datavines的数据质量实践教程

基于datavines的数据质量实践教程1，数据质量检测的维度2，datavines的作用和安装2.1作用2.2安装2.2.1从源码编译安装--环境依赖2.2.2下载代码2.2.3数据库准备2.2.4项目构建
一杯派蒙·2024-01-30 21:01

数据质量和治理论

数据质量和数据治理，这个概念很大不是一两个人可以处理的问题，但是又不得不做，往往需要整个团队或者跨团队协作尽量去处理好这个事情以下是一些方法论数据质量数据质量会带来什么问题：报表数据出错，无人发现数据出现问题
orange大数据技术探索者·2024-01-30 20:41

揭秘：数仓开发面试真正需要注意的点

其次是数据质量问题，没链路保障导致开发出来的数据出现数据质量问题，这部分数仓建设学习实践路线数据质量那节课有讲可
语兴数据·2024-01-30 15:30

数仓建设学习路线（五）-数据质量保障

什么是数据质量？
语兴数据·2024-01-30 15:00

数据治理实践 | 网易某业务线的计算资源治理

由于数据治理层面可以分多个层面且内容繁多（包括模型合规、数据质量、数据安全、计算/存储资源、数据价值等治理内容），因此需要单独拆分为6个模块单独去阐述其中内容。
语兴数据·2024-01-30 15:29

银行数据仓库体系实践（12）--数据管理及治理

数据管理主要有数据标准，元数据和数据质量3方面。那数据治理是指对没有规范或者不符合规范的数据进行清理并建立标准和规范，那也是从这3方面着手。
南极找南·2024-01-30 06:56

无标题文章

二代测序数据质量评估软件FastQC的安装及使用说明标签：_生信工具,_测序数据质控及评估二代测序数据质量评估软件FastQC的安装及使用说明当我们拿到二代测序数据后，第一件事肯定就是要查看一下测序质量的好坏了
星空_2739·2024-01-29 08:36

数仓-数据质量

文章内容参考：数仓建设实践路线-第八讲-数据质量_哔哩哔哩_bilibili经过一段时间打磨开启全新篇章《数仓建设实践路线》，从0-1搭建数据体系，让大家更有体感，并将《数仓建设学习路线》课程内容落地。
爱吃辣条byte·2024-01-28 23:10

数仓治理-数据质量治理

注：文章参考：语数-数据质量治理本期语兴从数据质量治理角度出发，与大家一起探讨数据质量治理最佳实践，之前的数据治理文章在网易有数官方公众号，数据治理课程讲解在B站（搜索：语兴呀）https://mp.weixin.qq.com
爱吃辣条byte·2024-01-28 23:10

python数据分析数据探索

数据质量分析：缺失值、异常值、一致性。缺失值：原因：1.信息暂时无法获取，或获取的代价太大。2.信息遗漏3.属性值不存在影响：1.数据挖掘建模将丢失大量有用的信息。
简单编程王子·2024-01-28 16:42

AI浅谈：计算机视觉（CV）技术的优势和挑战

目录一、计算机视觉技术的优势1.效率和精度提高2.提高安全性3.促进自动化4.促进科学研究5.促进商业发展二、计算机视觉技术的挑战1.环境变化2.精度问题3.隐私和安全问题4.数据质量5.系统复杂度以上是对计算机视觉技术的优势和挑战的概述
跟Bug双向奔赴·2024-01-27 12:58

LLM之RAG理论（八）| 提高RAG性能的9种技术

本文将介绍9中提高RAG技术的方法：1—️提高索引数据的质量由于我们索引的数据决定了RAG答案的质量，因此在建立索引之前，需要对数据做很多预处理操作来保证数据质量非常关键。下面是数据
wshzd·2024-01-27 04:55

实时分析海量新数据的难点 和解决方案

2.数据质量的保障：海量新
云台095·2024-01-27 03:40

【三】数据质量成熟度

从整体，数据质量组织成熟度方面的差异，通过管理缺陷数据识别的流程的复杂程度，以及承担数据质量管理任务人员的能力水平来评价。但是大多数组织都是被动的去解决问题，当故障发生了很长时间才得到解决。
折花载酒z·2024-01-26 21:21

数据挖掘之数据预处理

数据库易受噪声、缺失值和不一致数据的侵扰数据库太大，且多半来自多个异种数据源衡量的标准是数据质量数据质量数据质量的因素都比较好理解，就不一一说明了。
雇个城管打天下·2024-01-26 00:30

卫星遥感技术在农业中的应用,有哪些难点和挑战呢

数据质量与精度问题：卫星遥感技术获取的数据质量与精度受到多种因素的影响，如天气条件、卫星资源利用效率等。
yikegis·2024-01-25 03:01

CC工具箱使用指南：【清洗字段值】

一、简介由于一些不规范的输入，或是其它数据转换而来，要素类或者独立表的字段值经常含有空值、空格等影响数据质量的内容。文本型字段中的空值和空格不一样，同样数字型字段中的空值和0也不一样。
规划GIS会·2024-01-23 13:13

SQL的五大约束作用、语法、应用场景及举例

sql约束的作用：主要是保证数据的完整性、准确性和一致性，从而确保数据库中存储的数据质量。温馨提示：以下举例为mysql版本，若您是oracle或其他数据库，语法会有差异！！！
bpmh·2024-01-23 10:58

泰迪科技最新大数据法律监督模型解决方案

功能包括：数据采集与数据交换、数据质量核查、数据资源管理
泰迪智能科技·2024-01-23 07:05

浅谈大数据智能化技术在多个领域的应用实践

技术实践、架构设计、指标体系、数据质量、数据分析、数据挖掘、数据采集、数据智能化应用、BI、AI等方面，大数据智能化技术在不同领域的应用场景和代码编写。
shinelord明·2024-01-22 17:45

CUTANA™ CUT&RUN Assays ——实现超敏基因组定位

但是由于ChIP存在高细胞需求量、技术难度大、成本高、深度测序、数据质量差以及变量
Neobioscience·2024-01-22 11:14

【深度学习：数据增强 】提高标记数据质量的 5 种方法

【深度学习：数据增强】提高标记数据质量的5种方法计算机视觉中常见的数据错误和质量问题？为什么需要提高数据集的质量？
jcfszxc·2024-01-22 10:29

2020-05-07

刚刚看到一个推送文章，就随手看了起来，文章是关于销售团队的一些用户须知的简化流程，提高数据质量，减少人工工作，而且可以是最总用户更轻松滴专注于实际工作。
程可惠·2024-01-22 04:38

数据大咖都在考CDMP，你呢？

全方位技能加持：CDMP认证涵盖数据建模、数据质量、数据治理等
IT课程顾问·2024-01-21 11:50

数据分析完整流程一般包括哪几个环节/步骤

数据清洗：对收集到的数据进行清理，处理缺失值、异常值和重复值，确保数据质量。数据探索（探索性数据分析EDA）：探索数据的特征、分布、相关性等，通过可视化和统计方法深入了解数据。
Recursions·2024-01-21 07:21

智慧城市环境监测系统实验报告

面对当前生态文明建设的新形势和新要求，我国生态环境监测事业发展还存在网络范围和要素覆盖不全，建设规划与信息发布不统一，信息化水平和共享程度不高，监测与监管结合不紧密，监测数据质量有待提高等突出问题，
扣jio黑萝莉·2024-01-21 05:32

实战讲解｜Trino 在袋鼠云数栈的探索与实践

这些模块旨在实现对数据质量的有效校验、提升数据加工处理效能
袋鼠云数栈·2024-01-20 21:44

Python实现数据库表的监控告警功能

Python实现数据库表的监控告警功能简介:使用Python实现对数据库表的监控告警功能,并将告警信息通过钉钉机器人发送到钉钉群实现DataWorks中数据质量的基本功能,当然DW的数据质量的规则类型很多
Taerge0110·2024-01-20 21:41

数据预处理 matlab & 数据质量评估

知乎数据类型转换等Mathworks数据预处理概念辨析配对是同一批样本的前后比较，独立是两批不同样本的的比较独立样本是指我们得到的样本是相互独立的。配对样本就是一个样本中的数据与另一个样本中的数据相对应的两个样本。配对样本可以消除由于样本指定的不公平造成的差异。配对样本：指的是来自同一个个体或单位的两组数据，如同一个人在两个不同时间点的血压值，或者同一个医院的两个不同科室的病人的体重值。在配对样本
try_trying_try·2024-01-20 19:51
上一页 1 2 3 4 5 6 7 8 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他