流式数据处理

第十八届近红外训练营（线上：2023.10.25~11.12）

茗创科技专注于脑科学数据处理，涵盖（EEG/ERP,fMRI,结构像,DTI,ASL,FNIRS）等，欢迎留言讨论及转发推荐，也欢迎了解茗创科技的脑电课程，数据处理服务及脑科学工作站销售业务，可添加我们的工程师
茗创科技·2024-01-18 05:16

vue+iView 实现可输入的下拉框

实现思路：输入框结合使用iview组件Dropdown实现：主要实现点：与input输入框的完美结合无数据处理数据超出处理点击选中处理一.效果二.主要代码template{{ite
会做梦的辣条鱼·2024-01-18 04:19

dolphinscheduler分布式集群部署指南(小白版)

适用于企业级场景，提供了一个可视化操作任务、工作流和全生命周期数据处理过程的
嫣夜来·2024-01-18 04:17

ARM 汇编指令学习:[1]ARM指令寻址方式

ARM汇编指令学习:[1]ARM指令寻址方式一、数据处理指令的操作数的寻址方式{}{S},,通常具有下面3种格式：1、立即数方式#其中，#=immed_8循环右移(2*rotate_imm)。
techping·2024-01-18 04:04

HDFS 系统架构

HDFS放宽了一些POSIX的要求，以开启对文件系统数据的流式访
偷油考拉·2024-01-18 03:52

python几个常见的数据处理操作，一行代码就能完成！

file【阅读全文】1、如何统一列表中的元素对象的类型？假设一个列表中的数据是下面这样的：list_1=['a',1,3.0,2,'1']现在为了保证数据统一，将每个元素的类型都转为字符类型。如果要使用很少的代码量完成，那最先想到的就是map()函数，基本思路就是用map函数遍历后对应改变每个元素的数据类型。list_2=list(map(str,list_1))print(list_2)经过处理
Python集中营·2024-01-18 02:10

系统架构07 - 信息系统（下）

信息系统分类信息系统分类业务处理系统(TPS)数据处理周期特点管理信息系统(MIS)开环和闭环结构功能组成决策支持系统(DSS)基本模式结构功能特点组成专家系统(ES)概述专家系统人工智能特点组成应用领域办公自动化系统
银龙丶裁决·2024-01-18 01:24

Python Pandas 高级数据操作 Categorical 数据类型的使用

通过将数据转换为Categorical类型，可以提高数据处理的效率，尤其是在进行分类分析或处理具有明确类别的数据时。参数描述values类似列表：分类的值。如果给定了类
weixin_42098295·2024-01-18 00:19

风控算法大赛解决方案分享

01项目总体思路本文将为您介绍我们在数据处理过程中所采用的方法，从数据清洗到特征工程再到特征选择，最终进行模型设计与分析。在
风控小兵突击·2024-01-17 23:29

Python不同数据对象的空值校验详解

概要空值校验在数据处理和应用程序开发中是一个非常重要的任务。Python提供了多种方式来检查不同数据对象（如字符串、列表、字典、集合等）是否为空或包含空值。
Rocky006·2024-01-17 23:40

Python Slice函数：数据处理利器详解

引言：在Python编程中，处理数据是一个非常常见且重要的任务。为了更高效地处理数据，Python提供了许多内置函数和方法。其中，slice()函数是一个非常强大且常用的工具，它可以帮助我们轻松地提取、操作和处理数据。无论是字符串、列表还是元组，slice()函数都能够胜任。本文将详细介绍slice()函数的使用方法，帮助你更好地理解和应用它。一、slice()函数的基本概念slice()函数是P
Rocky006·2024-01-17 23:39

数据处理和特征工程（二）

4.特征选择一般有四种方法用来选择特征：过滤法、嵌入法、包装法、降维算法4.1Filter过滤法**根据统计检验的分数和相关性指标来选择特征，完全独立于各种机器学习算法4.1.1方差过滤VarianceThreshold通过特征本身的方差来筛选类，如果一个特征的方差很小，说明样本在这个特征上基本没有差异，可能大多数值都一样。VarianceThreshold有重要参数Threshold，表示舍弃所
于饼喵·2024-01-17 22:23

5 个被低估的开源项目

文章目录1.集算器-数据处理2.Firecamp-邮递员替代方案3.Keploy——后端测试4.Hanko-密钥验证5.Zrok-Ngrok类固醇长话短说本文列出了五个不太受欢迎的优秀项目，您应该尝试一下
极致人生-010·2024-01-17 22:16

Pandas实战100例 | 案例 27: 数据合并 - 使用 `merge`

案例27:数据合并-使用merge知识点讲解在数据处理中，经常需要将来自不同来源的数据集合并在一起。
惊鸿若梦一书生·2024-01-17 22:14

Redis面试题19

Redis的单线程架构主要是指网络通信和数据处理阶段使用的是单个线程，而不是指整个Redis进程只有一个线程。在网络通信方面，Redis使用了Reactor模式，通过事件驱动的方式来处理并发请求。
CrazyMax_zh·2024-01-17 21:24

C++——STL标准模板库——容器详解——map

它提供了一对一的数据处理能力（其中第一个称为关键字，相当于索引，每个关键字在map中唯一，也是排序的主要依据；第二个称为该关键字的值，可以是任意类型），维护数据的对象是pair类型的键值对。
诗酒伴年华·2024-01-17 21:16

整理各类常用免费api接口，收藏备用~（持续更新...）

JavaScript、iOS、Andriod、静态地图、Web服务等多种版本,提供基本地图、位置搜索、周边搜索、公交驾车导航…二、高德开放平台高德开放平台是国内技术优质的LBS服务提供商，拥有先进的数据融合技术和海量的数据处理能力
探数数据·2024-01-17 20:14

2019-01-04

Day15【学员昵称】：沐沐【学习内容】：第10章文本处理技术【学习心得】：学好函数，先要把文本和数据处理好【笔记分享】：1.Excel数据在在主要分为文本、数值、逻辑值、错误值等2.公式中的文本需要用半角引号引起来
沐沐jessica·2024-01-17 20:07

[玩转AIGC]LLaMA2训练中文文章撰写神器（数据准备，数据处理，模型训练，模型推理）

目录一、下载并加载中文数据集二、中文数据集处理1、数据格式2、数据集处理之tokenizer训练格式1）先将一篇篇文本拼凑到一起（只是简单的拼凑一起，用于训练tokenizer）2）将数据集进行合并3、数据集处理之模型（llama2）训练（train.py）格式三、训练一个tokenizer四、使用训练的tokenizer预编码输入数据五、训练llama2模型1、修改参数1）vocab_size2
六五酥·2024-01-17 18:07

第八届核磁机器学习班（训练营：2023.11.6~11.18）

茗创科技专注于脑科学数据处理，涵盖（EEG/ERP,fMRI,结构像,DTI,ASL,FNIRS）等，欢迎留言讨论及转发推荐，也欢迎了解茗创科技的脑电课程，数据处理服务及脑科学工作站销售业务，可添加我们的工程师
茗创科技·2024-01-17 18:33

left join NULL踩坑

相应的，大数据BDPHIVE这边的数据处理也要做相应的改造，之前处理时会判断身份证位数，如果非15位和18位，则认为数据不正确，置为NULL。姓名身份证匿名化后要去除这个判断逻辑。
莱特昂·2024-01-17 18:55

智慧公厕创造智能、整洁、舒适环境，让“方便”更方便

通过物联感知、云管理数据处理和人性化智能设备的融合，智慧公厕让我们的“方便”变得更加方便。不仅实时感知和监控公共厕所的情况，还提升管理效率，为市民提供更人性化的服务。
中期科技ZONTREE·2024-01-17 18:42

基于云平台技术的GPS定位的浅谈

智能分析和应用：通过云平台的大数据处理和分析能力，可以挖掘出GPS定位数据中的更多有价值的信
MarkHD·2024-01-17 17:36

第十二届脑电机器学习训练营（线上：2023.12.4~12.24）

茗创科技专注于脑科学数据处理，涵盖（EEG/ERP,fMRI,结构像,DTI,ASL,FNIRS）等，欢迎留言讨论及转发推荐，也欢迎了解茗创科技的脑电课程，数据处理服务及脑科学工作站销售业务，可添加我们的工程师
茗创科技·2024-01-17 17:06

导入的xls文件，数字和日期都是文本格式，到df3都正常，但df4报错，什么原因？

一、前言前几天在Python最强王者交流群【斌】问了一个Pandas数据处理的问题，一起来看看吧。
皮皮_f075·2024-01-17 17:39

【数据库】乐观锁、悲观锁通俗讲解，必须懂！

1、悲观锁：定义：悲观锁的基本思想是，在整个数据处理过程中，将共享资源进行加锁，以防止其他线程的干扰。实现：通常通过数据库的行锁或者Java中的synchronized关键字来实现。
heartfluttering·2024-01-17 17:12

Python与ArcGIS系列（十九）GDAL之面要素转线要素

目录0简述1应用背景2面转线0简述GDAL（GeospatialDataAbstractionLibrary）是一个开源的地理数据处理库，它提供了处理地理空间数据的功能和工具。
Auto工程师·2024-01-17 16:28

Apache Zeppelin学习记录1

它支持多种编程语言（如Scala、Python、R、SQL等）和数据处理工具（如ApacheSpark、Hadoo
旻璿gg·2024-01-17 15:01

小白使用GSEA的注意事项

经过不断的试错，我终于找到了目前看过最好的GSEA教程，在细节之处非常贴心，小心心送给你～传送门：ChevyXu的高通量测序数据处理学习记录（三）：Path
墨墨如·2024-01-17 15:26

Python 与批处理：数据处理、系统管理和任务调度

批处理学习大数据篇｜大数据实操三剑客之一的批处理目录批处理的概念使用场景框架选择选型如何选docker安装hivePython操作hivedocker安装sparkpyspark操作dataframe如果使用JAVA原生的，而不用spark会有什么区别批处理的概念批处理是一种计算机处理任务的方式，通常涉及一系列的命令和任务，这些任务会按照预定的顺序和规则自动执行。以下是批处理的基本特征：自动化执行
Wade_Crab·2024-01-17 15:23

python数据处理list补零问题

近日在调整代码时遇到一个特别奇怪的问题：使用python定义的list嵌套结构在对子list进行补零操作时，原list也会进行扩展，我们有时不希望这种功能，为避免错误，使用a+b方法进行扩展。错误代码：此处对x_进行补零时，x列表内容同样补零，在最终网络返回时，这种操作修改了原始输入x，如果不进行循环操作，改使用不会被发现，一旦使用了循环，则会出现输入数据的变化。修改方法：
liqiang12689·2024-01-17 15:18

用时序数据库 DolphinDB 搭建一套轻量化工业试验平台解决方案

本文将提供一个轻量化的工业试验平台数据处理解决方案，快速简单地实现海量数据采集、存储、处理和分析，帮助企业提高产品的质量和竞争力。
DolphinDB智臾科技·2024-01-17 15:46

Apache DolphinScheduler 3.1.8 保姆级教程【安装、介绍、项目运用、邮箱预警设置】轻松拿捏！

适用于企业级场景，提供了一个可视化操作任务、工作流和全生命周期数据处理过程的解决方案。
DolphinScheduler社区·2024-01-17 14:58

SVR， adaboost， MLP， GBDT， XGBOOST， LIGHTGBM以及随机森林模型参数优化+模型训练+shap解释

SVR,MLP,adaboost，GBDT,XGBOOST,LIGHTGBM，随机森林模型参数优化+模型训练+shap解释导入所需要的库及数据处理模型超参数优化拆分训练集和测试集，进行shap解释导入所需要的库及数据处理
sdu_study·2024-01-17 14:18

用Python做数据分析之数据处理及数据提取

1、数据预处理第四部分是数据的预处理，对清洗完的数据进行整理以便后期的统计和分析工作。主要包括数据表的合并，排序，数值分列，数据分组及标记等工作。1）数据表合并首先是对不同的数据表进行合并，我们这里创建一个新的数据表df1，并将df和df1两个数据表进行合并。在Excel中没有直接完成数据表合并的功能，可以通过VLOOKUP函数分步实现。在python中可以通过merge函数一次性实现。下面建立d
学掌门·2024-01-17 13:37

边缘计算的挑战和机遇

边缘计算面临着数据安全与隐私保护、网络稳定性等挑战，但同时也带来了更强的实时性和本地处理能力，为企业降低了成本和压力，提高了数据处理效率。
Direct_Yang·2024-01-17 13:32

SQL基本表的定义、修改与删除 练习题

Sdept200215121200215122200215123200515125李勇刘晨王敏张立男女女男20191819CSCSMAIS课程表：Course课程号Cno课程名Cname先行课Cpno学分Ccredit1234567数据库数学信息系统操作系统数据结构数据处理
我是小杨杨·2024-01-17 13:46

线性代数在处理激光雷达的数据处理和图像处理中的应用

线性代数在激光雷达数据处理和图像处理中具有广泛的应用，包括矩阵运算和特征值分解等。这些应用可以帮助我们对数据进行变换、合并。提取和降维等操作，从而实现更高效、准确的数据处理和图像处理。
weixin_30777913·2024-01-17 13:13

C++数据科学与机器学习基础

以下是一些C++数据科学基础的关键概念：数据处理：数据科学的第一步是数据处理，即对
naer_chongya·2024-01-17 11:29

设计的逻辑与使用的逻辑

使用的逻辑是指在实际应用过程中所采用的思维和方法，包括操作流程、数据处理、决策等。设计的逻辑和使用的逻辑之间有着紧密的联系。
人机与认知实验室·2024-01-17 11:25

当我们说智能巡检时到底在谈什么

智能巡检发展不难看出，我认为可以分这样几个阶段，数据处理时期、电子巡更期、智能巡
威斯盾科技·2024-01-17 11:04

介绍 Apache Spark 的基本概念和在大数据分析中的应用

它通过将数据存储在内存中来避免磁盘读写的开销，从而提供更快的数据处理速度。灵活：
酷爱码·2024-01-17 11:45

大学物理-实验篇（二）——用分光计测定三棱镜的折射率（光：特定频段电磁波、光线在介质界面折射、平行光与凸透镜）

目录预备知识光：特定频段电磁波光线在介质界面折射平行光与凸透镜实验目的实验仪器实验原理实验步骤准备分光计目镜调焦刻度盘读数测三棱镜顶角测三棱镜最小偏向角数据处理预备知识光：特定频段电磁波光速：关键属性：
qiyi.sky·2024-01-17 10:18

4种方法用Python批量实现多Excel多Sheet合并

目录方法一：使用pandas库方法二：使用openpyxl库方法三：使用xlrd和xlwt库方法四：使用os和glob库在数据处理中，经常需要将多个Excel文件中的多个工作表进行合并。
傻啦嘿哟·2024-01-17 10:25

一对一包教会近红外数据处理教学服务

茗创科技专注于脑科学数据处理，涵盖（EEG/ERP,fMRI,结构像,DTI,ASL,FNIRS）等，欢迎留言讨论及转发推荐，也欢迎了解茗创科技的脑电课程，数据处理服务及脑科学工作站销售业务，可添加我们的工程师
茗创科技·2024-01-17 09:44

第十四届脑电数据分析进阶班（训练营：2023.10.29~11.11）

茗创科技专注于脑科学数据处理，涵盖（EEG/ERP,fMRI,结构像,DTI,ASL,FNIRS）等，欢迎留言讨论及转发推荐，也欢迎了解茗创科技的脑电课程，数据处理服务及脑科学工作站销售业务，可添加我们的工程师
茗创科技·2024-01-17 08:47

Elastic-Job分布式调度学习

单机处理极限:我们使用SpringTask定时器也是可以做得到,但是单机的性能(CPU,内存,硬盘)始终有限,对于海量的数据处理会有一定的极限高可用:如果单机宕机了,单点故障导致整个任务调度无法使用,所以需要保证任务的高可用性防止重复执行
南瓜战士·2024-01-17 08:24

Python 网络爬虫入门详解！！

爬虫主要分为通用爬虫和聚焦爬虫通用爬虫：百度，360，搜狐，谷歌，必应……原理：（1）抓取网页（2）采集数据（3）数据处理（4）提供检索服务HTTP协议和抓包工具http服务端口是80端口https服务端口号是
在路上的小王·2024-01-17 08:19

爬虫案例—深圳租房数据的回归分析

本文的主要内容包含：导入库导入主要的库用于：数据处理、可视化、建模、特征可解释性等数据基本信息1、导入数据2、数据形状和字段类型下面是具体的特征解释：#下面是特征属性name：小区名字l
尤而小屋·2024-01-17 08:03

Linux数据处理的几个命令

文章目录Linux数据处理的几个命令文件内容搜索利器-grep语法默认无参数增加文件夹反向查找不区分大小写显示行数，精准定位没有规矩不成方圆sort语法默认无参数根据第N列排序检查是否已经排序逆序排列你是唯一的
我们编程吧·2024-01-17 07:12
上一页 32 33 34 35 36 37 38 39 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他