Kettle数据采集

持续推进工业AI战略，组建工业人工智能研究院

公司以行业领先的AUTBUS总线、TSN网络、工业操作系统与软件定义控制技术，整合工业应用场景的网络通信、数据采集、工业软件，引进通用人工智能大模型等技术资源，推动公司从工业互联走向工业AI。
一RTOS一·2023-11-21 04:15

Kettle案例二十九:列转行

流程图image.pngExcel输入image.pngimage.pngimage.png排序记录image.png列转行image.pngExcel输出image.pngimage.pngimage.png
千客·2023-11-21 04:49

ESP32 ESP-IDF 通过阿里云物联网平台控制LED

术语阿里云物联网平台（以下简称物联网平台）物联网平台为设备提供安全可靠的连接通信能力，向下连接海量设备，支撑设备数据采集上云；向上提供云端API，服务端通过调用云端API将指令下发至设备端，实现远程控制
maker_knz·2023-11-21 01:42

hyperscan复合策略！（NOT）的处理

*gh",/*103not*/"teakettle{4,10}",/*104hit*/"ijkl[mMn]",/*105hit*/"102&!
ebayboy·2023-11-20 21:29

python爬虫框架----scrapy基础篇

Scrapy框架应用广泛，常用于数据采集、网络监测，以及自动化测试等。提示：Twisted是一个基于事件驱动的网络引擎框架，同样采用Python实现。
雪小妮·2023-11-20 19:34

【咖啡品牌分析】Google Maps数据采集咖啡市场数据分析区域分析热度分布分析数据抓取瑞幸星巴克

引言咖啡作为一种受欢迎的饮品，已经成为我们生活中不可或缺的一部分。随着国内外咖啡品牌的涌入，新加坡咖啡市场愈加多元化和竞争激烈。本文对新加坡咖啡市场进行了全面的品牌门店数占比分析，聚焦于热门品牌的地理分布、投资价值等。通过对多维度的数据探索，了解新加坡不同地区咖啡店的分布情况，各热门品牌在市场中的占比和发展趋势等。研究问题随着全球咖啡品牌在新加坡市场的竞争加剧，我们将关注以下研究问题：品牌分布情况
爱python的王三金·2023-11-20 18:56

分享职业技术培训类型

Python技术应用工程师”“Python技术应用工程师”职业技术认证是由工业和信息化部教育与考试中心推出一套专业化、科学化、系统化的人才考核标准，涉及在互联网、零售、金融、电信、医学、旅游等行业专门从事数据采集
泰迪智能科技·2023-11-20 18:50

京东数据采集与挖掘（京东大数据）：2023年10月京东冰箱品牌销售排行榜

鲸参谋监测的京东平台10月份冰箱市场销售数据已出炉！10月份，冰箱市场的销售额有小幅上涨。鲸参谋数据显示，在京东平台上，今年10月冰箱市场的销量为94万+，销售额将近23亿，同比增长超过1%。从价格上看，10月冰箱的市场均价也呈正向增长变动，环比增长约9%，同比增长约4%。*数据源于鲸参谋-行业趋势分析（来自公开渠道获取与统计，数据仅供参考）冰箱市场中，海尔品牌的市场占比排名第一，约30%，10月
jingcanmou_data·2023-11-20 16:06

京东数据接口（京东运营数据采集）：2023年10月京东空调品牌销售排行榜

鲸参谋监测的京东平台10月份空调市场销售数据已出炉！根据鲸参谋电商数据分析平台的相关数据显示，今年10月，京东平台空调的销量将近57万，同比增长约15%；销售额为16亿+，同比增长约3%。由数据可知，相较去年同期，今年10月空调市场整体销售呈增长。*数据源于鲸参谋-行业趋势分析（来自公开渠道获取与统计，数据仅供参考）空调市场中，格力和美的是两大热销品牌，两者的市占分别约28%和21%，10月份，格
jingcanmou_data·2023-11-20 16:33

Zabbix深入解析与实战

通常是为了对人达成影响、管理、指导或保护的目的监控监视主机架构状态控制，事后追责目标：早发现早处理(故障、性能、架构)网站扩容(用数据说话)为什么要监控对系统不间断实时监控实时反馈系统当前状态保证业务持续性运行监控流程数据采集数据存储数据分析展示
某x？·2023-11-20 16:32

数据实时增量同步之CDC工具—Canal、mysql_stream、go-mysql-transfer、Maxwell

CDC工具对比实现原理：Mysqlbinlog讲解：mysqlbinlog的三种格式常见的数据采集工具（相关知识）：DataX(处理离线数据)Flume（处理实时数据）Logstash（处理离线数据）Sqoop
好奇新·2023-11-20 13:30

【离线数仓-2-数据采集】

离线数仓-2-数据采集离线数仓-2-数据采集1.用户行为日志数据模拟1.用户行为日志的介绍2.埋点有哪些3.用户行为日志内容4.用户行为日志格式5.用户行为日志数据采集1.节点之间配置免密登录2.linux
Apache Minor Trend·2023-11-20 13:00

整车试验数采设备技术方案

本方案提供一套整车数采设备系统用于温度、压力和转速等数据采集。此套设备包含数据记录仪、数采模块和集配置、采集、监控及分析等功能于一体的上位机数据记录软件。数采模块可以采集温度、压力和转速传感
InfluxAsia（英福思）·2023-11-20 12:37

13-数据采集项目03

一、Hive上的数据导入##4.创建ods层[[email protected]]#beeline-ujdbc:hive2://caiji:10000-nroot-p123456-e"createdatabaseifnotexistsods_news"[[email protected]]#beeline-ujdbc:hive2://caiji:10000-nroot-p12345
YuPangZa·2023-11-20 12:55

13-数据采集项目02

一、安装各类软件创建文件夹mkdir-p/opt/installsmkdir-p/opt/modulesmkdir-p/opt/scripts上传文件：1、jdk的安装步骤：解压，修改jdk名字，配置环境变量，source一下即可今天学习一个jdk的自动化安装脚本。（Shell脚本）将所有的脚本都放入到这个/opt/scripts下面创建install_jdk.sh#!/bin/bashAPP_P
YuPangZa·2023-11-20 12:25

物联专栏丨云边协同技术加速AloT能力向边缘侧快速演进

随着物联网被明确定位为我国新型基础设施的重要组成部分，成为支撑数字经济发展的关键基础设施，大型企业纷纷加速构建大集中式的物联网云平台，数以万亿计的新设备接入网络并产生海量数据，形成数据采集、流转、存储、
inBuilder低代码平台·2023-11-20 09:13

KEPServerEX助力电机制造高效管理系统

项目需求客户在前期项目中所遇到的难点●工厂生产线的工艺步骤和设备各不相同，涉及十多种PLC和设备数据采集；●在数据存储方面需要有筛选性的对数据进行储存，提高有效数据利用率，减小服务器压力；●客户现有
weixin_42660214·2023-11-20 09:34

免费mes/开源MES/快速解决工厂生产管理难题

万界星空科技免费mes的特点：1.采用强大数据采集引擎、整合数据采集渠道（RFID、条码
万界星空科技·2023-11-20 09:27

使用Pandas进行时间重采样，充分挖掘数据价值

数据重采样主要有以下两个目的：调整粒度：通过数据采集可以修改收数据点的时间间隔，只获取关键信
python慕遥·2023-11-20 08:00

数据采集与大数据架构分享

数据采集java支持的爬虫框架还是有很多的，如：webMagic、Spider、Jsoup等添加链接描述pipeline处理管道数据并发开发与应用AKKAAkka是一个构建在JVM上，基于Actor模型的的并发框架
学习3人组·2023-11-20 07:49

2023.11.16使用原生js和canvas实现图片矩形框标注功能

2023.11.16使用原生js和canvas实现图片矩形框标注功能做训练的时候需要一些数据集，但是网上数据集有时不能满足自身的使用需求，自己编制一个标注软件实现数据采集功能。
leigh_chen·2023-11-20 05:49

字典服务的设计与管理

但是系统中关键词始终也无法匹配到该公司；然后在库中模糊匹配，将公司名称复制到搜索框中，这样就可以正常命中索引，那么问题也就很清楚了，这种数据"隐身"的情况，即看着是同一个字，但是实际上不是，通常由特殊编码引起的；通过表单进行数据采集是常用的业务手段
知了一笑·2023-11-20 03:16

Prometheus+Grafana环境搭建（window）

Prometheus+Grafana环境搭建1：配置Prometheus1.1:下载Prometheus安装包官方下载地址找到对应的win版本进行下载并解压1.2下载Window数据采集官方下载地址下载以管理员运行
mroldx·2023-11-20 02:21

内置易失性存储器、SPI 接口 MCP48CVD02T-E/UN、MCP48CVD02-E/UN、MCP48CVD02T-E/MF、MCP48CVD02-E/MF双通道、8位数模转换器（DAC）

典型应用•设定点或偏移微调•传感器校准•低功耗便携式仪器仪表•个人电脑外围设备•数据采集系统概览MCP48CVD02是一款双通道、8位缓冲电压输出数模转换器（DAC），内置易失性存储器和SPI兼容型串行接口
Summer-明佳达电子·2023-11-20 01:18

双通道、8位、MCP47CMD02T-E/MG、MCP47CMD02T-E/MF、MCP47CMD02T-E/UN数模转换器（DAC）适合消费和工业应用

典型应用：•设定点或偏移微调•传感器校准•低功耗便携式仪器仪表•个人电脑外围设备•数据采集系统特性8位分辨率轨到轨输出快速建立时间：4µs（典型值）I2C接口非易失性存储器（MTP）：32个位置上电/掉电复位
Summer-明佳达电子·2023-11-20 01:18

也就整了一万字的「数据指标体系」指南。

数据指标体系并不是第三方服务公司的专利，只要对埋点科学地进行数据采集，每个成型的互联网公司都可以自己搭建数据指标体系。
数据不吹牛·2023-11-20 01:14

通过微信聊天记录生成词云

对于微信聊天记录，可以通过采集聊天记录，通过聊天数据生成词云两步实现一、聊天记录数据采集整个任务中最困难的即为聊天数据采集。由于QQ和微信的聊天记录提取难度不同，对于QQ聊天数据，简单的导出即可。
jiangchao98·2023-11-20 00:02

3信息安全防护体系

这是一款数据采集与监视控制（SCADA）系统，被伊朗广泛使用于国防基础工业设施中。病毒并不以刺探情报为目的，而是按照设计者的设想，定向破坏离心机等要害目标。
ChaselWang·2023-11-20 00:33

如何设计统一元数据

元数据管理是对数据采集、存储、加工和展现等数据全生命周期的描述信息，帮助用户理解数据关系和相关属性。元数据管理工具可以了解数据资产分布及产生过程。
纵横AI大世界·2023-11-19 23:26

2023贵州省职业院校技能大赛大数据技术与应用专业样题

2023贵州省赛样题解析-数据采集：离线数据采集2023贵州省赛样题解析-数据采集：实时数据采集_子任务12023贵州省赛样题解析-数据采集：实时数据采集_子任务22023贵州省赛样题解析-实时数据处理
xlw2003·2023-11-19 21:24

2023年浙江省职业院校技能大赛大数据技术与应用专业样题

2023浙江省赛样题解析-数据采集：离线数据采集2023浙江省赛样题解析-数据采集：实时数据采集_子任务12023浙江省赛样题解析-数据采集：实时数据采集_子任务22023浙江省赛样题解析-实时数据处理
xlw2003·2023-11-19 21:24

2011-2022年高职大数据竞赛-赛题内容

本系列共分五篇，内容分别为：第一部分赛题内容第二部分任务剖析第三部分赛题模拟实现-离线数据抽取第四部分赛题模拟实现-离线数据统计第五部分赛题模拟实现-数据采集与实时计算第六部分赛题模拟实现-数据可视化第一部分竞赛内容赛项以大数据技术与应用为核心内容和工作基础
xlw2003·2023-11-19 21:54

2011-2022年高职大数据竞赛-赛题任务剖析

本系列共分五篇，内容分别为：第一部分赛题内容第二部分任务剖析第三部分赛题模拟实现-离线数据抽取第四部分赛题模拟实现-离线数据统计第五部分赛题模拟实现-数据采集与实时计算第六部分赛题模拟实现-数据可视化（
xlw2003·2023-11-19 21:54

C# winform 软件运行过久，开始卡顿 怎么解决

C#winform软件运行过久，开始卡顿怎么解决情况用C#winform开发的软件，里面有timer，有实时数据采集，有数据操作，有IO操作，有PLC读取。软件一开始很流畅，用了3天就开始卡顿。
忒可君·2023-11-19 19:29

C# 上位机软件开发之数据采集

（1）我想问的是数据采集，如何准确的周期内获取数据。因为时间不对，获取的数据没有意义。（2）数据采集卡，有没有推荐，推荐的时候，麻烦简单讲解一下
忒可君·2023-11-19 19:58

异地工业设备集中运维、数据采集，一招搞定

为了提升运维效率，能够及时发现和响应设备的故障、异常和潜在问题。越来越多的企业都在搭建“集中式”的远程智慧运维体系，以提高运维效率和降低成本。异地工业设备远程运维，提升响应效率、降低运维成本以国内陕西某机床公司为例，传统的机床设备维护需工程师亲临现场，存在响应时间慢、维护成本高等问题，为了改善售后服务，引入了贝锐蒲公英的解决方案。企业只需在客户现场，同数控机床设备一起部署蒲公英工业路由器R300系
贝锐·2023-11-19 19:27

ETL数据转换工具类型与适用场景

以下是针对Kettle、DataX和ETLCloud这几个工具的详细介绍及其适用场景。
ETLCloud数据集成社区·2023-11-19 19:06

采集微信公众号历史文章链接、点赞数、阅读数、评论、文档导出，统统拿下！

「助手」实现的功能1.支持Windows、macOS双系统2.两种采集模式（代理模式、链接模式）3.指定采集日期范围4.阅读、点赞、评论数据采集5.基于微信搜狗关键词搜
751a04b338b2·2023-11-19 16:33

2022-07-06

大数据智能营销系统大概有40多款软件，200多个功能包含全网数据采集，微信自动营销，邮件一键营销，短信一键营销，QQ营销等等①通过设置关键词、地区一键抓取精准潜在客户人群②把抓取到的数据，支持直接添加到微信上面
铭宣橘子·2023-11-19 14:59

数据仓库之电商数仓-- 1、用户行为数据采集

目录一、数据仓库概念二、项目需求及架构设计2.1项目需求分析2.2项目框架2.2.1技术选型2.2.2系统数据流程设计2.2.3框架版本选型2.2.4服务器选型2.2.5集群规模2.2.6集群资源规划设计三、数据生成模块3.1目标数据3.1.1页面日志3.1.2事件日志3.1.3曝光日志3.1.4启动日志3.1.5错误日志3.2数据埋点3.2.1主流埋点方式3.2.2埋点数据上报时机3.2.3埋点
FunnyPrince_·2023-11-19 14:10

C++编写的多线程自动爬虫程序

目录引言一、程序的设计二、程序的实现三、程序的测试四、优化与改进五、代码示例总结引言随着互联网的快速发展，网络爬虫程序已经成为数据采集、信息处理的重要工具。
小小卡拉眯·2023-11-19 11:39

工作流调度工具Airflow1.8搭建及使用

编写目的最近工作任务需要把原来使用Kettle的ETL流程迁移到Hadoop平台上，就需要找一个替代Kettle工作流部分的工具。
weixin_34195142·2023-11-19 09:44

FPGA模块——IIC协议（读写PCF8591）

FPGA模块——IIC协议（读取PCF8591）PCF8591/AT8591芯片对iic协议的使用PCF8591/AT8591芯片低功耗8位CMOS数据采集设备，4路模拟输入，1路模拟输出，分时多路复用
云影点灯大师·2023-11-19 07:30

STM32使用FREERTOS获取系统时间

使用CUBE_MX生成带有free_RTOS操作系统的工程，我们经常会使用到系统相对时间，尤其是使用其做数据采集的项目中经常需要给你数据打上时间的标签就需要实时获取系统的相对时间。
xian_z·2023-11-19 07:28

企业实战--ELK日志分析平台（Logstash数据采集搭建）

一、logstash简介Logstash是一个开源的服务器端数据处理管道。logstash拥有200多个插件，能够同时从多个来源采集数据，转换数据，然后将数据发送到您最喜欢的“存储库”中。（大多都是Elasticsearch。）Logstash管道有两个必需的元素，输入和输出，以及一个可选元素过滤器。输入输入：采集各种样式、大小和来源的数据Logstash支持各种输入选择，同时从众多常用来源捕捉事
chihtung_hsu·2023-11-19 06:29

ZYNQ多通道数据采集与LWIP传输系统

Zynq数据采集系统一、系统设计系统结构如图所示。PS将网络传输进来的参数通过BRAM传递到PL；PL将AD采样数据通过DMA传输到PS，PS收到中断后通过LWIP发送到上位机。
Xionq·2023-11-19 06:44

贝茄莱B&R AS实时数据采集功能

实时数据采集功能在PLC系统调试过程中，有助于调试人员对变量变化进行监测，通过波形对比，反应不同变量间的相互作用。该测试目的在于验证贝加莱系统组态软件的实时数据采集功能。
!chen·2023-11-19 01:39

数据采集的数据源有哪些？

从数据采集角度来说，都有哪些数据源呢？这四类数据源包括了：开放数据源、爬虫抓取、传感器和日志采集开放数据源一般是针对行业的数据库。
qq^^614136809·2023-11-18 23:36

车间ERP管理系统都有哪些?能带给企业什么好处

车间的管理工作涉及物料、班组、设备、工时评估、生产现场数据采集、派工单、退补料等环节，如何确保各个环节之间信息及时和准确的传递是常见的管理难题。
雪叶雨林·2023-11-18 20:37

shopee选品工具：Shopee选品工具—知虾精准选品与科学运营的利器

而Shopee选品工具——知虾，作为一款强大的大数据采集及分析平台，为卖家提供了全面的市场分析、产品分析和店铺分析功能，帮助卖家发现市场趋势、了解对手动态、进行精准选品和科学运营，从而提升销售效果。
知小虾·2023-11-18 19:37
上一页 26 27 28 29 30 31 32 33 下一页
按字母分类： ABCDEFGHIJKLMNOPQRSTUVWXYZ其他