E-COM-NET
首页
在线工具
Layui镜像站
SUI文档
联系我们
推荐频道
Java
PHP
C++
C
C#
Python
Ruby
go语言
Scala
Servlet
Vue
MySQL
NoSQL
Redis
CSS
Oracle
SQL Server
DB2
HBase
Http
HTML5
Spring
Ajax
Jquery
JavaScript
Json
XML
NodeJs
mybatis
Hibernate
算法
设计模式
shell
数据结构
大数据
JS
消息中间件
正则表达式
Tomcat
SQL
Nginx
Shiro
Maven
Linux
kettle学习篇
kettle
案例-数据仓库
一.加载租赁数据至租赁事实表1.打开
kettle
工具,创建load_fact_rental转换2.配置“表输入”控件配置数据库连接并在SQL框中输入以下SQL语句SELECTCOALESCE(MAX(rental_last_update
旺仔ᥬQ᭄ᥬQ᭄糖
·
2022-11-28 13:00
数据仓库
etl
数据库
kettle
实现数据加载
一、加载用户数据至用户维度表1.打开
kettle
创建一个新的转换并命名,添加控件“表输入”(两个)、“映射(子转换)”、“字段选择”、“值映射”、“维度查询/更新”。并建立Hop跳连接线。
想睡觉。。
·
2022-11-28 13:25
数据库
database
sql
etl
sqoop
带你看懂变分自编码(VAE)
实际上,我们在机器
学习篇
章中对VAE从理论上做了一次介绍,还是比较晦涩难懂的。今天,我们就由浅入深来详细理解一下这个由世界级顶尖研究型大学——阿姆斯特丹大学——学霸
整得咔咔响
·
2022-11-28 13:52
深度学习
机器学习
神经网络
tensorflow
人工智能
8.3 案例实现(加载数据库sakila中的数据至数据仓库sakila_dw)
操作介绍:通过
Kettle
工具将前面小节创建的转换整合成一个整体,用于定时操作DVD租赁商店的数据仓库。
硹ck
·
2022-11-28 13:46
kettle数据清洗案例
数据仓库
Python
学习篇
(五) Python中的循环
while循环2.1四步循环法三、forin循环四、流程控制语句4.1break4.2continue五、else语句六、嵌套循环七、二重循环中的break和continue总结前言前面我们学习了Python
学习篇
学工科的皮皮志^_^
·
2022-11-28 08:25
Python3.8
python
开发语言
后端
经验分享
weibu的深度
学习篇
之pytorch(4)——utils.data和torchvision
数据处理工具箱的概述Pytorch涉及数据处理(数据装载、数据预处理、数据增强等)主要工具包及相关关系如下:pytorch数据处理工具包概述torch.utils.data工具包1)Dataset:抽象类,其他数据集要继承这个类,包含两个方法__getitem__和__len__。2)DataLoader:定义一个新的迭代器,实现批量(batch)读取,打乱数据(shuffle)并提供加速功能。3
weibuweibu123
·
2022-11-28 07:08
Pytorch基础
pytorch
深度学习
目标检测
人工智能
OpenCV
学习篇
1:Mat类构造
简介首先来看一下Mat类的源码简介:TheclassMatrepresentsann-dimensionaldensenumericalsingle-channelormulti-channelarray.Itcanbeusedtostorerealorcomplex-valuedvectorsandmatrices,grayscaleorcolorimages,voxelvolumes,vect
robinhjwy
·
2022-11-28 07:04
OpenCV学习
opencv
RecSys‘22 推荐系统论文梳理
2022推荐系统论文梳理系列推荐系统相关顶会整理IJCAI'22推荐系统论文梳理ICML/ICLR'22推荐系统论文梳理WWW'22推荐系统论文之序列推荐篇WWW'22推荐系统论文之多任务与对比
学习篇
WWW
AI算法札记
·
2022-11-27 21:11
推荐算法
推荐算法
第七章 数据的增量加载
一、打开
Kettle
工具,创建转换使用
Kettle
工具,创建一个转换incremental_load,并添加表输入控件、插入/更新控件以及Hop跳连接线,具体如图所示。
txhy_
·
2022-11-27 21:40
数据库
第七章 数据的批量加载
一、打开
Kettle
工具,创建转换使用
Kettle
工具,创建一个转换batch_load,并添加执行CSV文件输入控件、表输出控件以及Hop跳连接线,具体如图所示。
txhy_
·
2022-11-27 21:40
数据库
第六章 数据粒度的转换
一、打开
Kettle
工具,创建转换使用
Kettle
工具,创建一个转换granularity,并添加表输入控件、字段选择控件、排序记录控件、记录集连接控件、过滤控件、空操作控件、表输出控件以及Hop跳连接线
txhy_
·
2022-11-27 21:39
数据库
java
开发语言
第四章 JSON文件的数据抽取
一、打开
Kettle
工具,创建转换通过使用
Kettle
工具,创建一个转换json_extract,并添加“JSONinput”控件、“表输出”控件以及Hop跳连接线,具体如图所示。
txhy_
·
2022-11-27 21:09
json
第七章 数据的全量加载
一、打开
Kettle
工具,创建转换使用
Kettle
工具,创建一个转换full_load,并添加执行SQL脚本控件、表输入控件、表输出控件以及Hop跳连接线,具体如图所示。
txhy_
·
2022-11-27 21:09
数据库
microsoft
java
第八章 综合案例—构建DVD租赁商店数据仓库
加载用户维度表与商店维度表1使用
Kettle
工具,创建一个转换load_dim_customer,并添加表输入控件、映射控件、字段选择控件、值映射控件、维度查询/更新控件以及Hop跳连接线,具体如图所示
qq_52035534
·
2022-11-27 21:09
数据仓库
第四章 TSV文件的抽取
一、打开
Kettle
工具,创建转换通过使用
Kettle
工具,创建一个转换tsv_extract,添加“文本文件输入”控件、“表输出”控件以及Hop跳连接线,具体如图所示。
txhy_
·
2022-11-27 21:39
java
开发语言
第四章 XML文件的数据抽取
一、打开
Kettle
工具,创建转换通过使用
Kettle
工具,创建一个转换转换xml_extract,并添加“GetdatafromXML”控件、“表输出”控件以及Hop跳连接线,具体如图所示。
txhy_
·
2022-11-27 21:39
xml
java
开发语言
第八章 综合案例——构建DVD租赁商店数据仓库
一、加载日期数据至日期维度表通过
Kettle
工具加载日期数据至dim_date日期维度表。
七安☆
·
2022-11-27 21:37
数据仓库
第八章 综合案例--构建DVD租赁商店数据仓库
一、加载日期数据至日期维度表通过
Kettle
工具加载日期数据至dim_date日期维度表。
txhy_
·
2022-11-27 21:04
数据仓库
我的大学成长之路(CUST)
总得写一写大学吧,毕竟,这是四年的青春,磨练与蜕变…目录篇一:关于生活篇二:关于竞赛篇三:关于考研篇四:关于保研篇五:关于
学习篇
六:关于圈子篇七:关于爱好篇八:关于爱情篇一:关于生活故事要从18年的夏天讲起
小龙呀
·
2022-11-27 13:21
行走悟人生
经验分享
Kettle
工具简单使用(spoon)
1、添加测试数据在navicat中随便找个表当做被转化的数据进行测试,以下表为例:在SQLserver数据库中创建表2、下载spoon软件下载路径:https://download.csdn.net/download/qq_57404736/85013576打开文件夹,双击spoon.bat打开软件3、配置输入和输出文件双击左边输入,然后找到表输入,拖到右侧工作区双击工作区的表输入,进行配置点击确
大米☋
·
2022-11-27 12:23
mysql
数据库
大数据
sqlserver
测开
学习篇
-css
选择器/*id选择器#号*/#ll{color:blue;}/*类选择器.号*/.cl{color:aqua;}/*群组选择器逗号隔开*/h1,h2,span{color:burlywood;}/*选中top下面的第一个div(伪类选择器)*/.top>div:nth-child(1){margin-top:11px;margin-left:50px;float:left;}.top>div:nt
亚索不会吹风
·
2022-11-27 08:11
css
学习
css3
推荐系统深度
学习篇
-阿里DIN算法介绍(4)
DIN(DeepInterestNetworkforClick-ThroughRatePrediction)算法一、din简介该论文是18年由阿里巴巴的盖坤团队提出,论文地址为:https://arxiv.org/pdf/1706.06978.pdf原论文的网络结构为在深度学习推荐系统这本书中,王喆绘制了这么一幅图,更好理解注意架构图中的红线,发现每个ad会有good_id,shop_id两层属性
Daisy和她的单程车票
·
2022-11-27 06:53
推荐系统
算法
推荐系统
ETL第三章案例
案例一:通过
Kettle
工具的转换来实现将一张数据表中的两个字段进行拼接,然后插入到另一张数据表中。
小李吃不饱—
·
2022-11-27 05:46
ETL
etl
数据仓库
AAAI‘22 推荐系统论文梳理
2022推荐系统论文梳理系列推荐系统相关顶会整理IJCAI'22推荐系统论文梳理ICML/ICLR'22推荐系统论文梳理WWW'22推荐系统论文之序列推荐篇WWW'22推荐系统论文之多任务与对比
学习篇
WWW
AI算法札记
·
2022-11-26 22:17
推荐算法
人工智能
深度学习
机器学习
推荐算法
WSDM‘22推荐系统论文梳理
2022推荐系统论文梳理系列推荐系统相关顶会整理IJCAI'22推荐系统论文梳理ICML/ICLR'22推荐系统论文梳理WWW'22推荐系统论文之序列推荐篇WWW'22推荐系统论文之多任务与对比
学习篇
WWW
AI算法札记
·
2022-11-26 22:16
推荐算法
深度学习
机器学习
人工智能
推荐算法
[ 图像分类 ] 经典网络模型实例—— CIFAR10 + ResNet50 详解与复现
Author:HorizonMax✨编程技巧篇:各种操作小结机器视觉篇:会变魔术OpenCV深度
学习篇
:简单入门PyTorch神经网络篇:经典网络模型算法篇:再忙也别忘了LeetCode[图像分类]经典网络模型实例
Horizon Max
·
2022-11-26 11:41
经典网络模型
人工智能
深度学习
图像分类
操作实例
机器
学习篇
——MNIST手写数字识别
MNIST手写数字识别是调教一个完整的神经元来进行分类模型的构建应用,为什么说是一个完整神经元呢?因为它具备生物学上一个神经元的特征,除了有输入输出函数,还有一个激活函数,对应着生物学上神经元的阈值。文章目录MNIST数据集的解读以及导入数据获取读取数据集数据集的划分模型构建训练模型评估模型应用模型独热码转化为十进制结果可视化MNIST数据集的解读以及导入这玩意说白了就是一个神经元处理分类问题(使
Lapulas2022
·
2022-11-26 05:08
机器学习笔记
python
tensorflow
可视化
深度学习
机器学习
学习篇
| 小小白也能学会datetime(重要的都在碗里)
datetime是Python中与时间处理相关的库。掌握它可以让你在处理时序数据时更加得心应手。掌握起来也不难,只要你能清楚地分辨时间段和时间点的概念。一个小时、一周、一个月……是时间段,在datetime库中对应着timedelta对象;2022年11月15日15时5分30秒……是时间点,对应date、time、datetime对象;理解一个概念,四个对象就已经学会一半啦!真棒!时间段:time
小蟒蛇的进阶
·
2022-11-25 23:57
学习
python
卖萌屋算法工程师思维导图—统计机器
学习篇
卖萌屋的妹子们(划掉)作者团整理的算法工程师思维导图,求职/自我提升/查漏补缺神器。该手册一共分为数据结构与算法、数学基础、统计机器学习和深度学习四个部分。下面是第二部分统计机器学习的内容~公众号后台回复【思维导图】获取完整手册(Xmind脑图源文件,学习起来更方便(ง•_•)ง统计机器学习线性回归回归方程:Y=WX解析解:损失函数-最小二乘法用高斯概率密度函数表示出y,然后进行极大似然估计理解:
夕小瑶
·
2022-11-25 17:05
[ 数据集 ] MINIST 数据集介绍
Author:HorizonMax✨编程技巧篇:各种操作小结机器视觉篇:会变魔术OpenCV深度
学习篇
:简单入门PyTorch神经网络篇:经典网络模型算法篇:再忙也别忘了LeetCode文章目录MINIST
Horizon Max
·
2022-11-25 15:29
经典网络模型
人工智能
深度学习
数据集
MNIST
【神经网络
学习篇
】tensorflow实现cifar10识别(RNN lstm)
1.LongShortTermMemorynetworks简称LSTMs,是一种特殊的RNN网络。LSTM被明确地设计为避免长期依赖性问题。长时间记住信息实际上是它们的默认行为,而不是它们努力学习的东西。标准RNN中的重复模块包含一个单层。LSTM也有这种链状结构,但重复模块有不同的结构,它有四个神经网络层,以一种特殊的方式进行交互。LSTM中的重复模块包含四个交互层。图片来自:https://m
lesl551
·
2022-11-25 05:56
tensorflow
rnn
lstm
机器
学习篇
-逻辑回归的分类预测
机器
学习篇
-逻辑回归的分类预测1逻辑回归的介绍和应用1.1逻辑回归的介绍逻辑回归(Logisticregression,简称LR)虽然其中带有"回归"两个字,但逻辑回归其实是一个分类模型,并且广泛应用于各个领域之中
爱编程的西瓜
·
2022-11-24 04:25
#
机器学习
python
机器学习
【头歌】重生之深度
学习篇
-Keras(初级)
创作不易,参考之前,点个赞,收藏,关注一下不过分吧,家人们第1关:构建模型任务描述本关任务:构建一个简单的模型,并且指定输入数据的尺寸:batch_size为18,input_dim为20。编程要求根据提示,在右侧编辑器补充代码,构建一个简单的模型,并指定输入输出数据的尺寸:units为18,input_dim为20。definput_values():model=Sequential()'''返
垮起个老脸
·
2022-11-24 02:55
重生之我在头歌渡劫
keras
深度学习
人工智能
[ 数据集 ] CIFAR-10 数据集介绍
Author:HorizonMax✨编程技巧篇:各种操作小结机器视觉篇:会变魔术OpenCV深度
学习篇
:简单入门PyTorch神经网络篇:经典网络模型算法篇:再忙也别忘了LeetCode文章目录CIFAR
Horizon Max
·
2022-11-23 16:33
经典网络模型
人工智能
深度学习
数据集
CIFAR-10
AttributeError: module ‘torch.onnx‘ has no attribute ‘set_training‘
Author:HorizonMax✨编程技巧篇:各种操作小结机器视觉篇:会变魔术OpenCV深度
学习篇
:简单入门PyTorch神经网络篇:经典网络模型算法篇:再忙也别忘了LeetCode错误提示使用draw_model
Horizon Max
·
2022-11-23 08:08
又来一个
Bug
PyTorch
tensorboardX
深度学习
RuntimeError: Error(s) in loading state_dict for ResNet
Author:HorizonMax✨编程技巧篇:各种操作小结机器视觉篇:会变魔术OpenCV深度
学习篇
:简单入门PyTorch神经网络篇:经典网络模型算法篇:再忙也别忘了LeetCode错误提示RuntimeError
Horizon Max
·
2022-11-23 06:58
又来一个
Bug
python
深度学习
人工智能
查看显存使用情况:nvidia-smi
Author:HorizonMax✨编程技巧篇:各种操作小结机器视觉篇:会变魔术OpenCV深度
学习篇
:简单入门PyTorch神经网络篇:经典网络模型算法篇:再忙也别忘了LeetCodenvidia-smiNVIDIA
Horizon Max
·
2022-11-23 05:54
各种操作小结
nvidia
显存
python
ETL使用
Kettle
处理银行信用卡申请项目
一.项目概述对当天申请信用卡人员进行信息校对,对不符合人员进行风险标注,无风险人员信息根据所在地区进行分表、交付信息来源:1.web端:银行网页申请|2.移动端:网银、手机银行|3.三方:各类门户网站、手机APP|4.柜台:人工柜台、ATM、CRS|5.业务员:地推主表预览:信息清洗流程:信息获取→信息输入→信息去重→代码信息替换→添加/补充对应信息字段→风险备注→重制信息表→根据实际需求/情况进
ice_Seattle
·
2022-11-23 02:01
Kettle
数据库
etl
sql
6.2不一致数据转换
下面通过
kettle
工具对数据表company进行不一致数据的转换操作,及通过与供货商提供的标准价格表进行比较,得出不一致的数据,从而进行修改,最终输出到数据表company中,具体实现操作如下。
万俟傲霜
·
2022-11-22 10:56
数据清洗
etl
5.4.2 数据规范化处理
下面用
kettle
工具对数据进行检验操作:一,创建转换二,配置自定义常量数据1,元数据选项卡添加字段常量ProductionDate,ProductionName,ProductionNumber以及Comm
万俟傲霜
·
2022-11-22 10:26
数据清洗
etl
6.1多数据源的合并
下面通过
Kettle
工具将A公司和B公司的手机日销数据合并到一个数据源(数据表company)中,也就是对文件company_a.csv(如上图)和数据表comp
万俟傲霜
·
2022-11-22 10:26
数据清洗
etl
5.2.3填充缺失值
1.打开
Kettle
工具,创建转换2.配置文本文件输入控件数据预览:3.配置过滤记录控件4.配置替换NULL值控件5.配置合并记录控件6.配置替换NULL值2控件7.配置字段选择控件8.运行转换9.查看文件
阿卿冈日
·
2022-11-22 10:52
mysql
数据清洗 黑马程序员 第五章数据的清洗与检验——阅读笔记
1.打开
Kettle
工具,创建转换通过使用
Kettle
工具,创建一个转换repeat_tran
あㅉ
·
2022-11-22 10:51
mysql
单目深度估计--深度
学习篇
文章目录一:深度估计应用背景1.深度估计的定义2.深度估计的应用场景3.几种深度估计的方法4.使用深度学习估计的优缺点二:单目深度估计模型1.使用的数据集2.整体网络架构3.分模块解析Ⅰ:层级Ⅱ:ASPPⅢ:特征图减法操作Ⅳ:特征融合Ⅴ:Coarse-to-FineⅥ:权重参数预处理WS与pre_act操作Ⅶ:损失函数一:深度估计应用背景1.深度估计的定义假设我们有一张2d图片III,我们需要一个
江南綿雨
·
2022-11-22 04:52
CNN深度估计系列
深度学习
人工智能
图像处理
第八章 综合案例——构建DVD租赁商店数据仓库③
8.3.7加载演员数据至演员维度表1.打开
Kettle
工具打开
Kettle
工具,创建一个转换load_dim_actor,并添加表输入,插入/更新等控件。
LUTyangmy
·
2022-11-22 03:03
big
data
数据库
etl
第八章 综合案例——构建DVD租赁商店数据仓库①
8.3.2加载日期数据至日期维度表1.打开
Kettle
工具,创建转换使用
Kettle
工具,创建一个转换load_dim_date,并添加生成记录控件、增加序列控件、JavaScript代码控件、表输出控件以及
LUTyangmy
·
2022-11-22 03:33
数据库
etl
big
data
第八章 综合案例——构建DVD租赁商店数据仓库②
8.3.5加载用户数据至用户维度表1.打开
Kettle
工具打开
Kettle
工具,创建一个转换load_dim_customer,并添加表输入,映射(子转换),字段映射,值映射,维度查询/更新等控件。
LUTyangmy
·
2022-11-22 03:33
etl
big
data
数据库
Kettle
-数据的迁移和装载
目录一.表输出1.描述2.建立转换添加控件3.配置控件4.保存运行二.插入更新1.描述2.建立转换并添加控件3.配置控件4.保存运行三.Excel输出1.描述2.建立转换并添加控件3.配置控件4.保存运行四.文本文件输出1.描述2.建立转换并添加控件3.配置控件4.保存运行五.SQL文件输出1.描述2.新建转换并添加控件3.配置控件4.保存运行一.表输出1.描述表输出是将数据装载至数据库的表中。案
CC-Betsy
·
2022-11-22 02:28
etl
etl
大数据
mysql
kettle
-数据加载&全量加载&增量加载&批量加载(第七章)
目录一.简单介绍二.全量加载1.数据预准备:2.建立转换并添加控件3.配置控件4.保存运行:三.增量加载1.数据准备2.建立转换并添加控件3.配置控件4.保存运行四.数据的批量加载1.数据准备2.建立转换并添加控件3.配置控件4.保存运行一.简单介绍数据的预处理过程,除了包括数据抽取、数据本身的清洗与检验以及数据转换操作,还包括数据加载操作,数据加载是数据预处理过程的最后一个步骤,主要是负责将清洗
CC-Betsy
·
2022-11-22 02:58
etl
数据库
sql
etl
mysql
大数据
Kettle
第五章-高级转换
目录一.记录集连接1.简单介绍2.建立转换并添加控件3.配置各控件4.保存运行二.多路数据合并连接1.简单介绍2.建立转换并添加控件3.配置各控件4.保存运行三.单变量统计1.简单介绍2.建立转换并添加控件3.配置各控件4.保存运行四.公式1.简单介绍2.建立转换并添加控件3.配置各控件4.保存运行五.利用Janino计算Java表达式1.简单介绍2.建立转换并添加控件3.配置各控件4.保存运行六
CC-Betsy
·
2022-11-22 02:58
etl
sql
mysql
大数据
etl
上一页
23
24
25
26
27
28
29
30
下一页
按字母分类:
A
B
C
D
E
F
G
H
I
J
K
L
M
N
O
P
Q
R
S
T
U
V
W
X
Y
Z
其他