安伦_Alan
安伦_Alan

Teradata 学习笔记1

Teradata 学习笔记1_第1张图片

Teradata 学习笔记1_第2张图片

通过下面的命令来观察有哪些会话层参数：
show control;

改变交易处理模式的命令如下：
.SET SESSION TRANSACTION [ANSI|BTET]

Teradata的帮助系统主要由三条命令组成，一条是HELP，一条是SHOW，另一
条是EXPLAIN。HELP命令可以提供有关数据库中各种目标的信息，SHOW命令则
用来显示这些目标的结构，包括创建这些目标的DDL语句。EXPLAIN命令以英文
文字的方式显示了系统处理一个SQL交易请求的执行过程。

Teradata 学习笔记1_第3张图片

Teradata 学习笔记1_第4张图片

使用方法：前面的+后面的参数

 

利用EXPLAIN命令，可以了解Teradata
执行一个SQL交易请求的详细过程和计划，这对于更进一步地理解Teradata的查询
处理机制有很大的帮助。另一方面，对于复杂SQL交易的调试来说，这也是不可缺
少的一个工具。
利用EXPLAIN解释一个SQL交易的方法很简单，就是在原来SQL语句的前面
加上EXPLAIN即可，其它完全不变。系统返回的信息包括：
! 提供完整的由分解器对SQL语句进行分解和优化后的AMP执行步。
! 这种执行计划是基于当前的数据分布情况而作出的，因此当数据分布发生
变化时，同样SQL语句产生的执行步可能不相同。
! EXPLAIN还会产生执行每个SQL步骤大致所需要的时间，但需要注意的
是，这个时间由于是根据早期版本的CPU处理时间来计算，因此往往和实
际情况相差很多，仅能作参考而已。
 

Teradata 学习笔记1_第5张图片

Teradata 学习笔记1_第6张图片

匹配符LIKE
LIKE用来进行字符串数据的模式匹配。用作匹配的字符串中可以包含下面的
通配符。
! %：表示除了NULL外的零个或多个字符组成的字符串。
! _：表示任何单个字符位置。

在LIKE结构的字符串中，'%'和'_'可以作为通配符使用，但是如果
需要匹配这些字符本身(比如查找95%)，即把它们作为一般字符时使用，该如何区
分呢？
我们可以通过定义ESCAPE字符来达到这个目的，紧跟在ESCAPE字符后的’%’
和’_’作为一般字符看待。

例：
LIKE ''%A%%AAA__'' ESCAPE ''A''
 
在这个表达式中，将字母A定义为ESCAPE字符，其中：
! 第一个%为通配符；
! 第一个 A和其后的%联合表示字符%；
! 第三个%为通配符；
! 第二个 A和其后的A联合表示字符A；
! 第四个 A和其后的’_’联合表示字符_；
! 最后一个’_’为通配符。

Teradata 学习笔记1_第7张图片

Teradata 学习笔记1_第8张图片

在Teradata数据库中将DATE型数据作为整数看待，但不容许无效的日期。计
算公式如下：
((YEAR - 1900) * 10000) + (MONTH * 100) + DAY
 
例：1997年3月31日的表达方式
YEAR = (1997 - 1900) * 10000 = 97 * 10000 = 970000
MONTH = (3 * 100) = 300
DAY = 31
DATE = 970331

与日期有关的数据函数

中EXTRACT函数允许选取日期和时间中任意字段或任意间隔的值，
Teradata中EXTRACT函数支持日期数据中选取年、月、日，从时间数据中选取小
时、分钟和秒。
EXTRACT使用举例如下：

Teradata 学习笔记1_第9张图片

ADD_MONTHS表示从某日期增加或减少指定月份的日期。它考虑了大小月问
题，所以计算日期是准确的。ADD_MONTHS使用举例如下：

Teradata 学习笔记1_第10张图片

利用CAST作数据转换:利用CAST函数将一种数据类型转换成另一种数据类型。

例：
SELECT CAST (salary_amount AS INTEGER)
FROM employee;
Value Result
50500.75 50500
 
SELECT CAST (salary_amount AS DEC (6,0))
FROM employee;
Value Result
50500.75 50501.

SELECT CAST (last_name AS CHAR (5))
FROM employee
WHERE department_number = 401;

last_name
Johns
Trade

Teradata也可以使用CAST函数来完成上面的操作，另外，它也作了扩充。举
例来说，为了完成上面相同的操作，也可以使用下面的表达方式：
SELECT salary_amount (INTEGER);
SELECT salary_amount (DEC(6,0));
SELECT last_name (CHAR(5));

Teradata对CAST函数本身也作了扩展，比如为了将显示结果以大写表示，可
以使用下面的SQL语句
SELECT CAST (last_name AS CHAR (5) UPPERCASE)
FROM employee
WHERE department_number = 401;
last_name
JOHNS
TRADE

Teradata 学习笔记1_第11张图片

宏的定义
宏是用CREATE MACRO命令来定义的，如下例所示：
CREATE MACRO birthday_list AS
(SELECT last_name
,first_name
,birthdate
FROM employee
WHERE department_number = 201
ORDER BY birthdate; );

宏的执行很简单，使用EXEC命令就可以。例如，为了执行上面定义的宏，可
以使用下面的语句：
EXEC birthday_list;

使用SHOW命令可以显示一个宏的定义，如下所示：
SHOW MACRO birthday_list;
 
使用REPLACE MACRO命令可以改变宏的定义，如：
REPLACE MACRO birthday_list AS
(SELECT last_name
,first_name
,birthdate
FROM employee
WHERE department_number = 201
ORDER BY birthdate, last_name; ) ;

函数：

CHARACTERS函数也是Teradata的扩展，用于计算VARCHAR型数据字段的
实际字符串长度。CHARACTERS函数可以简写成CHARACTER、CHARS或者
CHAR。

TRIM函数用于去除字符数据中前头或后端的空格或者二进制数据
(BYTE与VARBYTE)中前头或后端的零。

FORMAT短语中可以使用的格式化字符主要为：

 $ 美元标识符
 9 数字位
 Z 将数字中的前缀零去除
, 在指定位置插入逗号
. 指定小数点位置
 - 在指定位置插入连字号
 / 在指定位置插入斜线
% 在指定位置插入百分号
X 字符数据，每个X代表一个字符
 G 图形数据.一个G代表一个逻辑字符(双字节)
B 在指定位置插入空格

日期数据的缺省输出格式是：YY/MM/DD，这和ANSI标准是
一样的。而ANSI标准建议的日期显示格式是：YYYY-MM-DD。

注意：由于2000年问题，ANSI推荐使用日期格式为YYYY-MM-DD，或者其
它采用四位年的格式。
下面是一些对日期进行格式化的例子。
 
句法 结果
FORMAT 'YYYY/MM/DD' 1996/03/27
FORMAT 'DDbMMMbYYYY' 27 Mar 1996
FORMAT 'mmmBdd,Byyyy' Mar 27, 1996
FORMAT 'DD.MM.YYYY' 27.03.1996
FORMAT 'MM/DD/YY' 03/27/96
FORMAT 'MMM.DD.YY' Mar.27.96
FORMAT 'yy -- mm -- dd' 96 -- 03 -- 27
FORMAT 'DDDYY' 08696

 

Teradata 学习笔记1_第12张图片

Teradata 学习笔记1_第13张图片

创建表：

CREATE TABLE





;

Teradata 学习笔记1_第14张图片

创建表的可选项(Create Table Options)：

Teradata DDL允许在创建表时指定表的物理属性，包括：
是否允许重复记录
❍ SET 不允许记录重复
CREATE SET TABLE table1 ...
❍ MULTISET 允许记录重复
CREATE MULTISET TABLE table1 ...

数据保护
数据保护要结合FALLBACK和JOURNAL (流水或日志)。
FALLBACK是Teradata的一种数据保护机制，数据表的每一条记录都同时存放
两份，而且位于不同的AMP所控制的存储单元中；当数据发生问题或者AMP失败
时，可以利用存放在其他AMP上的数据保证对数据表的访问。
- FALLBACK 使用FALLBACK保护机制
- NO FALLBACK 不使用FALLBACK保护机制

日志有BEFORE和AFTER两种，分别保存了一条记录变化前后的状态。当系
统出错时，可以利用日志进行恢复。
存储空间选项
DATABLOCKSIZE用来指定数据块大小，最小的数据块为6144字节，最大的
数据块是32256字节。
FREESPACE用来定义在每个磁盘柱面上保留的空间(0-75%)。

例：
CREATE MULTISET TABLE table_1
, FALLBACK, NO JOURNAL
, FREESPACE = 10 PERCENT
, DATABLOCKSIZE = 16384 BYTES
(field1 INTEGER);

 

CONSTRAINT name 约束名称--可选
PRIMARY KEY 非空,无重复值
UNIQUE 无重复值
CHECK <布尔条件> 指定合法值的范围
REFERENCES 与其他字段的相关性(外键)
 
例：
CREATE TABLE employee_badge
(emp_id INTEGER NOT NULL
CONSTRAINT primary_1 PRIMARY KEY
,id_badge_number INTEGER
CONSTRAINT unique_1 UNIQUE
,salary INTEGER
CONSTRAINT check_1 CHECK (salary>0)
,job_code INTEGER
CONSTRAINT ref_1 REFERENCES job (job_code)
);

如在上面的例子中，最后一项定义了在EMPLOYEE_BADGE表中的
JOB_CODE必须和JOB表中的JOB_CODE对应，即前一个表中该字段的值必须在第
二个表中有对应的项。这实际上是一种所谓的参照完整性。另外要注意的是，具有
主键(Primary Key)约束的字段一定要定义为非空(NOT NULL)。

表级约束定义:

Teradata 学习笔记1_第15张图片

表级约束与字段级约束的主要区别是：在表级约束中可以指定当前表的多个
字段或其组合，而字段级约束只能引用当前字段。
 
我们来看一个表级约束的例子。

CREATE TABLE employee_badge
(emp_id INTEGER NOT NULL
,id_badge_num INTEGER NOT NULL
,salary INTEGER
,job_code INTEGER
,CONSTRAINT primary_1 PRIMARY KEY (emp_id)
,CONSTRAINT unique_1 UNIQUE (id_badge_num)
,CONSTRAINT check_1 CHECK (salary > 0 AND
job_code BETWEEN 100000 AND 499999)
,CONSTRAINT ref_1 FOREIGN KEY (job_code)
REFERENCES job (job_code));
 
比较字段级约束和表级约束的例子，可以看到：
字段级约束必须写在每个字段定义的后面，而表级约束是在字段定义结束后
再进行的。在表级约束中，一个约束可以同时定义多个字段。

下面是一个比较复杂的创建表的例子，注意学习。创建该表后用SHOW
TABLE观察一下内部的表达方式。
CREATE MULTISET TABLE emp_data
,FALLBACK
,NO BEFORE JOURNAL
,NO AFTER JOURNAL
,FREESPACE = 30
,DATABLOCKSIZE = 10000 BYTES (
employee_number INTEGER NOT NULL
,department_number SMALLINT
CONSTRAINT dep_check
CHECK (department_number BETWEEN 100 AND 999)
REFERENCES Department (department_number)
,job_code INTEGER COMPRESS
,last_name CHAR(20) NOT NULL
,first_name VARCHAR (20)
,street_address VARCHAR (30) TITLE 'Address'
,city CHAR (15) DEFAULT 'Boise'
COMPRESS Boise'
,state CHAR (2) WITH DEFAULT
,birthdate DATE FORMAT 'mm/dd/yyyy'
,salary_amount DECIMAL (10,2)
,sex CHAR (1) UPPERCASE
,CONSTRAINT emp_key
PRIMARY KEY (employee_number)


) INDEX (department_number);

 删除表:

可以使用DROP TABLE语句删除表，该语句将删除表中的所有数据和在数据
字典中的表结构定义。
例：
删除前面例子中创建的雇员数据表。
DROP TABLE emp_data;
删除了表emp_data中的所有数据，并删除了emp_data在数据字典中的定义。如
果希望在使用这个表，必须重新创建。
例：
DELETE FROM emp_data;

或
DELETE emp_data;
删除了表emp_data中的所有数据。表定义仍然存在，可以增加数据。

修改表:

例：增加或删除字段
ALTER TABLE emp_data
ADD educ_level CHAR(1), ADD insure_type SMALLINT;
ALTER TABLE emp_data
DROP educ_level, DROP insure_type;

例：修改已有字段的属性
ALTER TABLE emp_data
ADD birthdate FORMAT 'mmmBdd,Byyyy'';
 
例：对没有FALLBACK的表建立FALLBACK保护
ALTER TABLE emp_data, FALLBACK;

例：同时修改表的多个属性
ALTER TABLE emp_data
, NO FALLBACK
DROP insure_type
, ADD educ_level CHAR(1);
 
例：修改约束定义
增加约束
ALTER TABLE emp_data
ADD CONSTRAINT
CHECK (sex = 'F' OR sex = 'M');

修改约束:
ALTER TABLE emp_data
MODIFY CONSTRAINT sal_range
CHECK ( salary_amount > 0 AND salary_amount < 1000000);
 
注意：表中已有数据如果不符合新的约束条件，约束的增加或修改不能成
功。
删除约束：
ALTER TABLE emp_data
DROP CONSTRAINT sal_range;

次索引:

主索引只能在CREATE TABLE时定义，而次索引既可以在创建表时定义，也
可以使用CREATE INDEX来定义。

例：为雇员表创建下面两个次索引。
为雇员名字建立命名的唯一次索引USI
CREATE UNIQUE INDEX fullname (last_name, first_name)
ON emp_data;
 
为工作代码建立非唯一性次索引NUSI，不命名NUSI
CREATE INDEX (job_code) ON emp_data;

例：显示表emp_data上的所有索引。
HELP INDEX emp_data;

 当次索引创建后，也可以利用DROP INDEX来删除它们。注意，只有次索引
可以被删除，主索引是不能被删除的。
当删除命名索引时，可以只指定索引名称，也可以指定索引定义。而删除未
命名索引时，必须指定索引定义。

例：删除雇员表的所有次索引
删除命名索引
DROP INDEX FullName ON emp_data;
 
删除未命名索引
DROP INDEX (job_code) ON emp_data;

数据操作:

INSERT语句用于向表中添加一行或多行记录。插入一行记录的命令格式为：
INSERT INTO <表名> (列名1，列名2,...,列名n)
VALUES (列值表达式1，列值表达式2, ...,列值表达式n);
 
例：在雇员表中添加一新雇员信息：
INSERT INTO employee (last_name, first_name, hire_date, birthdate,
salary_amount, employee_number)
VALUES(  arcia',  aria',861027,541110,76500.00,1291);

如果添加整条记录，即给每个字段都有相应的值，则表名后的字段名可以省
略。如上面的例子可以改写成：
INSERT INTO employee
VALUES (1210,NULL,401,41201,  mith',  ames',890303,460421,41000);

Teradata对INSERT作了扩充，增加了一个称为INSERT-SELECT的功能。它以
子查询的方式将一个表的数据抽取并插入到另一个表中。举例来说，假设表
emp_copy与表emp的结构相同，下面的语句可以把表emp的所有行添加到表
emp_copy中，即复制表emp。
INSERT INTO emp_copy
SELECT * FROM emp;

INSERT-SELECT也可以将不同结构表的记录添加到目标表中。例如，我们创
建一张雇员生日表：
CREATE TABLE birthdays
(empno INTEGER NOT NULL
, lname CHAR(20) NOT NULL
, fname VARCHAR(30)
, birth DATE)
UNIQUE PRIMARY INDEX(empno);
 
然后，我们从雇员表中提取生日信息添加到生日表中。
INSERT INTO birthdays
SELECT employee_number ,last_name, first_name, birthdate
FROM employee;

update:

UPDATE语句用来更新表内满足条件的数据记录，基本语法为：
UPDATE <表名>
SET <列名1>=<列值表达式1>
,<列名2> = <列值表达式2>
, ...
,<列名n>=<列值表达式n>
WHERE <条件子句>;

DELETE:

DELETE删除表中满足条件的记录，基本语法为：
DELETE FROM <表名>
WHERE <条件子句>;

交易完整性:

我们在这章介绍了对数据库记录的更新、插入和删除。试想一下，如果某个
数据库的更新操作在进行到一半时系统产生问题，如突然停电等，交易的完整性是
否能得到保证？
在Teradata中，系统将保证一个交易的完整。怎样才算是一个交易呢，在
Teradata中，根据其所处方式的不同在处理时也有所不同。在Teradata缺省模式下，
以分号结束的每个SQL语句都是一个完整的交易，也可以使用BT (Begin
Transaction)和ET (End Transaction)来显示地定义一个交易。下面看一个例子：

例：
缺省方式
.LOGON
INSERT row1; (txn #1)
INSERT row2; (txn #2)
.LOGOFF
用BT和ET显示定义交易
.LOGON
BT;
INSERT row1; (txn #1)
INSERT row2;
COMMIT WORK;
ET;
.LOGOFF

第一部分中有两个SQL语句，用分号结束，表示两个交易，任何一个失败不会
影响另一个的执行。而第二部分用BT和ET显示地规定：在BT和ET之间的所有SQL
是一个交易，只有最后的COMMIT WORK执行成功后，才会真正地更新数据库。
执行过程中任何一个SQL语句失败，都会使整个交易失败，系统将自动进行恢复
(Rollback)处理。

在ANSI方式下，必须进行显示地提交才能完成一个交易。换言之，执行多个
数据记录插入动作后，如果不显示提交就退出，则这些插入动作都将Rollback。
.LOGON
INSERT row1; (txn #1)
INSERT row2;
.LOGOFF

没有显示提交就退出，两个INSERT将Rollback
.LOGON
INSERT row1; (txn #1)
INSERT row2;
COMMIT WORK;
.LOGOFF
显示提交，两个INSERT作为一个交易，要么完全成功，要么两个都失败。

参数宏:

所谓参数宏，是指在宏中包含可以替代值的变量。下面是一个简单的参数宏
定义：
CREATE MACRO dept_list(dept INTEGER)
AS
( SELECT last_name
FROM employee
WHERE department_number = :dept );
 
该宏的功能是在雇员表中选取某个部门全部雇员的姓，宏dept_list定义了一个
参数dept，类型是整数。作为部门代码参数。

运行宏dept_list的语句为：
EXEC dept_list(301);

其结果是返回部门编号为301的所有雇员的姓。
如同这个简单的例子，参数在宏中的引用是通过冒号(:) +参数名而实现的。

多参数宏:

参数宏可以包含多个参数，每个参数可以定义各自的类型和属性。我们通过
参数宏new_dept来介绍多参数宏的创建和运行。
宏new_dept的功能是向部门表添加一行数据，每个字段的值通过参数传递；然
后，显示添加的部门信息。具体的宏定义如下：

CREATE MACRO new_dept
(dept INTEGER
,budget DEC(10,2) DEFAULT 0
,name CHAR(30)
,mgr INTEGER)
AS
( INSERT INTO department
(department_number
,department_name
,budget_amount
,manager_employee_number)
VALUES( :dept
,:name
,:budget
,:mgr);

SELECT department_number (TITLE 'number')
,department_name (TITLE 'name')
,budget_amouunt (TITLE 'budget')
,manager_employee_number (TITLE 'manager')
FROM department
WHERE department_number = :dept;
);

利用宏实现参照完整性:

这里用一个例子来说明。
CREATE MACRO new_employee
( number INTEGER
,MGR INTEGER
,dept INTEGER
,job INTEGER
,lastname CHAR (20)
,firstname VARCHAR (30)

,hired DATE
,birth DATE
,salary DECIMAL (10, 2))
AS
(ROLLBACK WORK `Invalid Hire'
WHERE (:hired - :birth) / 365 > 21;
ROLLBACK WORK `Invalid Department'
WHERE :dept NOT IN
(SELECT department_number
FROM department
WHERE department_number = :dept);
ROLLBACK WORK `Invalid Job Code'
WHERE :job NOT IN
(SELECT job_code
FROM job
WHERE job_code = :job);
INSERT INTO employee

( employee_number
,manager_employee_number
,department_number
,job_code
,last_name
,first_name
,hire_date
,birthdate
,salary_amount )
VALUES
( :number
, :mgr
, :dept
, :job

, :lastname
, :firstname
, :hired
, :birth
, :salary );
);

利用这个宏来录入新雇员时，必须满足如下条件：
! 受雇时应年满21岁
! 应有一个合法的部门编号
! 应有一个合法的工作代码

实际上，在创建表时也可以定义参照完整性(约束)，如：
CREATE TABLE employee
(employee_number INTEGER
, ......
,salary_amount DECIMAL (10,2)
,CHECK (hire_date - birthdate) /365 < 21)
,FOREIGN KEY (department_number)
REFERENCES department (department_number)
,FOREIGN KEY (job_code)
REFERENCES job (job_code)
);

 

你可能感兴趣的:(Teradata)

  • 案例分享｜快速了解实时湖仓集一体技术如何助力企业降本增效 mysql
    1.替代TD仓、Hadoop湖，助力农商行构建一体化数据平台某农商行最初构建了Teradata数据仓库、Oracle小数据平台以及Hadoop数据湖。多平台混合架构开发运维高，存在冗余存储、数据搬迁一致性、跨平台流转数据实时性低等问题。该农商行基于星环科技实时湖仓集一体平台，替代了Teradata数仓、Oracle数据平台和Hadoop数据湖三个平台，一体化架构同时满足数据湖海量汇集、复杂数仓模型
  • 通过DBeaver连接Phoenix操作hbase 不想做咸鱼的王富贵
    通过DBeaver连接Phoenix操作hbase前言本文介绍常用一种通用数据库工具Dbeaver，DBeaver可通过JDBC连接到数据库，可以支持几乎所有的数据库产品，包括：MySQL、PostgreSQL、MariaDB、SQLite、Oracle、Db2、SQLServer、Sybase、MSAccess、Teradata、Firebird、Derby等等。商业版本更是可以支持各种NoSQ
  • Azkaban各种类型的Job编写 __元昊__
    一、概述原生的Azkaban支持的plugin类型有以下这些：command：Linuxshell命令行任务gobblin：通用数据采集工具hadoopJava：运行hadoopMR任务java：原生java任务hive：支持执行hiveSQLpig：pig脚本任务spark：spark任务hdfsToTeradata：把数据从hdfs导入TeradatateradataToHdfs：把数据从Te
  • laravel监听mysql查询，打印语句 道甚夷 php框架laravelmysqlandroid
    functionget_last_sql(){//Registeradatabasequerylistenerwiththeconnection.DB::listen(function($sql){$query=$sql->sql;if($sql->bindings){foreach($sql->bindingsas$replace){$value=is_numeric($replace)?$re
  • 一文解决SQL查询中关于NULL的陷阱 PawSQL mysqlpostgresql数据库开发sql性能优化
    一文解决SQL查询中关于NULL的陷阱NULL值处理是应用开发人员最容易出错误的地方，主要的原因是大家习惯使用二元的布尔逻辑来思考判断，而数据库对于NULL值的处理逻辑是三值逻辑。事实上，数据库优化器中缺陷最多的其实也是和NULL值处理相关的逻辑。即使是有着几十年历史的DB2/Teradata等成熟的数据库软件，仍然有超过20%的缺陷和NULL处理相关。本文深度解析NULL值陷阱出现的根本原因，总
  • UnWallet数字钱包 快乐每一天_72a8
    1、UNWALLET是什么？UNWALLET是一款数字货币手机轻钱包，作为币圈玩家数字货币的储存方式有两种，第一种储存在钱包，第二种就是放在交易所例如OKEX、火币等2、UNWALLET是哪里的项目？UnWallet是由Unwallet基金会，美国BlueMoutainCapital,美国Teradata技术团队等在全球范围内联合发起，运营的首个区块链项目管理大生态平台。蓝山资本实力是非常强的，还
  • Teradata & KADB数据库对象兼容说明(一） littlegirll 数据库
    兼容说明本文从Teradata和KADB的数据类型、函数、DDL语句三个方面说明列举两个产品的兼容情况，以此分析从Teradata迁移至KADB的可行性。Teradata数据类型兼容数据类型及兼容性注：不兼容的数据类型标注为：X数据类型是否ANSI扩展KADBArrayARRAY/VARRAY是[]ByteBLOB[(n)]是textBYTE[(n)]byteaVARBYTE[(n)]bitvar
  • Teradata & KADB数据库对象兼容说明(二） littlegirll 数据库javajvm
    Teradata和KADB表兼容Teradata和KADB创建表语句及表的结构差异较大，迁移时需要进行DML语句的人工修改和校验，以下为建表语句的差异对比说明及详细介绍。TeradataKADB表类型volatile(内存中），persistent(磁盘中)MULTISET：允许数据重复SET：不允许数据重复persistent数据分布使用MAP机制hash、random、replication数
  • tpc-h tpc-ds 数据生成--postgresql templarzq
    1.修改makefile#makefile.suite的更改参数如下CC=gcc#CurrentvaluesforDATABASEare:INFORMIX,DB2,TDAT(Teradata)#SQLSERVER,SYBASE,ORACLE,VECTORWISE#CurrentvaluesforMACHINEare:ATT,DOS,HP,IBM,ICL,MVS,#SGI,SUN,U2200,VMS
  • 有用的技术分享主题 weixin_30777913 sqlserver数据库数据仓库bigdataetl
    SQLServer数据库和AgentJob集成化监控工具Airflow调度工具的安装和使用Tableau报表开发网络爬虫技术开发PythonGUI应用开发基于S3的数据湖架构设计和大数据开发Hive大数据仓库超大数据集去重解决方案Teradata和SQLServer数据库之间大量数据压缩传输解决方案数据治理Concur报销系统的配置和维护ETL开发、优化和运维总结任何与C++、C#、SQL、Pyt
  • Teradata数据库和Informatica ETL逻辑及视图、用户定义函数和存储过程迁移到AWS的Hive数据仓库基本流程 weixin_30777913 笔记
    首先，我们需要注册AWS帐号，并启用EC2（ElasticCloudComputing，高性能云计算）、EMR（ElasticMap-Reduce，高性能大数据计算）、Redshift/Snowflake数据仓库和S3（SimpleStorageService，简单存储服务）、DevOps（用于Github持续集成）和GithubEnterprise这些服务。其次，我们需要梳理清楚Teradata
  • 2020-07-14 木星_288b
    规模化定制能力，是BI之战的制胜关键商业智能（BI），核心在于对数据的敏捷式、可视化探索分析。具体到技术环节，包括数据仓库、ETL、OLAP、数据挖掘、数据可视化这几个方面。大体上来看，BI可分为传统BI和敏捷BI。传统BI在数据仓库、ETL、OLAP这几个方面的性能很强，但这类产品的致命缺点是分析模式比较固定，改动起来很困难，比较笨重，Cognos、SAP、Oracle、Teradata、Mic
  • GBASE南大通用-Teradata迁移到GBase 8a解决方案 GBASE数据库 数据库GBASE南大通用GBASE
    GBASE南大通用自主研发的GBase8aMPP(GBaseUPLDW)分布式逻辑数据仓库，已经完成了100+用户TeraData等国外数据库替换迁移。通过众多项目的PoC及后续签约的实施，在替换Teradata产品方面，GBase8a积累了丰富的实施经验，形成了一套完整的迁移实施方案，可快速复制推广，实现由teradata到GBase8a的高精准迁移。下面根据GBase8a的迁移经验，从上到下对
  • GBASE南大通用-TeraData迁移GBase 8a PoC实践 GBASE数据库 数据库GBASE南大通用GBASE
    数据库迁移，考察的是数据库厂商的配套工具、方法论、实施经验，不仅仅要求转换成功率高，转换效率高，也要求转换后可执行，执行结果要准确。近几年，GBase完成了100+用户TeraData等国外数据库替换迁移，积累了多个项目的迁移经验，以转换高、精、准而收到合作伙伴或厂商的好评。以2022年某金融用户的POC测试为例：转换内容包括DDL、视图、批量Perl脚本，转换的数量在PoC中也是算是偏多的，包括
  • 大数据发展历程及技术选型 平凡人笔记 平凡人笔记
    大数据发展历程第一阶段2000年-2010年数仓提供方企业级数据仓库（EDW）IOT(IBM、Oracle、Teradata)提供数据仓库建设从硬件、软件到实施的整体方案需要购买大（中、小）型机 配套商用的关系型数据库（Oracle、DB2、SQL Server）以及一些ETL/OLAP套件使用范围实施成本高昂 集中在金融、电信、大型零售与制造等行业作用为企业提供报表、分析等数据辅助企业的经营决策
  • 大数据四大阵营之OLTP阵营（上） Ultipa 老孙解密大数据数据库大数据数据挖掘神经网络机器学习
    **一|大数据的四大阵营是什么？**·OLTP（在线事务、交易处理）：RDBMS、NoSQL、NewSQL·OLAP（在线分析处理）：MapReduce、Hadoop、Spark等·MPP（大规模并行处理）：Greenplum、TeradataAster等·流数据管理：CEP/Esper、Storm、Spark、Stream、Flume等二|OLTP阵营OLTP阵营可以分为：·传统的关系型数据库·
  • 【金猿投融展】HashData ——致力于降低企业进行大数据分析的门槛，推动数据民主化... 数据猿 数据分析大数据数据仓库数据挖掘
    ‍投融资项目·HashData本项目由HashData投递并参与“数据猿年度金猿策划活动——《2022大数据产业年度创新服务企业》榜单/奖项”评选。‍数据智能产业创新服务媒体——聚焦数智·改变商业HashData成立于2016年2月，是一家专注于云端数据仓库的初创公司，是数字经济和实体经济融合发展的典型代表。核心团队主要由Pivotal、Teradata、IBM、Yahoo!、Oracle和华为等
  • hive窗口函数——ROW_NUMBER()来去重，和rank()、dense_rank()的区别与teradata中row_number()去重 yyf960126 hive数据库
    原文：https://www.cnblogs.com/wujin/p/6051768.htmlrow_number()、rank()、dense_rank()三个函数相当于groupby之后再来个orderby上实例idnamesal1a102a123b134b125a146a157a138b119a1610b1711a14三个函数selectid,name,sal,rank()over(part
  • 如何从Oracle迁移到Greenplum 第一篇 Greenplum中文社区 数据库网络大数据分布式编程语言
    众所周知，基础数据平台的迁移非常复杂。今天起，我们将陆续为大家推送系列干货内容——《如何从Oracle迁移到Greenplum》，详细介绍产品对比，迁移场景，迁移步骤，以及一些特殊场景的注意点，手把手教大家做迁移。从传统的单机数据库迁移到分布式数据库，这些原则也仍然适用，很多用户都成功的从Oracle、Teradata、DB2、SybaseIQ、Hadoop等平台迁移到了Greenplum。1综述
  • 金融行业数据模型 苡~ 011-数据仓库金融数据库数据仓库
    一、TeradataFS-LDMTeradata公司基于金融业务发布的FS-LDM（FinancialServiesLogicalDataModel）十大主题：当事人、产品、协议、事件、资产、财务、机构、地域、营销、渠道。1、当事人（Party）银行所服务的任意对象和感兴趣进行分析的各种对象。如个人或公司客户、潜在客户、代理机构、雇员、分行、部门等。一个PARTY可以同时是这当中许多种角色。2、产
  • rogabet notepad 编译方式优化 rogabet-note pythonpython
    pyinstaller--clean--version-file=file_version_info.txt-iluo.ico-D-wnotepad.py--exclude-modulecv2--exclude-moduletables--exclude-modulescipy--exclude-modulepygame--exclude-moduleteradatasql--exclude-mo
  • Sql语句转Linq——Linqer工具 MonkeyBananas C#linqsql数据库
    官方下载网站：http://www.sqltolinq.com/下载完成后进行安装：这里的ConnectionString你可以直接填写，也可以点击最右边的三个点，里面可以去配置生成连接字符串。最后一项**Selectorenteradatabasename:**就是你要配置的数据库名称。我这里是自己配置的，如下图：配置好后点击OK，ConnectionString就会自动生成了。然后点击图一中的
  • 云数据库知识学习——云数据库产品、云数据库系统架构 枫叶丶PJ 数据库数据库云数据库UMP
    一、云数据库产品1.1、云数据库厂商概述云数据库供应商主要分为三类。①传统的数据库厂商，如Teradata、Oracle、IBMDB2和MicrosoftSQLServer等。②涉足数据库市场的云供应商，如Amazon、Google、Yahoo!、阿里、百度、腾讯等。③新兴厂商，如Vertica、LongJump和EnterpriseDB等。市场上常见的云数据库产品见表6-3。1.2、Amazon
  • python实现数据仓库ETL dsqzhong python数据仓库数据库
    python实现数据仓库ETL通常讲的数据仓库ETL,可以分为ETL和ELT两种实现方式.ELT是在加载到仓库后,再做数据转换.ETL是在加载之前完成转换,落地的数据就是转换后的样子了.ELT多使用在MPP架构的数据仓库平台上,比如Teradata,greenplum,主要考虑点是,MPP数据仓库数据处理能力强,在加载后再做转换,可以充分利用这一优势.另外,Extract和Load过程很简单,且数
  • 数据库原理解释 Zal哥哥
    一提到关系型数据库，我禁不住想：有些东西被忽视了。关系型数据库无处不在，而且种类繁多，从小巧实用的SQLite到强大的Teradata。但很少有文章讲解数据库是如何工作的。你可以自己谷歌/百度一下『关系型数据库原理』，看看结果多么的稀少【译者注：百度为您找到相关结果约1,850,000个…】，而且找到的那些文章都很短。现在如果你查找最近时髦的技术（大数据、NoSQL或JavaScript），你能找
  • Teradata初体验 苍秋寒冬
    最近开始正式实习了，公司是Teradata,自然第一项就是学习Teradata数据库了。一，启动Teradata服务器首先是环境搭建，去Teradata官网下载安装包，已经封装在好，下完用vm打开.vmx的虚拟机即可。打开以后，用户名和密码都是root，进入系统以后，查看虚拟机IP地址：#ifconfig记住inetaddr：153.65.129.137，后面会用到。此时Teradata服务器已经
  • 08.常用的时间函数 唐人三藏
    一、teradata相关的日期函数1.可以使用date或者cast，将字符串改为日期类型2.extract选取年月日例如：extract(yearfrom日期字段)从日期中取出年，取出月，日则分别为month,day3.interval增减年、月、日例如：extract(yearfromcurrent_date+interval‘01’Year)返回当前年加1年的年份4.teradata日期类型数
  • teradata建表DDL felix521
    ●是否允许重复记录❍SET不允许记录重复CREATESETTABLEtable1...❍MULTISET允许记录重复CREATEMULTISETTABLEtable1...●数据保护数据保护要结合FALLBACK和JOURNAL(流水或日志)。FALLBACK是Teradata的一种数据保护机制，数据表的每一条记录都同时存放两份，而且位于不同的AMP所控制的存储单元中；当数据发生问题或者AMP失败
  • 数据中台Citus集群压测报告 PGCCC 数据库
    作者简介：迪颉科技是专注于企业数字化转型数据价值及数据治理，并在大数据、数据中台（零售、制造行业）、dataops/数仓以及数据驱动的应用等，提供专业解决方案的团队。在以往外企的从业经验中，将原来的Teradata等数仓大数据的模型/脚本/数据迁移到hadoop/HTAP开放平台，提供工具链和专业的服务及相关的解决方案。测试时间及人员：测试时间：2022/9/12~2022/09/23测试人员：迪
  • 使用IBM InfoSphere Guardium监视和审计IBM DB2 for i数据库活动 cusi77914 数据库pythonlinuxmysqljava
    总览InfoSphereGuardium是企业信息数据库审核和保护解决方案，可帮助企业跨各种关系和非关系数据源（例如Oracle，Teradata，IMS，VSAM，MicrosoftSharePoint，IBMNetezza和DB2forz/OS）保护和审核信息。以及适用于Linux，UNIX和Windows的DB2。借助InfoSphereGuardiumV9.0，现在可以将DB2fori包含
  • 用MiddleGenIDE工具生成hibernate的POJO（根据数据表生成POJO类） AdyZhang POJOeclipseHibernateMiddleGenIDE
    推荐:MiddlegenIDE插件,   是一个Eclipse   插件.     用它可以直接连接到数据库,   根据表按照一定的HIBERNATE规则作出BEAN和对应的XML ，用完后你可以手动删除它加载的JAR包和XML文件!     今天开始试着使用
  • .9.png Cb123456 android
      “点九”是andriod平台的应用软件开发里的一种特殊的图片形式，文件扩展名为：.9.png 　　智能手机中有自动横屏的功能,同一幅界面会在随着手机(或平板电脑)中的方向传感器的参数不同而改变显示的方向,在界面改变方向后,界面上的图形会因为长宽的变化而产生拉伸,造成图形的失真变形。 　　我们都知道android平台有多种不同的分辨率，很多控件的切图文件在被放大拉伸后，边
  • 算法的效率 天子之骄 算法效率复杂度最坏情况运行时间大O阶平均情况运行时间
    算法的效率 效率是速度和空间消耗的度量。集中考虑程序的速度，也称运行时间或执行时间，用复杂度的阶(O)这一标准来衡量。空间的消耗或需求也可以用大O表示，而且它总是小于或等于时间需求。   以下是我的学习笔记：   1.求值与霍纳法则，即为秦九韶公式。   2.测定运行时间的最可靠方法是计数对运行时间有贡献的基本操作的执行次数。运行时间与这个计数成正比。
  • java数据结构 何必如此 java数据结构
    Java 数据结构 Java工具包提供了强大的数据结构。在Java中的数据结构主要包括以下几种接口和类： 枚举（Enumeration） 位集合（BitSet） 向量（Vector） 栈（Stack） 字典（Dictionary） 哈希表（Hashtable） 属性（Properties） 以上这些类是传统遗留的，在Java2中引入了一种新的框架-集合框架(Collect
  • MybatisHelloWorld 3213213333332132
    //测试入口TestMyBatis package com.base.helloworld.test; import java.io.IOException; import org.apache.ibatis.io.Resources; import org.apache.ibatis.session.SqlSession; import org.apache.ibat
  • Java|urlrewrite|URL重写|多个参数 7454103 javaxmlWeb工作
     个人工作经验！ 如有不当之处，敬请指点 1.0  web -info 目录下建立     urlrewrite.xml  文件 类似如下： <?xml version="1.0" encoding="UTF-8" ?>   <!DOCTYPE u
  • 达梦数据库+ibatis darkranger sqlmysqlibatisSQL Server
    --插入数据方面 如果您需要数据库自增... 那么在插入的时候不需要指定自增列. 如果想自己指定ID列的值, 那么要设置 set identity_insert  数据库名.模式名.表名; ----然后插入数据; example: create table zhabei.test( id bigint identity(1,1) primary key, nam
  • XML 解析 四种方式 aijuans android
    XML现在已经成为一种通用的数据交换格式,平台的无关性使得很多场合都需要用到XML。本文将详细介绍用Java解析XML的四种方法。 XML现在已经成为一种通用的数据交换格式,它的平台无关性,语言无关性,系统无关性,给数据集成与交互带来了极大的方便。对于XML本身的语法知识与技术细节,需要阅读相关的技术文献,这里面包括的内容有DOM(Document Object
  • spring中配置文件占位符的使用 avords
    1.类 <?xml version="1.0" encoding="UTF-8"?><!DOCTYPE beans PUBLIC "-//SPRING//DTD BEAN//EN" "http://www.springframework.o
  • 前端工程化-公共模块的依赖和常用的工作流 bee1314 webpack
    题记： 一个人的项目，还有工程化的问题嘛？   我们在推进模块化和组件化的过程中，肯定会不断的沉淀出我们项目的模块和组件。对于这些沉淀出的模块和组件怎么管理？另外怎么依赖也是个问题？ 你真的想这样嘛？   var BreadCrumb = require(‘../../../../uikit/breadcrumb’); //真心ugly。  
  • 上司说「看你每天准时下班就知道你工作量不饱和」，该如何回应？ bijian1013 项目管理沟通IT职业规划
    问题：上司说「看你每天准时下班就知道你工作量不饱和」，如何回应         正常下班时间6点，只要是6点半前下班的，上司都认为没有加班。   Eno-Bea回答，注重感受，不一定是别人的         虽然我不知道你具体从事什么工作与职业，但是我大概猜测，你是从事一项不太容易出现阶段性成果的工作
  • TortoiseSVN，过滤文件 征客丶 SVN
    环境： TortoiseSVN 1.8 配置： 在文件夹空白处右键 选择  TortoiseSVN -> Settings 在 Global ignote pattern 中添加要过滤的文件： 多类型用英文空格分开 *name ： 过滤所有名称为 name 的文件或文件夹 *.name ： 过滤所有后缀为 name 的文件或文件夹 --------
  • 【Flume二】HDFS sink细说 bit1129 Flume
    1. Flume配置   a1.sources=r1 a1.channels=c1 a1.sinks=k1 ###Flume负责启动44444端口 a1.sources.r1.type=avro a1.sources.r1.bind=0.0.0.0 a1.sources.r1.port=44444 a1.sources.r1.chan
  • The Eight Myths of Erlang Performance bookjovi erlang
    erlang有一篇guide很有意思： http://www.erlang.org/doc/efficiency_guide 里面有个The Eight Myths of Erlang Performance： http://www.erlang.org/doc/efficiency_guide/myths.html   Myth: Funs are sl
  • java多线程网络传输文件(非同步)-2008-08-17 ljy325 java多线程socket
    利用 Socket 套接字进行面向连接通信的编程。客户端读取本地文件并发送；服务器接收文件并保存到本地文件系统中。 使用说明:请将TransferClient, TransferServer, TempFile三个类编译，他们的类包是FileServer. 客户端: 修改TransferClient: serPort, serIP, filePath, blockNum,的值来符合您机器的系
  • 读《研磨设计模式》-代码笔记-模板方法模式 bylijinnan java设计模式
    声明： 本文只为方便我个人查阅和理解，详细的分析以及源代码请移步 原作者的博客http://chjavach.iteye.com/ import java.sql.Connection; import java.sql.DriverManager; import java.sql.PreparedStatement; import java.sql.ResultSet;
  • 配置心得 chenyu19891124 配置
    时间就这样不知不觉的走过了一个春夏秋冬，转眼间来公司已经一年了，感觉时间过的很快，时间老人总是这样不停走，从来没停歇过。 作为一名新手的配置管理员，刚开始真的是对配置管理是一点不懂，就只听说咱们公司配置主要是负责升级，而具体该怎么做却一点都不了解。经过老员工的一点点讲解，慢慢的对配置有了初步了解，对自己所在的岗位也慢慢的了解。 做了一年的配置管理给自总结下： 1.改变 从一个以前对配置毫无
  • 对“带条件选择的并行汇聚路由问题”的再思考 comsci 算法工作软件测试嵌入式领域模型
    2008年上半年，我在设计并开发基于”JWFD流程系统“的商业化改进型引擎的时候，由于采用了新的嵌入式公式模块而导致出现“带条件选择的并行汇聚路由问题”(请参考2009-02-27博文)，当时对这个问题的解决办法是采用基于拓扑结构的处理思想，对汇聚点的实际前驱分支节点通过算法预测出来，然后进行处理，简单的说就是找到造成这个汇聚模型的分支起点，对这个起始分支节点实际走的路径数进行计算，然后把这个实际
  • Oracle 10g 的clusterware 32位 下载地址 daizj oracle
    Oracle 10g 的clusterware 32位 下载地址 http://pan.baidu.com/share/link?shareid=531580&uk=421021908 http://pan.baidu.com/share/link?shareid=137223&uk=321552738 http://pan.baidu.com/share/l
  • 非常好的介绍：Linux定时执行工具cron dongwei_6688 linux
    Linux经过十多年的发展，很多用户都很了解Linux了，这里介绍一下Linux下cron的理解，和大家讨论讨论。cron是一个Linux 定时执行工具，可以在无需人工干预的情况下运行作业，本文档不讲cron实现原理，主要讲一下Linux定时执行工具cron的具体使用及简单介绍。 新增调度任务推荐使用crontab -e命令添加自定义的任务（编辑的是/var/spool/cron下对应用户的cr
  • Yii assets目录生成及修改 dcj3sjt126com yii
    assets的作用是方便模块化，插件化的，一般来说出于安全原因不允许通过url访问protected下面的文件，但是我们又希望将module单独出来，所以需要使用发布，即将一个目录下的文件复制一份到assets下面方便通过url访问。 assets设置对应的方法位置 \framework\web\CAssetManager.php   assets配置方法 在m
  • mac工作软件推荐 dcj3sjt126com mac
    mac上的Terminal + bash ＋ screen组合现在已经非常好用了，但是还是经不起iterm＋zsh＋tmux的冲击。在同事的强烈推荐下，趁着升级mac系统的机会，顺便也切换到iterm＋zsh＋tmux的环境下了。 我为什么要要iterm2 切换过来也是脑袋一热的冲动，我也调查过一些资料，看了下iterm的一些优点： * 兼容性好，远程服务器 vi 什么的低版本能很好兼
  • Memcached(三)、封装Memcached和Ehcache frank1234 memcachedehcachespring ioc
    本文对Ehcache和Memcached进行了简单的封装，这样对于客户端程序无需了解ehcache和memcached的差异，仅需要配置缓存的Provider类就可以在二者之间进行切换，Provider实现类通过Spring IoC注入。 cache.xml <?xml version="1.0" encoding="UTF-8"?>
  • Remove Duplicates from Sorted List II hcx2013 remove
    Given a sorted linked list, delete all nodes that have duplicate numbers, leaving only distinct numbers from the original list. For example,Given 1->2->3->3->4->4->5,
  • Spring4新特性——注解、脚本、任务、MVC等其他特性改进 jinnianshilongnian spring4
    Spring4新特性——泛型限定式依赖注入 Spring4新特性——核心容器的其他改进 Spring4新特性——Web开发的增强 Spring4新特性——集成Bean Validation 1.1(JSR-349)到SpringMVC  Spring4新特性——Groovy Bean定义DSL Spring4新特性——更好的Java泛型操作API  Spring4新
  • MySQL安装文档 liyong0802 mysql
      工作中用到的MySQL可能安装在两种操作系统中，即Windows系统和Linux系统。以Linux系统中情况居多。   安装在Windows系统时与其它Windows应用程序相同按照安装向导一直下一步就即，这里就不具体介绍，本文档只介绍Linux系统下MySQL的安装步骤。   Linux系统下安装MySQL分为三种：RPM包安装、二进制包安装和源码包安装。二
  • 使用VS2010构建HotSpot工程 p2p2500 HotSpotOpenJDKVS2010
    1. 下载OpenJDK7的源码：      http://download.java.net/openjdk/jdk7      http://download.java.net/openjdk/      2. 环境配置     ▶
  • Oracle实用功能之分组后列合并 seandeng888 oracle分组实用功能合并
    1       实例解析 由于业务需求需要对表中的数据进行分组后进行合并的处理，鉴于Oracle10g没有现成的函数实现该功能，且该功能如若用JAVA代码实现会比较复杂，因此，特将SQL语言的实现方式分享出来，希望对大家有所帮助。如下： 表test 数据如下： ID,SUBJECTCODE,DIMCODE,VALUE 1&nbs
  • Java定时任务注解方式实现 tuoni javaspringjvmxmljni
    Spring 注解的定时任务，有如下两种方式： 第一种： <?xml version="1.0" encoding="UTF-8"?> <beans xmlns="http://www.springframework.org/schema/beans"  xmlns:xsi="http
  • 11大Java开源中文分词器的使用方法和分词效果对比 yangshangchuan word分词器ansj分词器Stanford分词器FudanNLP分词器HanLP分词器
    本文的目标有两个： 1、学会使用11大Java开源中文分词器 2、对比分析11大Java开源中文分词器的分词效果 本文给出了11大Java开源中文分词的使用方法以及分词结果对比代码，至于效果哪个好，那要用的人结合自己的应用场景自己来判断。 11大Java开源中文分词器，不同的分词器有不同的用法，定义的接口也不一样，我们先定义一个统一的接口： /** * 获取文本的所有分词结果, 对比