hdfs文件复制方法

hdfs文件复制,并拷贝修复数据

-- 1、复制表结构
create table  t1 like t2;
-- 2、复制文件数据
hadoop distcp -update -skipcrccheck -m 300 hdfs://ns1/warehouse/ods.db/t2 hdfs://ns1/warehouse/bkdata.db/t1
-- 3、修复表元数据
msck repair table t1

hdfs 加载数据

-- 1、创建新表
use db1;
create table db1.test_02_20210223(
name string,
age integer) 
row format delimited 
fields terminated by '\t' 
lines terminated by '\n' 
stored as textfile 
-- 2、load数据
load data local INPATH '/soft/data/data1.txt' INTO TABLE db1.test_02_20210223 ;
-- 3、 查看加载结果
select * from db1.test_02_20210223

你可能感兴趣的:(数据仓库,hdfs,hadoop)