如何解决复制没有表结构的Redshift
我想通过复制指令将S3的加载表从S3加载到Redshift,然后选择一些字段并创建最终表,但是我不知道如何在不了解所有结构的情况下从s3加载文件。 / p>
让我举例说明:
我的文件在s3中
col1 col2 col3
a 1 b
b 4 c
我想要仅带有col2的决赛桌,所以我执行以下操作:
CREATE TEMPORARY TABLE stg(col1 varchar,col2 integer,col3 varchar);
COPY stg FROM myfile
CREDENTIALS
'aws_access_key_id=***;aws_secret_access_key=***'
NULL as '' IGNOREHEADER AS 1
;
create table FINAL as
select
col2
from stg
并且我想要类似的东西(所以我不需要知道结构,只需要它有col2即可):
CREATE TEMPORARY TABLE stg as (
COPY stg FROM myfile
CREDENTIALS
'aws_access_key_id=***;aws_secret_access_key=***'
NULL as '' IGNOREHEADER AS 1
);
create table FINAL as
select
col2
from stg
解决方法
您正在执行正确的过程。
通过COPY
命令加载数据时,无法“跳过”列。
另一种选择是在将数据加载到Redshift之前 预处理文件并删除不需要的列。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。