标签: amazon-redshift

如何在红移中进行GROUP BY和CONCATENATE字段,例如,如果我有桌子

ID   COMPANY_ID   EMPLOYEE
1    1            Anna
2    1            Bill
3    2            Carol
4    2            Dave

我怎样才能得到这样的结果

COMPANY_ID   EMPLOYEE
1            Anna, Bill
2            Carol, Dave

有一些解决方案PostgreSQL,但在Redshift righnow中没有提供答案中提到的功能.

pg_tables提供了一个表列表.是否有pg_columns或其等价物来提供列表列表？

在DB2中,我将查询sysibm.systables/columns以获取此类信息.红移中的等价物是什么？

是否可以选择使用标题将CSV加载到Redshift中？我看到了CSV的文档,但它没有说明标题.理想情况下,它可以使用标头来确定要加载的列.

由于Redshift不支持ALTER COLUMN,我想知道是否可以从Redshift中的列中删除NOT NULL约束.

我有点评估Athena和Redshift Spectrum.两者都有相同的用途,Spectrum需要一个Redshift集群,而Athena则是纯无服务器集群.Athena使用Presto和Spectrum使用其Redshift的引擎

雅典娜或红移谱有任何特殊的缺点吗？使用Athena或Spectrum的任何限制？

我正在尝试将一些MySQL表迁移到Amazon Redshift,但遇到了一些问题.

步骤很简单:1.将MySQL表转储到csv文件2.将csv文件上传到S3 3.将数据文件复制到RedShift

步骤3中发生错误:

SQL命令是:

从拷贝TABLE_A 'S3://ciphor/TABLE_A.csv' CREDENTIALS 'aws_access_key_id = XXXX; aws_secret_access_key = XXXX' 定界符 '' CSV;

错误信息:

从复制TABLE_A 'S3://ciphor/TABLE_A.csv' 上执行时的SQL命令时出错CREDENTIALS"aws_access_key_id = XXXX; aws_secret_access_key = XXXX ERROR:COPY不支持CSV [SQL状态= 0A000]执行时间:0.53s 1个陈述失败.

我不知道csv文件的格式是否有任何限制,比如分隔符和引号,我在文档中找不到它.

任何人都可以帮忙吗？

比较Google BigQuery与Amazon Redshift表明两者都可以满足相同的要求,主要因成本计划而异.似乎Redshift配置(定义键和优化工作)与Google BigQuery相比可能在连接表时存在问题.

是否存在Google BigQuery与Amazon Redshift的优缺点列表？

我尝试让一个Kinesis Firehose在Redshift表中推送数据.

firehose流正在工作并将数据放入S3.

但没有任何东西到达Redshift的目的地表.

• 在指标DeliveryToRedshift成功为0(DeliveryToRedshift记录为空)
• 加载日志(redshift Web控制台)和STL_LOAD_ERRORS表为空.
• 我检查过Firehose能够连接到Redshift(我看到STL_CONNECTION_LOG中的连接)

我该如何解决这个问题？

根据Redshift WITH Clause 文档,您可以将WITH子句与INSERT INTO...SELECT语句一起使用.但是在测试时,我收到以下错误.这是不可能的,还是我的语法错了？

CREATE TABLE TestCTEInsert (SomeTimestamp TIMESTAMP);
WITH CTE AS
(SELECT GETDATE() as SomeTimestamp)
INSERT INTO TestCTEInsert
    (SomeTimestamp) SELECT SomeTimestamp from CTE;

错误:42601:"插入"或附近的语法错误

有趣的是,它确实支持插入新表,即

WITH CTE AS
(SELECT GETDATE() as SomeTimestamp)
INSERT SomeTimestamp INTO NewTable 
SELECT SomeTimestamp from CTE;

命令成功完成(受影响的1行)

编辑:只是为了确认,我在使用INTEGER列而不是TIMESTAMP:时得到相同的错误:

CREATE TABLE TestCTE (SomeInt INTEGER);
WITH CTE AS
(SELECT 1 as SomeInt)
INSERT INTO TestCTEInsert 
SELECT SomeInt from CTE;

错误:42601:"插入"或附近的语法错误

我有位在亚马逊红移一个有趣的情况我有谁拥有授予在公共模式的所有表中选择用户X,但一旦创建一个新的表,这个授权似乎并不适用于新表.这是正常的行为吗？如果是,那么如何处理它以便维护模式级别授权.谢谢.