Questions tagged «redshift»

我需要在大型数据仓库中支持动态字段和值以存储API请求日志，而我的用例是我需要存储所有API请求查询字符串，并在将来能够对其进行查询（因此，不仅仅是存储，所以我不能为他们使用blob） 例如 http://example.com/?action=test&foo=abc&bar=def... 我需要存储所有field => value映射，即(action => test), (foo => abc), (bar => def)，由于该字段是动态的，所以我发现的唯一解决方案是使用Entity-Attribute-Value，但是，人们一直说这是一个非常糟糕的设计。 因此，考虑以上我的用例，什么是EAV的合适替代方案？ 我当前使用KAV的架构 表requests (id, timestamp, uri) 例如(1, 149382220, '/') 表params (request_id, key, value) 例如(1, 'action', 'test'), (1, 'foo', 'abc'), (1, 'bar', 'def') 有什么建议么？ 更新：我们在AWS RedShift上运行仓库

13 database-design  data-warehouse  eav  star-schema  redshift 

在Redshift上，为什么我的表没有显示在以下查询中？如我运行的下一个查询所示，它确实存在。我想要一种列出架构的所有表的方法： mydb=# select distinct(tablename) from pg_table_def where schemaname = 'db'; tablename ----------- (0 rows) mydb=# \d db.some_table Table "db.some_table" Column | Type | Modifiers -----------------+-----------------------------+----------- ...correct info shows up here... ...but nothing showed up above?

12 redshift 

我一直在研究Amazon的Redshift数据库，以作为将来替换我们的数据仓库的可能。我的经验一直是使用维度建模和Ralph Kimball的方法，因此看到Redshift不支持自动递增列的串行数据类型等功能有点奇怪。 但是，AWS Big Data博客最近有一篇博客文章，介绍如何针对星型架构优化Redshift：https : //blogs.aws.amazon.com/bigdata/post/Tx1WZP38ERPGK5K/Optimizing-for-Star-Schemas和交错排序在Amazon Redshift上 我的问题是在Redshift中加载星型架构的最佳实践是什么？我在Redshift的任何文档中都找不到答案。 我倾向于将文件从S3导入到临时表中，然后在插入目标表之前使用SQL进行诸如查找和生成代理键之类的转换。 这是别人目前在做什么吗？有没有值得花这笔钱的ETL工具来简化这一过程？

9 etl  dimensional-modeling  redshift