gp的分布键主要功能就是为了避免数据倾斜:
1.分布键必须自己主动指定,不能使用默认分布键(建表语句中没写分布键)
2.分布键必须能够使数据均匀的分布到各个节点上
我曾做过数据倾斜的操作
环境:测试环境,建表的分布键为日期,对表没有进行压缩
状态:进行数据抽数(向我自己建的表),测试数据仓库只给了一天的,数据量过亿
结果:一期数据全部怼到一个节点,占了1.6T的存储空间
影响:崩掉了两个节点,对此表进行查询时跑死,truncate操作时也跑死
1.表是为了存储而生:gp表的分布键应该做到能使数据分布均匀的功能,用主键字段,或联合主键字段作为分布键。
2.表是为了计算而生:gp表的分布键应该做到关联键为分布键的功能,切不宜超过三个,这是为效率考虑。
标签:建表,gp,GP,节点,分布,表是,主键 来源: https://blog.csdn.net/cft980/article/details/123595075
本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享; 2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关; 3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关; 4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除; 5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。