标签：批处理 支持 内存不足 大规模 缺点 StarRocks1.19 ETL 内存

社区论坛话题：https://forum.starrocks.com/t/topic/209

1.目前不适合大规模批处理？

目前的话 我们不适合做大规模的批处理，当前版本由于是全内存计算，所以面对大规模数据的复杂ETL容易内存不足，后续的版本正在优化当中。
因为ETL操作需要落盘,所以短期内还没有进行解决容易内存不足的问题,但这方面的需求已经有所记录,是我们之后会进行研发的一个方向, 目前 DorisDB 只能做到简单的ETL。

2.现在发现时间精度不能支持毫秒呀，请问这个有计划优化吗？

前是还不支持，当前请先使用 int 类型处理

3.string是有长度限制的 ，最多只能支持65533， 请问大概什么时候能支持不限制长度？

还不确定，这块长字符串实现上会有些内存问题，还得后面设计设计

标签：批处理,支持,内存不足,大规模,缺点,StarRocks1.19,ETL,内存
来源： https://www.cnblogs.com/gentlescholar/p/15479349.html

本站声明： 1. iCode9 技术分享网（下文简称本站）提供的所有内容，仅供技术学习、探讨和分享；
2. 关于本站的所有留言、评论、转载及引用，纯属内容发起人的个人观点，与本站观点和立场无关；
3. 关于本站的所有言论和文字，纯属内容发起人的个人观点，与本站观点和立场无关；
4. 本站文章均是网友提供，不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属；如您发现该文章侵犯了您的权益，可联系我们第一时间进行删除；
5. 本站为非盈利性的个人网站，所有内容不会用来进行牟利，也不会利用任何形式的广告来间接获益，纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。