本文目录一览：
在kettle中转换mongodb数据,组内存超过限制怎么办
调整JVM大小进行性能优化，修改Kettle定时任务中的Kitchen或Pan或Spoon脚本。
限制MongoDB使用的内存，可以通过对配置文件某一项添加约束。mongod.conf：定义WiredTiger将用于所有数据的内部缓存的最大大小。索引构建消耗的内存 与WiredTiger缓存内存是分开的。值的范围可以从0.25GB到10000GB。
今天给大家分享下大数据平台是怎么玩的。00 架构总览通常大数据平台的架构如上，从外部采集数据到数据处理，数据显现，应用等模块。01 数据采集用户访问我们的产品会产生大量的行为日志，因此我们需要特定的日志采集系统来采集并输送这些日志。
因为多表关联上发挥作用。MongoDB是一个文档型、无模式的数据库，自然就很难在关系型数据库中非常擅长的多表关联上发挥作用。
千万别用MongoDB?真的吗
但是，如果你想要在 MongoDB 上搞一个大规模的系统，在上面运行真实的业务，那么，请不要用 MongoDB。转载，仅供参考。
自然，MongoDB的使用也会有一些限制，例如它不适合：◆高度事务性的系统：例如银行或会计系统。传统的关系型数据库目前还是更适用于需要大量原子性复杂事务的应用程序。
Redis只能使用单线程，性能受限于CPU性能，故单实例CPU最高才可能达到5-6wQPS每秒（取决于数据结构，数据大小以及服务器硬件性能，日常环境中QPS高峰大约在1-2w左右）。
MongoDB本身它还算比较年轻的一个产品，所以它的问题，就是成熟度肯定没有传统MySQL那么成熟稳定。
而且MongoDB社区非常活跃，很多开发框架都迅速提供了对MongDB的支持。不少知名大公司和网站也在生产环境中使用MongoDB，越来越多的创新型企业转而使用MongoDB作为和Django，RoR来搭配的技术方案。
MongoDB单文档大小限制是16M吗?这里包括嵌入的子文档吗?
1、是的，包括嵌入的（embedded）子文档在内。这个限制是为了避免单个文档过大，完整读取时对内存或者网络带宽占用过高。
