我一直在搜索，但没有得到很好的信息来解释映射和转换如何处理输入数据。
是否对每个记录都执行整个映射（我知道不可能是排序器和聚合等。为了执行其目的，需要查看整个数据（或定义的批处理大小））。
可能取决于每种转换类型-某些可能会在释放输出之前保存整个输入数据（或定义的批次大小）。
可能这个问题适用于所有数据集成工具。
简而言之：这取决于转换类型-例如，表达式在不缓存行的情况下处理行，聚合器，排序器需要缓存所有输入数据，Joiner仅缓存主管道。
本文收集自互联网，转载请注明来源。
如有侵权，请联系 [email protected] 删除。
我来说两句