Apache spark 动态数据转换

除了手动映射之外，是否有其他方法可以动态转换相关值？我知道这听起来很模糊，但我正在寻找一种方法，将输入值（例如“2015 Ford”）转换为客户提供的映射，该映射表示其系统中的相同值。假设他们为我们提供了每辆车在其系统中的表示方式的映射。比如说：

“福特”->1111 “宝马”->2222 “法拉利”->5050

我想看看是否可以用风暴螺栓之类的东西来实现这一点。（显然，我不熟悉storm beyond it数据丰富功能）或者是否有其他数据系统提供此功能。因为为我的每一个客户做一次一次性的映射并不是真正可行的

---

提前感谢您的建议

基本上，您希望将映射文件与实时流（或批处理数据）连接起来

在spark中，您可以广播映射文件，然后像hashmap一样使用它来更新实时流