Apache Flink:当我修改存储的对象时,MapState 是否会自动更新?

Che*_*ang 4 apache-flink flink-streaming

是否需要MapState.put()手动更新状态,或者修改对象时状态是否自动更新?

private transient MapState<String, Word> words;
.......
Word w = words.get(word);             
if (w == null) {
  w = new Word(word);
  //words.put(word, w);  //A
}              
if (....) {
  w.countBad(1);   // countXXX modifies a the private variable in a Word object 
} else {
  w.countGood(1);
}    
//words.put(word, w);   //B
Run Code Online (Sandbox Code Playgroud)

Q : 如果我使用A方法,下次计数计算会自动更新相应的Mapstate状态吗?还是需要在计算完成后使用B方法手动更新状态?

Fab*_*ske 5

从 API 的角度来看,您始终需要手动更新状态。

然而,实际行为取决于状态后端。如果应用程序使用InMemoryStateBackendFsStateBackend,则所有本地状态都存储在工作进程的 JVM 堆上,即状态后端仅保存对该对象的引用。因此,当你修改对象时,状态也会被直接修改。

如果使用,RocksDBStateBackend所有状态访问都会被反/序列化并从 RocksDB 读取/写入 RocksDB。在这种情况下,修改对象不会对状态产生影响。

我建议始终显式更新状态,因为这将确保您可以在不调整应用程序逻辑的情况下切换状态后端。