flink中写入行存储、列存储时设定checkpoint多久时间间隔另存一个新文件
生活随笔
收集整理的這篇文章主要介紹了
flink中写入行存储、列存储时设定checkpoint多久时间间隔另存一个新文件
小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
?
這個博文關注:
設定多少時間,把checkpoint另存新文件
| ? | 設定時間間隔 |
| 行存儲(txt) | ? ? ? ? ?DefaultRollingPolicy.builder() |
| 列存儲(orc、parquet) | 滾動策略中無法設定多少時間,把checkpoint另存新文件,只能是默認時間間隔。(IDE中也包含設定間隔,但是運行無法通過) withRollingPolicy(OnCheckpointRollingPolicy.build())? |
?
總結
以上是生活随笔為你收集整理的flink中写入行存储、列存储时设定checkpoint多久时间间隔另存一个新文件的全部內容,希望文章能夠幫你解決所遇到的問題。
- 上一篇: flink的分桶策略BucketAssi
- 下一篇: 迪拉纳(阿布杜·沙拉穆)