本文介绍通过 Flink CDC 方式实时同步 MySQL 数据至 Hudi(或 Hive)的过程。
本文介绍如何监听 Neo4j 变更数据并发送到 kafka 。
凌晨 YARN 异常,HA 模式下两个 RM(ResourceManager)都处于备用(standby)状态,重启其中任何一个都无法使另外的活动(active)状态。
解决Unrecognized Hadoop major version number: 3.0.0-cdh6.3.1问题。
记录下配置历程。
目前海豚调度器(1.3.6)的告警只支持邮件和短信,对于大部分在夜间执行的任务来说,很难做到在任务出错时及时通知到相应人员。
所以基于当前的代码做了一些优化。
Typer 是一个人见人爱,花见花开的用于构建 CLI 程序的库,基于 Python 3.6+的类型提示(type hints)。
Mongo 问题记录。
经验告诉我们,生产最好不要随便升级。
