这样就形成了一个从mysql->kafka->es 功能环。

duckula专注于数据的实时推送，它分为四大模块：

1. binlog在线监听 实时监听mysql的binlog，并解析后推送kafka等存储中间件（也有es和redis等，但kafka适用最 广泛，测试也最多）
2. binlog离线解析 离线补数据用
3. kafka消费监听 消费模块1推过来的数据，并把这些数据存放到ES/mysql等。(ES是重点功能，支持也最好)
4. 数据库全量导入 把mysql的表数据全量导入到ES（暂时只支持ES，后续也会做插件化）

• duckula-plugin-redis ............................redis发送者插件
• duckula-serializer-protobuf3 ...............pb3序列化插件
• duckula-serializer-protobuf2 ................pb2序列化插件
• duckula-serializer-thrift .........................thrift序列化插件
• duckula-common ...................................公共的引用模块
• duckula-task ...........................................binlog监听模块
• duckula-plugin-kafka .............................发送kafka发送者插件
• duckula-plugin-elasticsearch .................直接发送ES的插件
• duckula-busi-filter ....................................过虑器插件（暂不用）
• duckula-dump-elasticsearch ..................全量导入ES的模块
• duckula-kafka-consumer ........................消息kafka数据的模块
• duckula-install ..........................................打包安装模块
• duckula-ops Tapestry 5 Application .......ops控制台模块

• JDK8
• zookeeper 3.5.3-beta
• kafka 1.0.2
• es 6.3.2
• mysql: 5.6
• k8s 1.10.11
• tiller 2.11.0
• docker 18.09.02