最近公司用到大数据采集系统,用到了api + Kafka+elasticsearch 这三部分构成
api :采集用户的数据
kafka :消息订阅系统,
elasticsearch : 数据分析以及搜索引擎
kafka-connector-elasticsearch 中间件,完成kafka的数据的订阅实时同步到elasticsearch ;
使用php的扩展 libkafka实现对kafka中写数据
发现在删除topic的时候,老是删除不掉,最后的原因推断,是进程正在运行,topic删除不掉
使用
killall -9 pid 发现没有用
最后使用ps aux 或者ps -ef 找到系统的进程号,然后
sudo kill -s 9 pid
进程被杀死,ok