最近公司用到大數據采集系統,用到了api + Kafka+elasticsearch 這三部分構成
api :采集用戶的數據
kafka :消息訂閱系統,
elasticsearch : 數據分析以及搜索引擎
kafka-connector-elasticsearch 中間件,完成kafka的數據的訂閱實時同步到elasticsearch ;
使用php的擴展 libkafka實現對kafka中寫數據
發現在刪除topic的時候,老是刪除不掉,最后的原因推斷,是進程正在運行,topic刪除不掉
使用
killall -9 pid 發現沒有用
最后使用ps aux 或者ps -ef 找到系統的進程號,然后
sudo kill -s 9 pid
進程被殺死,ok