摘要
针对现有工控网系统不能高效稳定地接收并处理来自工业现场的海量传感数据问题,基于Hadoop框架,采用消息队列遥测传输(MQTT)作为数据接入协议、EMQ消息队列服务器提供订阅发布接口、Flink作为流计算平台、Kafka作为消息队列缓存分流以及OpenTSDB数据库作为数据存储,设计并实现鼓风机工业大数据处理和存储系统。实验表明,此系统消除了工业制造过程中产生的海量数据信息孤岛,实现生产设备状态动态监测及实时预警。
学科与关键词
关键词
工业大数据Hadoop消息队列遥测传输FlinkKafka industrial big dataMQTTKafka
- 基于Hadoop的工业大数据存储分析系统范旭辉*科技创新与应用, 2020, (23): 18-20+24.
- 基于参数优化的Hadoop云计算平台李寒; 唐兴兴计算机系统应用, 2013, (03): 21-24.
- Hadoop在数据挖掘中的应用研究李校红; 张秀芳新技术新工艺, 2015, (04): 97-99.
