工业大数据架构分析（7）

工业大数据架构分析（七）

（2019年3月4日）

外部系统数据采集：外部系统数据主要来源于评价企业环境绩效的环境法规、预测产品市场的宏观社会经济数据等，此类数据主要用于评估产品的后续生产趋势、产品改进等方面，与管理系统的数据采集类似，可以通过标准的RJ45接口进行数据的传输。通常本类数据相对静止，变化较小，因此数据的上传频次较低。

综合上述多类数据源的采集场景和要求，系统的集成导入应同时具备实时接入(如工业控制系统、生产监控数据、各类传感器)和批量导入(如管理系统、外部数据)的能力，同时能根据需要提供可定制化的IoT接入平台。具体建设要求如下。

1)对于需要实时监控、实时反向控制类数据，可通过实时消息管道发送，支持实时接入，如工业控制系统数据、生产监控系统数据等。建议可采用如Kafka、Fluentd或是Flume等技术，这类技术使用分布式架构，具备数据至少传输一次的机制，并为不同生成频率的数据提供缓冲层，避免重要数据的丢失。

2)对于非实时处理的数据，可采取定时批量地从外部系统离线导入，必须要支持海量多源异构数据的导入，如资源管理数据、价值链数据、设计资料等。建议可采用Sqoop等数据交换技术，实现Hadoop与传统数据库(MySQL、Oracle、Postgres等)间大批量数据的双向传递。

3)当系统中有大量设备需要并发接入且要多协议接入时，如各类传感器件，可部署专业IoT接入网关，IoT接入平台需同时具备支持TCP、UDP、MQTT、CoAP、LWM2M等多种通信协议。在面对各类传感器的数据采集时，可以结合RFID、条码扫描器、生产和监测设备、PDA、人机交互、智能终端等手段采集制造领域多源、异构数据信息，并通过互联网或现场总线等技术实现源数据的实时准确传输。有线接入主要以PLC、以太网为主。无线接入技术种类众多，包括条形码、PDA、RFID 、Zigbee、Wi-Fi、蓝牙、Z-wave等短距离通信技术和长距无线通信技术。其中，长距离无 线技术又分为两类，包括工作于未授权频谱的LoRa、 SigFox等技术和工作于授权频谱下传统的2/3/4G蜂窝技术及其3GPP支持的LTE演进技术，如LTE-eMTC、 NB-IOT等。

（未完待续）

（摘编自 微信公众号 信息通信技术 联通智汇）