Java+边缘网关开发:实现从设备数据采集到云端可视化的全链路
工业全链路别把原始报文直接抛云。合理切法是“南向多协议采集—统一点位模型—边缘清洗聚合—MQTT可靠上云—时序库存储—Web大屏”,Java在ARM/Linux网关上用成熟库做协议转换与断网补传,云端只做存储、告警和可视化。
一、统一点位与Modbus采集
不同PLC、仪表、传感器先归一成“设备ID+测点+值+时标+质量”。Modbus用j2mod/modbus4j,OPC UA用Eclipse Milo,S7/AB可走Apache PLC4X,避免业务代码耦合寄存器。
public class Point{ public String dev,tag; public double value; public long ts; public int q;}
class ModbusJob implements Runnable{
final String ip; final int port,slave,addr,count; final PointDB db;
ModbusJob(String ip,int port,int slave,int addr,int count,PointDB db){
this.ip=ip;this.port=port;this.slave=slave;this.addr=addr;this.count=count;this.db=db;}
public void run(){
try(TcpMaster master=new TcpMaster(ip,port)){
master.setTimeout(3000); master.setRetries(2);
int[] r=master.readHolding(slave,addr,count);
long now=System.currentTimeMillis();
for(int i=0;i<r.length;i++){
Point p=db.get(slave+".HR"+(addr+i));
p.value=r[i]*0.1; p.ts=now; p.q=1; // scale按点表配置
}
}catch(Exception e){ db.markBad(slave); /*触发重连/落盘*/ }
}
}
采集线程按设备周期调度,热点设备1s、冷点60s;南向异常只置质量位,不抛到上云线程。
二、边缘清洗与离线补传
网关先做滑窗均值、死区过滤、突变剔红,再发云,省带宽也降库压力。断网用有界队列+本地文件,恢复后按时间补传:
BlockingQueue<String> q=new LinkedBlockingQueue<>(5000);
void ingest(Point p){
if(online) publish(json(p));
else { if(!q.offer(json(p))) q.poll(); saveFile(json(p)); } // 满则丢最旧
}
MqttConnectOptions opt=new MqttConnectOptions();
opt.setAutomaticReconnect(true); // 断线自动重连
opt.setCleanSession(false); // 保留订阅/离线消息
opt.setKeepAliveInterval(30);
opt.setConnectionTimeout(60);
DisconnectedBufferOptions b=new DisconnectedBufferOptions();
b.setBufferEnabled(true); b.setBufferSize(5000); b.setPersistBuffer(true);
client.setBufferOpts(b); // 离线消息缓冲
client.connect(opt);
client.setCallback(new MqttCallbackExtended(){
public void connectComplete(boolean rec,String s){
client.subscribe("gw/cmd/"+sn,1); // 重连后重订指令主题
flushQueue(); replayFile(); // 补发内存+磁盘缓存
}
public void messageArrived(String t,MqttMessage m){ /*下行写Modbus*/ }
public void connectionLost(Throwable e){ online=false; }
public void deliveryComplete(IMqttDeliveryToken t){}
});
弱网用QoS1、指数退避重连,keepalive按4G/NAT调30~90s,避免被运营商回收。
三、上云存储与可视化
北向MQTT主题按“gw/up/{dev}/{tag}”发JSON,云端Spring Boot接EMQX/Mosquitto,校验后写消息队列入库:时序数据落InfluxDB/TDengine/TimescaleDB,设备资产落MySQL/PostgreSQL,告警走规则引擎。 前端用Vue+Echarts或Grafana拉REST/WebSocket,做实时曲线、OEE、能耗、报警列表。
关键点:
点位配置JSON化,新增PLC只改南向驱动和点表,核心不动;
边缘做聚合后再上云,比如振动RMS本地算、超阈值才上报,普通采样按周期发;
JVM在网关用-Xms512m -Xmx512m,G1/ZGC按ARM内存选,虚拟线程处理万级连接更轻;
安全用MQTT TLS+账号、OPC UA证书,配置文件权限收紧,API网关做鉴权限流;
可观测埋采集成功率、MQTT重连次数、队列深度、时序库写入延迟,定位“掉线不报、补传不全”。
按这套落地,传感器/PLC数据经Java网关归一、清洗、离线补传,云端时序库+大屏完成全链路可视化;相比直传HTTP脚本,弱网不丢告警、改协议不停主程序,适合车间能源、设备状态、环境监控类Demo转量产。





