Skip to content

物联网全景:从设备到云的四层架构 ​

本篇要点:拿到一张设备清单,能说清每台设备的数据落在哪一层、由谁处理、失败时先查哪里。前置只要求会写一门后端语言、知道 TCP 与 TLS 大概在做什么,没写过固件也能读。

为什么需要它 ​

2024 年冬天我在一个冷链园区待了两周。需求听上去很朴素:30 个冷库、每库 4 个温度探头,5 秒上报一次,超温告警,并且能查任意一天的历史曲线。

第一版三个人花了十天:探头经 RS485 接到网关(gateway),网关把原始帧转成 MQTT 发到云端 broker,规则引擎直接写 MySQL,前端查 MySQL。上线一个月,单表 6200 万行。运营点「上周三 14:00 到 16:00 三号库的温度曲线」,浏览器转了 40 秒后 502。

第二版加了时序数据库,同样的查询 200 毫秒出结果。新问题紧跟着来了:告警记录里同一个探头在两分钟内报了 17 次超温,而现场温度只是擦了一下阈值边缘;另有一批曲线在图上落到了 1970 年。前一个是设备每 5 秒判一次阈值、每次越界都发告警;后一个是网关重启后时钟回到出厂默认值,而报文里没有设备侧时间戳。

两次故障都不在数据库,也不在协议。第一次把采集侧该做的抖动过滤推给了存储和查询,第二次干脆没人负责「时间由谁打」。物联网项目里最贵的返工基本都长这样:不是某个组件选错,而是没人把「哪一层做什么」写下来,于是每层都顺手多做或漏做一点,故障就出现在离根因最远的地方。

核心概念 ​

四层不是哪个标准化组织发布的规范,是工程上沿用多年的分法。AWS IoT、Azure IoT、阿里云 IoT 的文档措辞不同,职责划分基本一致。先固定名词,后面十一章都按这套叫法走。

层次负责什么不该负责什么典型组件出问题先查
感知层 Perception采样、打时间戳、单位归一、本地去抖存历史、判业务阈值、做决策传感器、MCU、通信模组、RTU数值漂移、时钟、重连
网络层 Network送达平台,管可达性、功耗、带宽解析业务语义NB-IoT/Cat.1、LoRaWAN、Wi-Fi、以太网、MQTT、CoAP丢包、重连风暴、信号
平台层 Platform连接与身份、物模型、规则流转、时序存储承载工单流程、业务审批Broker、设备管理、流处理、时序库队列积压、写入放大
应用层 Application给人和外部系统看的界面与接口直连设备、订阅原始报文看板、告警、开放 API查询慢、口径不一致

图 1-1 物联网四层架构与数据流向(实线为上行,虚线为下行)

如图 1-1 所示,上行与下行不是同一条路:上行从设备流到应用,下行从应用反向打到设备。下行因此必须带超时和幂等,末端设备随时可能休眠或断网。

概念一:感知层,把物理量变成可信的数字 ​

感知层(Perception Layer)指传感器、执行器和紧挨着它们的微控制器(MCU, Microcontroller Unit)与通信模组。它做三件事:把物理量转成数字、给这个数字打上时间戳、把单位定死。

类比:皮肤和神经末梢,只负责「感觉到了」,不负责「该不该报警」。报警策略是运营的规则,改一次就该生效一次,而固件烧一次要人去现场。

反例很常见:把「温度超过 8℃ 就上报告警」写进固件。阈值一改就得排升级计划,而且没有死区(deadband)过滤,探头在 7.9 和 8.1 之间来回跳就能刷出十几条告警,那两分钟 17 次超温就是这么来的。

时间戳也不能在平台层补。网关重启、NTP 同步、时区配置都会让本地时钟跳变,平台收到时打的 received_at 只是「我什么时候收到」,不是「物理量什么时候发生」。一条断网 2 小时后补传的数据,两个时间差两个小时。

概念二:网络层,只负责把字节送到 ​

网络层(Network Layer)由接入方式和传输协议组成,职责止于「字节到达平台」,不解释字节里是温度还是电量。

类比:快递员不拆箱判断东西坏没坏,只保证送到、有签收、送不到退回。

反例是把 HTTP 短轮询当上报通道。一条 80 字节的 JSON 在 HTTPS 上每次都要重付 TCP 与 TLS 握手的开销,5 秒一次时连接开销远大于有效载荷;更麻烦的是服务端没法主动下发,一条重启指令要等下一次轮询才生效。

协议选型的边界大致如下:

协议跑在哪适合不适合备注
MQTT 5.0TCP/TLS设备上行、指令下行、弱网长连接超大文件传输OASIS Standard,2019 年 3 月 7 日发布
CoAPUDP/DTLS极省电、报文极小的传感网需要可靠有序的长会话RFC 7252,2014 年发布
LwM2MCoAP 之上运营商侧设备管理与固件下发私有协议已定型的存量设备OMA 定义,对象模型与 CoAP 绑定
HTTP/RESTTCP/TLS低频、设备侧已有 HTTP 栈秒级上报、需要下行推送无状态,适合查询类接口
Modbus RTU/TCPRS485 / TCP工业现场读 PLC、电表直接暴露到公网无认证无加密,必须由网关转译
OPC UATCP产线设备语义化建模低功耗电池设备IEC 62541,带信息模型

Modbus 值得单独记一句:它是最常见的现场协议,也是被误用到公网最多的协议,没有认证、没有加密、没有会话。能直连说明网络边界已经破了。

概念三:平台层,接入、身份、物模型三件事 ​

平台层(Platform Layer)再分三块:接入面(Broker 集群,管连接与路由)、管理面(设备注册、身份、物模型、影子)、数据面(规则流转与时序存储,TSDB)。

物模型(Thing Model)是这里的核心抽象:用一份结构化定义描述一类设备有哪些属性(property,如温度)、哪些事件(event,如超温)、哪些服务(service,如重启),以及字段的类型、单位、取值范围。类比后端的 DTO 加接口契约:上行报文和对外接口都以它为唯一口径。

反例一:物模型字段用拼音缩写,wd、sd、yl。半年后接手的人只能猜,跨团队对接每个字段都要确认一遍。反例二:把设备台账塞进业务库的 device 表,跟订单表同库。设备量一上来这张表被业务事务反复锁,而设备管理要的是批量导入、状态订阅、批量下发。

边界也要说清:阈值判断属于应用层(业务策略),去抖和聚合属于感知层或边缘网关(数据质量),平台层只判断「数据是否合规、该往哪去」。

概念四:应用层,人看到的那一层 ​

应用层(Application Layer)是看板、告警、工单、开放 API,消费平台层规整过的数据,不直接面对设备。

反例:移动端 App 用同一套账号直连 Broker 订阅 #。看起来省了一个后端服务,实际把设备凭据发到了每个用户手机上,主题权限也没法按人收敛,补起来还要改客户端发版。

概念五:设备生命周期,从出厂到退役 ​

设备生命周期(Device Lifecycle)指一台设备从立项到被拆除的全过程,工程上切成六个阶段:选型立项、出厂烧录、安装绑定、激活上线、运行维护、退役。图 1-2 里多出的「固件升级」「失联」是运行维护期间的子状态。

图 1-2 设备生命周期的状态迁移

被跳过最多的两个状态是「出厂烧录」和「退役」:前者决定设备身份(《设备身份与安全接入:TLS 与凭据体系》),后者决定历史数据归谁。反例:现场换了 12 个探头,新探头沿用旧 ID,三个月的温度曲线里出现两次 30 秒内从 -18℃ 跳到 25℃ 的尖峰,事后没人能证明那批货有没有失温。

动手实践 ​

目标:在本地跑通一条最小四层链路,再用一个脚本给设备清单做分层体检。环境是 Docker 24 以上、Python 3.11、eclipse-mosquitto:2.0 镜像。

第一步,起一个只做接入的 Broker。这份配置只允许本地匿名连接,生产环境不能这么用(《设备身份与安全接入:TLS 与凭据体系》讲凭据)。

bash
mkdir -p ./mosq/config
printf 'listener 1883\nallow_anonymous true\n' > ./mosq/config/mosquitto.conf
docker run -d --name iot-broker -p 1883:1883 \
  -v "$PWD/mosq/config/mosquitto.conf:/mosquitto/config/mosquitto.conf:ro" \
  eclipse-mosquitto:2.0
docker logs iot-broker

运行结果:

text
(docker run 输出容器 ID)
1763...  mosquitto version 2.0.x starting
1763...  Config loaded from /mosquitto/config/mosquitto.conf.
1763...  Opening ipv4 listen socket on port 1883.

第二步,写一个最小的设备端,扮演感知层。它每 2 秒发一条读数,报文里带上设备侧时间戳、单位和序号。

python
# device_sim.py —— Python 3.11 / paho-mqtt 2.x(pip install "paho-mqtt>=2.1,<3")
import json, time
import paho.mqtt.client as mqtt

client = mqtt.Client(mqtt.CallbackAPIVersion.VERSION2, client_id="T-0101")
client.connect("127.0.0.1", 1883, keepalive=30)
client.loop_start()

seq = 0
while True:
    seq += 1
    body = {"dev": "T-0101", "ts": int(time.time()),
            "t": 21.4, "unit": "C", "seq": seq}
    client.publish("cold/a/T-0101/telemetry", json.dumps(body), qos=1)
    print("pub", seq, body["t"], body["ts"])
    time.sleep(2)

预期输出(每 2 秒一行,ts 随系统时间变化):

text
pub 1 21.4 1794897600
pub 2 21.4 1794897602
pub 3 21.4 1794897604

第三步,用订阅端扮演应用层,按主题通配符收数据。-v 让每条消息带上主题名。

bash
mosquitto_sub -h 127.0.0.1 -p 1883 -v -q 1 -t 'cold/+/+/telemetry'

预期输出(与 publish 端严格对齐,注意 JSON 里冒号后有一个空格,这是 json.dumps 的默认分隔符):

text
cold/a/T-0101/telemetry {"dev": "T-0101", "ts": 1794897600, "t": 21.4, "unit": "C", "seq": 1}
cold/a/T-0101/telemetry {"dev": "T-0101", "ts": 1794897602, "t": 21.4, "unit": "C", "seq": 2}

到这里你有了三层:设备端、长连接、订阅进程。下面做体检。

第四步,把手上任何一份设备清单(或下面这份示例)喂给脚本,看字段缺了会在哪一层出事。

python
# arch_audit.py —— Python 3.11,只用标准库
import csv, io
from collections import Counter

RAW = """dev_id,site,model,protocol,interval_s,ts_field,unit,fw_version,activated_at
T-0101,cold-a,TH200,MQTT,5,ts,C,1.4.2,2025-03-11
T-0102,cold-a,TH200,MQTT,5,,C,1.4.2,2025-03-11
T-0103,cold-b,TH200,HTTP,5,ts,C,1.4.0,
T-0201,cold-b,PM100,Modbus-RTU,30,ts,ug/m3,,2025-04-02
G-01,gate-a,GW4,Modbus-TCP,60,ts,,2.0.1,2024-12-02
T-0104,cold-c,TH200,MQTT,5,ts,,1.4.2,2025-03-12
"""

LAYER_ORDER = {"感知层": 0, "网络层": 1, "生命周期": 2}
rows = list(csv.DictReader(io.StringIO(RAW)))
gaps = []
for r in rows:
    if not r["ts_field"]:
        gaps.append(("感知层", r["dev_id"], "报文无设备侧时间戳,乱序与时钟漂移都无法事后修复"))
    if not r["unit"]:
        gaps.append(("感知层", r["dev_id"], "缺单位,平台层只能猜是摄氏度还是华氏度"))
    if r["protocol"] == "HTTP" and int(r["interval_s"]) <= 10:
        gaps.append(("网络层", r["dev_id"], f"HTTP 轮询 {r['interval_s']}s,连接开销大于有效载荷"))
    if not r["activated_at"]:
        gaps.append(("生命周期", r["dev_id"], "未登记激活时间,静默设备无法区分是新装还是失联"))
    if not r["fw_version"]:
        gaps.append(("生命周期", r["dev_id"], "无固件版本,OTA 无法按版本灰度"))

gaps.sort(key=lambda g: LAYER_ORDER[g[0]])
print(f"共检查 {len(rows)} 台设备,发现 {len(gaps)} 条缺口\n")
for layer, dev, msg in gaps:
    print(f"[{layer}] {dev} {msg}")
cnt = Counter(g[0] for g in gaps)
print("\n按层统计:" + ",".join(f"{k} {v}" for k, v in cnt.most_common()))

预期输出:

text
共检查 6 台设备,发现 6 条缺口

[感知层] T-0102 报文无设备侧时间戳,乱序与时钟漂移都无法事后修复
[感知层] G-01 缺单位,平台层只能猜是摄氏度还是华氏度
[感知层] T-0104 缺单位,平台层只能猜是摄氏度还是华氏度
[网络层] T-0103 HTTP 轮询 5s,连接开销大于有效载荷
[生命周期] T-0103 未登记激活时间,静默设备无法区分是新装还是失联
[生命周期] T-0201 无固件版本,OTA 无法按版本灰度

按层统计:感知层 3,生命周期 2,网络层 1

第五步,读这份报告。时间戳和单位靠采集规范补(《边缘计算:网关、协议采集与本地规则》的采集点表),轮询改长连接(《MQTT 5 精讲:主题设计、QoS 与会话》),激活时间与固件版本靠台账和 OTA 流程(第 4、8 章)。

常见误解 ​

很多人以为四层架构是一份必须逐字实现的标准,其实它是分工约定,不是协议栈。三个人的小项目完全可以把平台层和应用层跑在一个进程里,只要边界清楚、将来能拆。判断有没有守住边界,不问部署图,问一句「阈值改了要发固件吗」。

很多人以为设备接上 MQTT 就有了物联网架构,其实 MQTT 只解决网络层到平台层这一跳的运输。没有物模型,平台拿到的是一堆无类型字节;没有生命周期,台账三个月后就跟现场对不上。

很多人以为边缘计算是为了省流量,其实它的第一价值是本地的可用性和数据质量。车间断网 20 分钟,网关只会转发的话这 20 分钟的生产数据就永久缺失;网关承担了采集、缓存和去抖,断网期间的曲线和告警都还在,只是晚一点上云。省流量是顺带的结果。

小结 ​

  • 四层是分工约定:感知层把物理量变成带时间戳和单位的可信数字,网络层只管送达,平台层管接入、身份和物模型,应用层管人和对外接口。
  • 数据流是有方向的:上行逐层加工,下行逐层收敛,所以下行必须有超时和幂等,因为末端设备随时可能休眠或断网。
  • 协议选型看现场条件不是知名度:秒级上报配 MQTT,极省电传感网看 CoAP/LwM2M,工业现场用 Modbus/OPC UA 再由网关转译。
  • 生命周期里最容易被跳过的是「出厂烧录」和「退役」:一个决定身份,一个决定历史数据归属。
  • 反模式(anti-pattern)共性是「跨层补齐」:设备端判业务阈值、应用直连 Broker、平台层塞业务规则,都会把故障推到离根因最远的地方。

相关主题 ​

四层里唯一必须逐字节设计的接口,是网络层到平台层的那一跳。相关文章把 MQTT 5 拆开:主题怎么分层才不返工、QoS 0/1/2 分别在哪一步丢消息、会话过期和遗嘱消息的默认值会把系统带到哪里。读完你会知道「Broker 只做路由」这句话值多少实现细节。参考 MQTT 5 主题设计与 QoS 选型。