LoRaWAN设备数据解析及开源MQTT SDK设备端模拟

本文涉及的产品
公共DNS(含HTTPDNS解析),每月1000万次HTTP解析
云解析DNS,个人版 1个月
全局流量管理 GTM,标准版 1个月
简介: 本文主要以阿里云官方文档LoRaWAN设备数据解析为基础,基于开源MQTT SDK,实现完整的: 设备<->云端消息链路测试。

作者:俏巴

概述

LoRaWAN设备与物联网平台的通信数据格式为透传/自定义,因此需要使用数据解析脚本,解析上下行数据。本文主要以阿里云官方文档LoRaWAN设备数据解析为基础,基于开源MQTT SDK,实现完整的: 设备<->云端消息链路测试。

操作步骤

前期准备
1、创建产品,因为这边没有入网凭证,使用WiFi联网方式,数据格式:透传/自定义:
image.png

2、添加物模型,可以直接参考官方文档说明逐个添加,这里提供对应物模型的完整文本,可以copy内容到本地自己创建的:model.json文件,然后物联网平台管理控制台直接导入:

{
    "schema":"https://iotx-tsl.oss-ap-southeast-1.aliyuncs.com/schema.json",
    "profile":{
        "productKey":"********" // 注意为您自己产品的productkey
    },
    "services":[
        {
            "outputData":[
                
            ],
            "identifier":"set",
            "inputData":[
                {
                    "identifier":"Temperature",
                    "dataType":{
                        "specs":{
                            "min":"-40",
                            "max":"55",
                            "step":"1"
                        },
                        "type":"int"
                    },
                    "name":"Temperature"
                },
                {
                    "identifier":"Humidity",
                    "dataType":{
                        "specs":{
                            "min":"1",
                            "max":"100",
                            "step":"1"
                        },
                        "type":"int"
                    },
                    "name":"Humidity"
                }
            ],
            "method":"thing.service.property.set",
            "name":"set",
            "required":true,
            "callType":"async",
            "desc":"属性设置"
        },
        {
            "outputData":[
                {
                    "identifier":"Temperature",
                    "dataType":{
                        "specs":{
                            "min":"-40",
                            "max":"55",
                            "step":"1"
                        },
                        "type":"int"
                    },
                    "name":"Temperature"
                },
                {
                    "identifier":"Humidity",
                    "dataType":{
                        "specs":{
                            "min":"1",
                            "max":"100",
                            "step":"1"
                        },
                        "type":"int"
                    },
                    "name":"Humidity"
                }
            ],
            "identifier":"get",
            "inputData":[
                "Temperature",
                "Humidity"
            ],
            "method":"thing.service.property.get",
            "name":"get",
            "required":true,
            "callType":"async",
            "desc":"属性获取"
        },
        {
            "outputData":[
                
            ],
            "identifier":"SetTempHumiThreshold",
            "inputData":[
                {
                    "identifier":"MaxTemp",
                    "dataType":{
                        "specs":{
                            "min":"-100",
                            "max":"100",
                            "step":"1"
                        },
                        "type":"int"
                    },
                    "name":"MaxTemp"
                },
                {
                    "identifier":"MinTemp",
                    "dataType":{
                        "specs":{
                            "min":"-100",
                            "max":"100",
                            "step":"1"
                        },
                        "type":"int"
                    },
                    "name":"MinTemp"
                },
                {
                    "identifier":"MaxHumi",
                    "dataType":{
                        "specs":{
                            "min":"-100",
                            "max":"100",
                            "step":"1"
                        },
                        "type":"int"
                    },
                    "name":"MaxHumi"
                },
                {
                    "identifier":"MinHumi",
                    "dataType":{
                        "specs":{
                            "min":"-100",
                            "max":"100",
                            "step":"1"
                        },
                        "type":"int"
                    },
                    "name":"MinHumi"
                }
            ],
            "method":"thing.service.SetTempHumiThreshold",
            "name":"SetTempHumiThreshold",
            "required":false,
            "callType":"async"
        }
    ],
    "properties":[
        {
            "identifier":"Temperature",
            "dataType":{
                "specs":{
                    "min":"-40",
                    "max":"55",
                    "step":"1"
                },
                "type":"int"
            },
            "name":"Temperature",
            "accessMode":"rw",
            "required":false
        },
        {
            "identifier":"Humidity",
            "dataType":{
                "specs":{
                    "min":"1",
                    "max":"100",
                    "step":"1"
                },
                "type":"int"
            },
            "name":"Humidity",
            "accessMode":"rw",
            "required":false
        }
    ],
    "events":[
        {
            "outputData":[
                {
                    "identifier":"Temperature",
                    "dataType":{
                        "specs":{
                            "min":"-40",
                            "max":"55",
                            "step":"1"
                        },
                        "type":"int"
                    },
                    "name":"Temperature"
                },
                {
                    "identifier":"Humidity",
                    "dataType":{
                        "specs":{
                            "min":"1",
                            "max":"100",
                            "step":"1"
                        },
                        "type":"int"
                    },
                    "name":"Humidity"
                }
            ],
            "identifier":"post",
            "method":"thing.event.property.post",
            "name":"post",
            "type":"info",
            "required":true,
            "desc":"属性上报"
        },
        {
            "outputData":[
                {
                    "identifier":"Temperature",
                    "dataType":{
                        "specs":{
                            "min":"-100",
                            "max":"100",
                            "step":"1"
                        },
                        "type":"int"
                    },
                    "name":"温度"
                }
            ],
            "identifier":"TempError",
            "method":"thing.event.TempError.post",
            "name":"TempError",
            "type":"alert",
            "required":false
        },
        {
            "outputData":[
                {
                    "identifier":"Humidity",
                    "dataType":{
                        "specs":{
                            "min":"-100",
                            "max":"100",
                            "step":"1"
                        },
                        "type":"int"
                    },
                    "name":"湿度"
                }
            ],
            "identifier":"HumiError",
            "method":"thing.event.HumiError.post",
            "name":"HumiError",
            "type":"alert",
            "required":false
        }
    ]
}

image.png

3、添加脚本并测试,脚本使用官方附录:示例脚本即可,测试正常后注意点击提交。
image.png

4、产品下面添加设备
image.png

虚拟设备调试
5、在线发送
image.png

6、设备运行状态
image.png

7、二进制数据Base64编码(对应截图中使用的AAEC的计算方法)

import sun.misc.BASE64Encoder;
import java.io.IOException;

public class ByteToBase64 {

    public static void main(String[] args) throws IOException {

        String data = "000102"; // 待转换的十六进制数据对应的字符串
        byte[] bytes = hexToByteArray(data);
        String base64Str = getBase64String(bytes);
        System.out.println("base64Str: " + base64Str);
    }

    /**
     *  二进制转base64 String
     * @param data 传入byte[]
     * @return String
     * @throws IOException
     */
    public static String getBase64String(byte[] data) throws IOException {
        BASE64Encoder encoder = new BASE64Encoder();
        return data != null ? encoder.encode(data) : "";
    }

    /*** hex字符串转byte数组
     * @param inHex 待转换的Hex字符串
     * @return  转换后的byte数组结果
     */
    public static byte[] hexToByteArray(String inHex){
        int hexlen = inHex.length();
        byte[] result;
        if (hexlen % 2 == 1){
            //奇数
            hexlen++;
            result = new byte[(hexlen/2)];
            inHex="0"+inHex;
        }else {
            //偶数
            result = new byte[(hexlen/2)];
        }
        int j=0;
        for (int i = 0; i < hexlen; i+=2){
            result[j]=hexToByte(inHex.substring(i,i+2));
            j++;
        }
        return result;
    }

    /**
     * Hex字符串转byte
     * @param inHex 待转换的Hex字符串
     * @return  转换后的byte
     */
    public static byte hexToByte(String inHex) {
        return (byte) Integer.parseInt(inHex, 16);
    }
}

设备端开源MQTT SDK接入

8、设备端代码

import com.alibaba.taro.AliyunIoTSignUtil;
import org.eclipse.paho.client.mqttv3.*;
import org.eclipse.paho.client.mqttv3.persist.MemoryPersistence;
import sun.misc.BASE64Encoder;

import java.io.IOException;
import java.util.HashMap;
import java.util.Map;

// 透传类设备测试
public class IoTDemoPubSubDemo {

    public static String productKey = "********";
    public static String deviceName = "device2";
    public static String deviceSecret = "*********";
    public static String regionId = "cn-shanghai";

    // 物模型-属性上报topic
    private static String pubTopic = "/sys/" + productKey + "/" + deviceName + "/thing/model/up_raw";
    // 物模型-订阅属性Topic
    private static String subTopic = "/sys/" + productKey + "/" + deviceName + "/thing/model/down_raw";

    private static MqttClient mqttClient;

    public static void main(String [] args){

        initAliyunIoTClient(); // 初始化Client
//        ScheduledExecutorService scheduledThreadPool = new ScheduledThreadPoolExecutor(1,
//                new ThreadFactoryBuilder().setNameFormat("thread-runner-%d").build());
//
//        scheduledThreadPool.scheduleAtFixedRate(()->postDeviceProperties(), 10,10, TimeUnit.SECONDS);
        // 汇报属性
        postDeviceProperties();
        try {
            mqttClient.subscribe(subTopic); // 订阅Topic
        } catch (MqttException e) {
            System.out.println("error:" + e.getMessage());
            e.printStackTrace();
        }

        // 设置订阅监听
        mqttClient.setCallback(new MqttCallback() {
            @Override
            public void connectionLost(Throwable throwable) {
                System.out.println("connection Lost");

            }

            @Override
            public void messageArrived(String s, MqttMessage mqttMessage) throws Exception {
                System.out.println("Sub message");
                System.out.println("Topic : " + s);
                System.out.println("16进制形式输出:");
                System.out.println(bytes2hex(mqttMessage.getPayload()));

                System.out.println("10进制形式输出:");
                byte[] bytes = mqttMessage.getPayload();
                for (byte t:bytes)
                {
                    System.out.print(t + " ");
                }
             }

            @Override
            public void deliveryComplete(IMqttDeliveryToken iMqttDeliveryToken) {

            }
        });

    }

    /**
     * 初始化 Client 对象
     */
    private static void initAliyunIoTClient() {

        try {
            // 构造连接需要的参数
            String clientId = "java" + System.currentTimeMillis();
            Map<String, String> params = new HashMap<>(16);
            params.put("productKey", productKey);
            params.put("deviceName", deviceName);
            params.put("clientId", clientId);
            String timestamp = String.valueOf(System.currentTimeMillis());
            params.put("timestamp", timestamp);
            // cn-shanghai
            String targetServer = "tcp://" + productKey + ".iot-as-mqtt."+regionId+".aliyuncs.com:1883";

            String mqttclientId = clientId + "|securemode=3,signmethod=hmacsha1,timestamp=" + timestamp + "|";
            String mqttUsername = deviceName + "&" + productKey;
            String mqttPassword = AliyunIoTSignUtil.sign(params, deviceSecret, "hmacsha1");

            connectMqtt(targetServer, mqttclientId, mqttUsername, mqttPassword);

        } catch (Exception e) {
            System.out.println("initAliyunIoTClient error " + e.getMessage());
        }
    }

    public static void connectMqtt(String url, String clientId, String mqttUsername, String mqttPassword) throws Exception {

        MemoryPersistence persistence = new MemoryPersistence();
        mqttClient = new MqttClient(url, clientId, persistence);
        MqttConnectOptions connOpts = new MqttConnectOptions();
        // MQTT 3.1.1
        connOpts.setMqttVersion(4);
        connOpts.setAutomaticReconnect(false);
        connOpts.setCleanSession(true);

        connOpts.setUserName(mqttUsername);
        connOpts.setPassword(mqttPassword.toCharArray());
        connOpts.setKeepAliveInterval(60);

        mqttClient.connect(connOpts);
    }

    /**
     * 汇报属性
     */
    private static void postDeviceProperties() {

        try {
            //上报数据
            //高级版 物模型-属性上报payload
            System.out.println("上报属性值");
            String hexString = "000111";
            byte[] payLoad = hexToByteArray(hexString);
            MqttMessage message = new MqttMessage(payLoad);
            message.setQos(0);
            mqttClient.publish(pubTopic, message);
        } catch (Exception e) {
            System.out.println(e.getMessage());
        }
    }

    // 十进制byte[] 转16进制 String
    public static String bytes2hex(byte[] bytes) {
        StringBuilder sb = new StringBuilder();
        String tmp = null;
        for (byte b : bytes) {
            // 将每个字节与0xFF进行与运算,然后转化为10进制,然后借助于Integer再转化为16进制
            tmp = Integer.toHexString(0xFF & b);
            if (tmp.length() == 1) {
                tmp = "0" + tmp;
            }
            sb.append(tmp);
        }
        return sb.toString();

    }

    /**
     * hex字符串转byte数组
     * @param inHex 待转换的Hex字符串
     * @return  转换后的byte数组结果
     */
    public static byte[] hexToByteArray(String inHex){
        int hexlen = inHex.length();
        byte[] result;
        if (hexlen % 2 == 1){
            //奇数
            hexlen++;
            result = new byte[(hexlen/2)];
            inHex="0"+inHex;
        }else {
            //偶数
            result = new byte[(hexlen/2)];
        }
        int j=0;
        for (int i = 0; i < hexlen; i+=2){
            result[j]=hexToByte(inHex.substring(i,i+2));
            j++;
        }
        return result;
    }

    /**
     * Hex字符串转byte
     * @param inHex 待转换的Hex字符串
     * @return  转换后的byte
     */
    public static byte hexToByte(String inHex) {
        return (byte) Integer.parseInt(inHex, 16);
    }
}

9、设备运行状态
image.png

10、在线调试服务调用

{
        "MaxTemp": 50,
        "MinTemp": 8,
        "MaxHumi": 90,
        "MinHumi": 10
}

image.png

11、设备端下行消息监听

上报属性值
Sub message
Topic : /sys/********/device2/thing/model/down_raw
16进制形式输出:
5d0a000332085a0a
10进制形式输出:
93 10 0 3 50 8 90 10

12、数据脚本解析

image.png

参考链接

基于开源JAVA MQTT Client连接阿里云IoT
LoRaWAN设备数据解析

相关实践学习
消息队列RocketMQ版:基础消息收发功能体验
本实验场景介绍消息队列RocketMQ版的基础消息收发功能,涵盖实例创建、Topic、Group资源创建以及消息收发体验等基础功能模块。
消息队列 MNS 入门课程
1、消息队列MNS简介 本节课介绍消息队列的MNS的基础概念 2、消息队列MNS特性 本节课介绍消息队列的MNS的主要特性 3、MNS的最佳实践及场景应用 本节课介绍消息队列的MNS的最佳实践及场景应用案例 4、手把手系列:消息队列MNS实操讲 本节课介绍消息队列的MNS的实际操作演示 5、动手实验:基于MNS,0基础轻松构建 Web Client 本节课带您一起基于MNS,0基础轻松构建 Web Client
相关文章
|
4天前
|
数据采集 存储 JavaScript
如何使用Cheerio与jsdom解析复杂的HTML结构进行数据提取
在现代网页开发中,复杂的HTML结构给爬虫技术带来挑战。传统的解析库难以应对,而Cheerio和jsdom在Node.js环境下提供了强大工具。本文探讨如何在复杂HTML结构中精确提取数据,结合代理IP、cookie、user-agent设置及多线程技术,提升数据采集的效率和准确性。通过具体示例代码,展示如何使用Cheerio和jsdom解析HTML,并进行数据归类和统计。这种方法适用于处理大量分类数据的爬虫任务,帮助开发者轻松实现高效的数据提取。
如何使用Cheerio与jsdom解析复杂的HTML结构进行数据提取
|
5天前
|
XML JSON API
淘宝京东商品详情数据解析,API接口系列
淘宝商品详情数据包括多个方面,如商品标题、价格、图片、描述、属性、SKU(库存量单位)库存、视频等。这些数据对于买家了解商品详情以及卖家管理商品都至关重要。
|
7天前
|
监控 安全 网络安全
|
7天前
|
数据库 Java 监控
Struts 2 日志管理化身神秘魔法师,洞察应用运行乾坤,演绎奇幻篇章!
【8月更文挑战第31天】在软件开发中,了解应用运行状况至关重要。日志管理作为 Struts 2 应用的关键组件,记录着每个动作和决策,如同监控摄像头,帮助我们迅速定位问题、分析性能和使用情况,为优化提供依据。Struts 2 支持多种日志框架(如 Log4j、Logback),便于配置日志级别、格式和输出位置。通过在 Action 类中添加日志记录,我们能在开发过程中获取详细信息,及时发现并解决问题。合理配置日志不仅有助于调试,还能分析用户行为,提升应用性能和稳定性。
19 0
|
7天前
|
开发者 Java
JSF EL 表达式:乘技术潮流之风,筑简洁开发之梦,触动开发者心弦的强大语言
【8月更文挑战第31天】JavaServer Faces (JSF) 的表达式语言 (EL) 是一种强大的工具,允许开发者在 JSF 页面和后台 bean 间进行简洁高效的数据绑定。本文介绍了 JSF EL 的基本概念及使用技巧,包括访问 bean 属性和方法、数据绑定、内置对象使用、条件判断和循环等,并分享了最佳实践建议,帮助提升开发效率和代码质量。
17 0
|
7天前
|
开发者 监控 开发工具
如何将JSF应用送上云端?揭秘在Google Cloud Platform上部署JSF应用的神秘步骤
【8月更文挑战第31天】本文详细介绍如何在Google Cloud Platform (GCP) 上部署JavaServer Faces (JSF) 应用。首先,确保已准备好JSF应用并通过Maven构建WAR包。接着,使用Google Cloud SDK登录并配置GCP环境。然后,创建`app.yaml`文件以配置Google App Engine,并使用`gcloud app deploy`命令完成部署。最后,通过`gcloud app browse`访问应用,并利用GCP的监控和日志服务进行管理和故障排查。整个过程简单高效,帮助开发者轻松部署和管理JSF应用。
22 0
|
7天前
|
开发者 容器 Java
Azure云之旅:JSF应用的神秘部署指南,揭开云原生的新篇章!
【8月更文挑战第31天】本文探讨了如何在Azure上部署JavaServer Faces (JSF) 应用,充分发挥其界面构建能力和云平台优势,实现高效安全的Web应用。Azure提供的多种服务如App Service、Kubernetes Service (AKS) 和DevOps简化了部署流程,并支持应用全生命周期管理。文章详细介绍了使用Azure Spring Cloud和App Service部署JSF应用的具体步骤,帮助开发者更好地利用Azure的强大功能。无论是在微服务架构下还是传统环境中,Azure都能为JSF应用提供全面支持,助力开发者拓展技术视野与实践机会。
|
7天前
|
安全 数据安全/隐私保护 架构师
用Vaadin打造坚不可摧的企业级应用:安全性考虑全解析
【8月更文挑战第31天】韩林是某金融科技公司的架构师,负责构建安全的企业级应用。在众多Web框架中,他选择了简化UI设计并内置多项安全特性的Vaadin。韩林在其技术博客中分享了使用Vaadin时的安全考虑与实现方法,包括数据加密、SSL/TLS保护、结合Spring Security的用户认证、XSS防护、CSRF防御及事务性UI更新机制。他强调,虽然Vaadin提供了丰富的安全功能,但还需根据具体需求进行调整和增强。通过合理设计,可以构建高效且安全的企业级Web应用。
16 0
|
7天前
|
开发者 Java
Play Framework深度解析:依赖注入的神秘力量,如何助力Web应用架构优化?答案即将揭晓!
【8月更文挑战第31天】依赖注入(DI)是现代软件开发的关键技术,用于分离对象创建与依赖关系,提升代码的可维护性和可测试性。Play Framework是一款高性能Java Web框架,内置了基于Google Guice的DI支持。本文探讨Play Framework中DI的最佳实践,包括定义组件、构造函数注入、字段注入以及作用域控制和自定义绑定等高级特性,帮助开发者轻松构建结构清晰、可维护性高的Web应用。
15 0
|
7天前
|
监控 数据库 开发者
云端飞跃:Play Framework应用的惊心动魄部署之旅,从本地到云的华丽转身
【8月更文挑战第31天】Play Framework是一款高效Java和Scala Web应用框架,支持快速开发与灵活部署。本文详细介绍从本地环境到云平台(如Heroku和AWS Elastic Beanstalk)的部署策略,涵盖配置文件设置、依赖管理和环境变量配置等关键步骤,并提供示例代码,帮助开发者顺利完成部署。此外,还介绍了如何进行日志和性能监控,确保应用稳定运行。通过本文,开发者可充分利用云计算的优势,实现高效部署与维护。
14 0

热门文章

最新文章

推荐镜像

更多
下一篇
DDNS