物联网数据库 IoTDB —— 从协议到数据

2024-03-13 01:30

本文主要是介绍物联网数据库 IoTDB —— 从协议到数据,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

在这个系列之前的文章里,我们介绍了IoTDB的LSM,以及Iot中的最佳实践,这次我们看看如何将mqtt和IoTDB整合起来。下面我们开始:

IoTDB in docker

首先,做一个测试环境,我现在越发喜欢docker 和 WSL 了,除了吃点硬盘,内存和CPU资源以外,没有什么缺点了......

run in docker

直接把该开的端口都打开,只是测试环境,我就没再挂目录。

docker run -d -p 6667:6667 -p 31999:31999 -p 8181:8181 -p 5555:5555 -p 1883:1883 apache/iotdb

等待一会,执行 docker ps 查看是否成功了

➜ ~ docker ps
CONTAINER ID   IMAGE         COMMAND                 CREATED       STATUS       PORTS                                                                                                                                                                                                                       NAMES
ad9b18f8bff3   apache/iotdb   "/iotdb/sbin/start-s…"   2 hours ago   Up 2 hours    0.0.0.0:1883->1883/tcp, :::1883->1883/tcp, 0.0.0.0:5555->5555/tcp, :::5555->5555/tcp, 0.0.0.0:6667->6667/tcp, :::6667->6667/tcp, 0.0.0.0:8181->8181/tcp, :::

初步的IoTDB in docker 环境,我们就搞好了。接下来,开启mqtt服务。

开启 Mqtt 服务

进入IoTDB的docker docker exec -it ad9b18f8bff3 /bin/bash

编辑配置文件vi iotdb/conf/iotdb-engine.properties

开启服务,根据自己的需要,配置ip和端口等。

####################
### MQTT Broker Configuration
##################### whether to enable the mqtt service.
enable_mqtt_service=false   # 修改成 true , 代表开启 mqtt服务# the mqtt service binding host.
mqtt_host=0.0.0.0 # ip# the mqtt service binding port.
mqtt_port=1883  # 端口# the handler pool size for handing the mqtt messages.
mqtt_handler_pool_size=1# the mqtt message payload formatter.
mqtt_payload_formatter=json  # 数据格式# max length of mqtt message in byte
mqtt_max_message_size=1048576

重启服务,如果不会,就重启docker镜像。

IoTDB 基础操作

  • 启动服务: sbin/start-client.sh

    root@ad9b18f8bff3:/iotdb/sbin# ./start-cli.sh
    ---------------------
    Starting IoTDB Cli
    ---------------------
    _____       _________ ______   ______
    |_   _|     | _   _ ||_   _ `.|_   _ \
    | |   .--.|_/ | | \_| | | `. \ | |_) |
    | | / .'`\ \ | |     | | | | | __'.
    _| |_| \__. | _| |_   _| |_.' /_| |__) |
    |_____|'.__.' |_____| |______.'|_______/ version 0.11.1IoTDB> login successfully
  • 退出CLI: quitexit

  • 停止服务:$sbin/stop-server.sh

  • 设置一个存储组到IoTDB,名为root  :  IoTDB> SET STORAGE GROUP TO root

  • 查看当前IoTDB的存储组 : IoTDB> SHOW STORAGE GROUP

    IoTDB> SHOW STORAGE GROUP
    +-------------+
    |storage group|
    +-------------+
    |   root.test|
    +-------------+
    Total line number = 1
    It costs 0.127s
  • 查看系统中存在的所有时间序列 :IoTDB> SHOW TIMESERIES

    IoTDB> show timeseries
    +-------------------------------+-----+-------------+--------+--------+-----------+----+----------+
    |                     timeseries|alias|storage group|dataType|encoding|compression|tags|attributes|
    +-------------------------------+-----+-------------+--------+--------+-----------+----+----------+
    |root.test.wf01.wt01.temperature| null|   root.test|   FLOAT| GORILLA|     SNAPPY|null|     null|
    |     root.test.wf01.wt01.status| null|   root.test| BOOLEAN|     RLE|     SNAPPY|null|     null|
    |   root.test.wf01.wt01.hardware| null|   root.test|   TEXT|   PLAIN|     SNAPPY|null|     null|
    +-------------------------------+-----+-------------+--------+--------+-----------+----+----------+
    Total line number = 3
    It costs 0.009s
  • 查看系统中存在的特定时间序列: SHOW TIMESERIES root.test.wf01.wt01.status

    IoTDB> SHOW TIMESERIES root.test.wf01.wt01.status
    +--------------------------+-----+-------------+--------+--------+-----------+----+----------+
    |               timeseries|alias|storage group|dataType|encoding|compression|tags|attributes|
    +--------------------------+-----+-------------+--------+--------+-----------+----+----------+
    |root.test.wf01.wt01.status| null|   root.test| BOOLEAN|     RLE|     SNAPPY|null|     null|
    +--------------------------+-----+-------------+--------+--------+-----------+----+----------+
    Total line number = 1
    It costs 0.003s
  • 插入数据 INSERT INTO root.test.wf01.wt01(timestamp,status,temperature) values(200,false,20.71)

    IoTDB> INSERT INTO root.test.wf01.wt01(timestamp,status,temperature) values(200,false,20.71)
    Msg: The statement is executed successfully.
  • 查看数据: select * from root.test;

    IoTDB> select * from root.test;
    +------------------------+-------------------------------+--------------------------+----------------------------+
    |                   Time|root.test.wf01.wt01.temperature|root.test.wf01.wt01.status|root.test.wf01.wt01.hardware|
    +------------------------+-------------------------------+--------------------------+----------------------------+
    |2021-01-20T02:00:00.000Z|                           21.2|                     true|                       hello|
    +------------------------+-------------------------------+--------------------------+----------------------------+
    Total line number = 1
    It costs 0.077s
  • 查看设备:show devices

    IoTDB> show devices
    +-------------------+
    |           devices|
    +-------------------+
    |root.test.wf01.wt01|
    +-------------------+
    Total line number = 1
    It costs 0.002s

mqtt to IoTDB

代码

构建一个实体对象,用于存储

package wang.datahub.iotdb;import com.google.gson.Gson;
import java.util.List;public class IotdbVO {private String device;private long timestamp = System.currentTimeMillis();private List<String> measurements;private List<Object> values;public String getDevice() {return device;}public void setDevice(String device) {this.device = device;}public long getTimestamp() {return timestamp;}public void setTimestamp(long timestamp) {this.timestamp = timestamp;}public List<String> getMeasurements() {return measurements;}public void setMeasurements(List<String> measurements) {this.measurements = measurements;}public List<Object> getValues() {return values;}public void setValues(List<Object> values) {this.values = values;}public String toJson(){Gson g = new Gson();String jsonData = g.toJson(this);return jsonData;}@Overridepublic String toString() {return "IotdbVO{" +"device='" + device + '\'' +", timestamp=" + timestamp +", measurements=" + measurements +", values=" + values +'}';}
}

使用祖传的代码来模拟数据发射到IoTDB,这里直接将mqtt的主机和端口,配置到前文所修改的IoTDB的mqtt服务上,就大功告成了。

package wang.datahub.iotdb;import org.fusesource.mqtt.client.BlockingConnection;
import org.fusesource.mqtt.client.MQTT;
import org.fusesource.mqtt.client.QoS;import java.util.ArrayList;
import java.util.List;
import java.util.Random;public class EmmitToIotdb {public static void main(String[] args) {String[] hardwares = new String[]{"a1","b1","b2","c3","d1","f5"};int count = 1000;for(int i = 0; i < count ;i++){IotdbVO iotdbVO = new IotdbVO();iotdbVO.setDevice("root.test.wf01.wt01");List<String> measurements = new ArrayList<>();List<Object> values = new ArrayList<>();measurements.add("temperature");measurements.add("status");measurements.add("hardware");Random r = new Random();values.add(r.nextInt(40));values.add(r.nextBoolean());values.add(hardwares[r.nextInt(hardwares.length)]);iotdbVO.setMeasurements(measurements);iotdbVO.setValues(values);emmitToIotdb(iotdbVO);}}public static void emmitToIotdb(IotdbVO content){try {MQTT mqtt = new MQTT();mqtt.setHost("127.0.0.1", 1883);mqtt.setUserName("root");mqtt.setPassword("root");BlockingConnection connection = mqtt.blockingConnection();connection.connect();String payload = content.toJson();connection.publish(content.getDevice(),payload.getBytes(), QoS.AT_LEAST_ONCE,false);connection.disconnect();} catch (Exception e){e.printStackTrace();}}}

执行结果

这篇关于物联网数据库 IoTDB —— 从协议到数据的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/803234

相关文章

Python MySQL如何通过Binlog获取变更记录恢复数据

《PythonMySQL如何通过Binlog获取变更记录恢复数据》本文介绍了如何使用Python和pymysqlreplication库通过MySQL的二进制日志(Binlog)获取数据库的变更记录... 目录python mysql通过Binlog获取变更记录恢复数据1.安装pymysqlreplicat

Linux使用dd命令来复制和转换数据的操作方法

《Linux使用dd命令来复制和转换数据的操作方法》Linux中的dd命令是一个功能强大的数据复制和转换实用程序,它以较低级别运行,通常用于创建可启动的USB驱动器、克隆磁盘和生成随机数据等任务,本文... 目录简介功能和能力语法常用选项示例用法基础用法创建可启动www.chinasem.cn的 USB 驱动

IDEA如何切换数据库版本mysql5或mysql8

《IDEA如何切换数据库版本mysql5或mysql8》本文介绍了如何将IntelliJIDEA从MySQL5切换到MySQL8的详细步骤,包括下载MySQL8、安装、配置、停止旧服务、启动新服务以及... 目录问题描述解决方案第一步第二步第三步第四步第五步总结问题描述最近想开发一个新应用,想使用mysq

Oracle数据库使用 listagg去重删除重复数据的方法汇总

《Oracle数据库使用listagg去重删除重复数据的方法汇总》文章介绍了在Oracle数据库中使用LISTAGG和XMLAGG函数进行字符串聚合并去重的方法,包括去重聚合、使用XML解析和CLO... 目录案例表第一种:使用wm_concat() + distinct去重聚合第二种:使用listagg,

Python实现将实体类列表数据导出到Excel文件

《Python实现将实体类列表数据导出到Excel文件》在数据处理和报告生成中,将实体类的列表数据导出到Excel文件是一项常见任务,Python提供了多种库来实现这一目标,下面就来跟随小编一起学习一... 目录一、环境准备二、定义实体类三、创建实体类列表四、将实体类列表转换为DataFrame五、导出Da

Python实现数据清洗的18种方法

《Python实现数据清洗的18种方法》本文主要介绍了Python实现数据清洗的18种方法,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起学... 目录1. 去除字符串两边空格2. 转换数据类型3. 大小写转换4. 移除列表中的重复元素5. 快速统

Python数据处理之导入导出Excel数据方式

《Python数据处理之导入导出Excel数据方式》Python是Excel数据处理的绝佳工具,通过Pandas和Openpyxl等库可以实现数据的导入、导出和自动化处理,从基础的数据读取和清洗到复杂... 目录python导入导出Excel数据开启数据之旅:为什么Python是Excel数据处理的最佳拍档

在Pandas中进行数据重命名的方法示例

《在Pandas中进行数据重命名的方法示例》Pandas作为Python中最流行的数据处理库,提供了强大的数据操作功能,其中数据重命名是常见且基础的操作之一,本文将通过简洁明了的讲解和丰富的代码示例,... 目录一、引言二、Pandas rename方法简介三、列名重命名3.1 使用字典进行列名重命名3.编

Python使用Pandas库将Excel数据叠加生成新DataFrame的操作指南

《Python使用Pandas库将Excel数据叠加生成新DataFrame的操作指南》在日常数据处理工作中,我们经常需要将不同Excel文档中的数据整合到一个新的DataFrame中,以便进行进一步... 目录一、准备工作二、读取Excel文件三、数据叠加四、处理重复数据(可选)五、保存新DataFram

Java读取InfluxDB数据库的方法详解

《Java读取InfluxDB数据库的方法详解》本文介绍基于Java语言,读取InfluxDB数据库的方法,包括读取InfluxDB的所有数据库,以及指定数据库中的measurement、field、... 首先,创建一个Java项目,用于撰写代码。接下来,配置所需要的依赖;这里我们就选择可用于与Infl