利用NBI可视化+influxDB时序数据库构建物联网大数据分析平台

什么是时序数据库
       先来介绍什么是时序数据。时序数据是基于时间的一系列的数据。在有时间的坐标中将这些数据点连成线,往过去看可以做成多纬度报表,揭示其趋势性、规律性、异常性;往未来看可以做大数据分析,机器学习,实现预测和预警。
时序数据库就是存放时序数据的数据库,并且需要支持时序数据的快速写入、持久化、多纬度的聚合查询等基本功能。
       对比传统数据库仅仅记录了数据的当前值,时序数据库则记录了所有的历史数据。同时时序数据的查询也总是会带上时间作为过滤条件。
时序数据库的场景
所有有时序数据产生,并且需要展现其历史趋势、周期规律、异常性的,进一步对未来做出预测分析的,都是时序数据库适合的场景。
在工业物联网环境监控方向,由于工业上面的要求,需要将工况数据存储起来。举例客户每个厂区具有20000个监测点,500毫秒一个采集周期,一共20个厂区。这样算起来一年将产生惊人的26万亿个数据点。假设每个点50Byte,数据总量将达1P(如果每台服务器10T的硬盘,那么总共需要100多台服务器)。这些数据不只是要实时生成,写入存储;还要支持快速查询,做可视化的展示,帮助管理者分析决策;并且也能够用来做大数据分析,发现深层次的问题,帮助企业节能减排,增加效益。最终客户采用了influxDB时序数据库方案,帮助他解决了难题。
在互联网场景中,也有大量的时序数据产生。举个例子,为了保障用户的使用体验,将用户的每次网络卡顿、网络延迟都会记录到百度天工的时序数据库。由时序数据库直接生成报表以供技术产品做分析,尽早的发现、解决问题,保证用户的使用体验。
什么是InfluxDB

InfluxDB是一个由InfluxData开发的开源时序型数据。它由Go写成,着力于高性能地查询与存储时序型数据。InfluxDB被广泛应用于存储系统的监控数据,IoT行业的实时数据等场景。

Influxdb关键特性

1. 支持类似SQL的查询语法
2.提供了Http Api直接访问
3.存储超过10亿级别的时间序列数据
4.灵活的数据保留策略,可以定义到Database级别(只保留最热的数据)
5.内置管理接口和CMD
6.飞一般速度的聚合查询
7.按不同时间段进行聚合查询
8.内置持续查询功能,定时计算指定时间段的数据,插入到指定表中,可以理解为定时归集数据
9. 水平扩展,支持集群模式
方案介绍:

技术架构:

NBI可视化平台介绍:

NBI大数据可视化分析平台作为新一代自助式、探索式分析工具,在产品设计理念上始终从用户的角度出发,一直围绕简单、易用,强调交互分析为目的的新型产品。我们将数据分析的各环节(数据准备、自服务数据建模、探索式分析、权限管控)融入到系统当中,让企业有序的、安全的管理数据和分析数据。

产品特点:

案例展示:

更多信息请参考(http://www.easydatavis.com

(0)

相关推荐

  • 时序数据库InfluxDB(I)- 搭建与采集信息demo操作

    搭建环境:vmware workstation pro15.5.0, ubuntu18.04.3 实践时间:2019.10.12-10.27 (一)时序数据库InfluxDB准备 (1)安装 曾出现问 ...

  • 时间序列数据库分析

    什么是时间序列数据 什么是时间序列(Time Series,以下简称时序)数据?从定义上来说,就是一串按时间维度索引的数据.用描述性的语言来解释什么是时序数据,简单的说,就是这类数据描述了某个被测量的 ...

  • 物联网关键技术:时序数据库

    物联网系统中,需要实时处理的数据可通过队列送入流处理引擎:不需要实时处理的数据,用于离线分析或数据挖掘,需要先存储起来.物联网系统的数据存储的方式很多,要根据实际场景来选择. 物理网系统各种可能的存储 ...

  • (7条消息) C# 使用ClickHouse时序数据库封装

    2020-12-19 16:29:09 最后发布:2020-12-19 16:29:09首次发布:2020-12-19 16:29:09 版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA ...

  • NBI可视化集成clickhouse,实现百亿级数据分析能力

    什么是ClickHouse ClickHouse是一款MPP架构的列式存储数据库,并允许使用SQL查询实时生成分析报告,也是一个新的开源列式数据库. 随着业务的迅猛增长,Yandex.Metrica目 ...

  • 文献精读|基于SEER数据库构建肝癌非转移Nomogram

    欢迎来到医科研,这里是白介素2的读书笔记,跟我一起聊临床与科研的故事, 生物医学数据挖掘,R语言,TCGA.GEO数据挖掘. 摘要 目的 文章的目的比较明确,寻找肝癌肺转移相关的风险因素,并建立预后 ...

  • CMDB:ITSM的必需—配置管理数据库构建过程拆解

    在IT管理向ITSM(IT服务管理)体系演进的征途中,CMDB(配置管理数据库)从传统的电子报表中走来,蜕变为基于ITIL最佳实践的IT服务管理核心.对于所有的ITSM体系的建设者而言,CMDB都是一 ...

  • 老肯医疗:20余年消毒灭菌经验,5G技术加持,构建智慧物联网服务云平台

    自2005年11月27日国际电信联盟(ITU)在突尼斯举行的信息社会峰会上物联网概念的正式提出,到今天已经过去14年,物联网已经从当初的概念落地到各行各业,相关的产品和服务对我们的生活.工作带来了翻天 ...

  • 未来会是时序数据库的天下吗?

    时序数据简介 时序数据库最近正在爆发,各搜索引擎的搜索指数也都是呈上升趋势的. DB-Engine 上的排名: 这份排行榜,都是时序数据库. 时序数据库的兴起是有原因的.就拿无人驾驶来说,无人车在运行 ...

  • 张云勇:把握时代新机遇,构建物联网转售新生态

    通信世界网消息(CWW)2021年是十四五规划开局之年,发展物联网成为国家落实创新驱动.培育发展新动能.实现智慧社会.工业互联网等一系列重大战略部署的重要举措.为了推动物联网转售在试点期间业务探索,持 ...