热门标签 | HotTags
当前位置:  开发笔记 > 后端 > 正文

墨天轮国产数据库沙龙|许力:阿里云原生LindormTSDB数据库,驱动工业IT&OT超融合数字化系统升级

墨天轮国产数据库沙龙|许力:阿里云原生LindormTSDB数据库,驱动工业IT&OT超融合数字化系统升级-分享嘉宾:许力阿里云Lindorm数据库产品经理整理:墨天轮导读大家好,
分享嘉宾:许力 阿里云Lindorm 数据库产品经理
整理:墨天轮

导读

大家好,我是阿里云Lindorm 数据库产品经理许力,今天非常有荣幸给大家介绍阿里云 Lindorm 数据库面向工业场景的最佳实践案例,以及产品的特点,同样要结合行业背景以及客户需求来看待它,因此我今天的分享也就由三个主题组成:市场趋势、顺势而为、核心能力。

市场趋势

工业物联网、车联网行业的迅速发展,产生了大量的数据。评测报告显示,2025年实时数据将占到数据总量的30%,几乎所有实时数据都将由物联网系统产生,同时终端设备代码量激增,终端智能设备、传感器数据将流入云端。因此,到2025年绝大多数的云端新增数据将来源于物联网、车联网等智能互联场景

放眼国内与全球市场,工业物联网都有着巨大的潜力。国家在政策层面积极支持我国工业物联网发展,2019 、2020年相继出台了《“5G+ 工业物联网”512 工程推进方案》和《关于推动工业物联网加快发展的通知》,明确了我国要由工业大国发展迈向工业强国的战略目标,加快推进“互联网 + 制造业”、“5G+ 工业物联网” 的融合创新


图1 工业物联网的国内市场容量

因此在这样的市场趋势下,时序数据的诞生与发展应该顺势而为。

顺势而为

1、工业场景数智升级的问题与挑战

新技术在创造新机遇带动产业升级的同时,也带来了新的技术挑战。更加复杂的系统架构和更高的性能、稳定性要求制约了工业物联网系统实施落地,企业需要专业技术公司来帮助解决数据采集、传输、存储、分析及可视化全链数据处理系统建设难点


图2 数智升级中的建设难点与具体问题

2、阿里云Lindorm TSDB 架构

阿里云Lindorm TSDB 作为时序数据库,它有四个关键的价值:

  • 非对称读写和快速处理海量时序数据
  • 数据存储效率非常高,单位数据量存储成本优势明显。
  • 针对时序数据构建独特的数据存储架构,读取处理时序数据方面相比其他数据库更具有性能、成本优势。
  • 边云一体化,方案集成方便简单。

3、阿里云Lindorm 设计愿景

阿里云Lindorm 的设计愿景体现在高通量高性能易用易维护四个方面。

云原生多模数据库Lindorm是面向互联网、物联网、车联网、工业互联网等设计和优化的超融合数据库,支持宽表、时序、文本、对象、流、空间等多种数据的统一访问和融合处理,并兼容多种开源标准接口和无缝集成三方生态工具,是日志、监控、账单、广告、社交、出行、风控等场景首选数据库,也是为阿里巴巴核心业务提供支撑的数据库之一,真正做到了“让海量数据看得见、存得起“。


图3 Lindorm TSDB 驱动的工业数据云系统架构

阿里云原生数据Lindorm也应用在工业数据云场景上。Lindorm面向BEV新能源电动汽车监控场景,以极致性价比提供海量数据存储、开放生态兼容、多引擎异构数据融合等能力,与江铃和长城汽车等车厂、东软等车联网服务提供商共建联合解决方案支撑未来网联汽车系统数字化升级。


图4 Lindorm 数据库测评证书

核心能力

1、核心能力一:软硬件定义多级存储

首先,在不同的场景下,用户可以通过权衡性能和存储的成本来选择存储方式,比如性能型存储、标准型存储、容量型存储。不仅提供了存储的灵活度,同时也能够在海量数据的场景下,更大地节省存储的投入。

2、核心能力二:自动冷热分离

用关系型数据库来实现冷热数据的分离存储与分库分表的难度很高,因此从工业场景下,更强调的是一个易于维护易用的自动的做冷热数据的一个管理。

Lindorm数据库将数据自动冷热分层,灵活调整分割线,并且应用零改造、全透明访问,冷数据存储成本大幅减少,热数据访问性能有效提升。

3、核心能力三:智能特征压缩

智能特征压缩也是Lindorm TSDB数据库的产品核心能力之一。相比业界通用的SNAPPY, 压缩率提升50%+,压缩比高达10:1


图5 Lindorm TSDB 智能特征压缩的核心能力

4、核心能力四:高性能吞吐

某业务HBase迁移至Lindorm后,写入RT减少为1/3


图6 Lindorm TSDB 高性能吞吐的核心能力

5、核心能力五:流库一体

传统ETL(Extract-Transform-Load,即数据从来源端经过抽取(extract)、转换(transform)、加载(load)至目的端)存在着使用门槛高,数据延迟大的痛点,而Lindorm数据库流库一体,ELT即开即用的功能。


图7 Lindorm TSDB 流库一体的核心能力

6、核心能力六:时序流计算

时序流计算是产品的第六个核心能力。产品中丰富的时序多维聚合算子,以支持在上层进行异常检测、趋势预测的算法,从而进行复杂的时序数据处理。


图8 Lindorm TSDB 时序流计算的核心能力

7、核心能力七:时序引擎 TSQL

同时在查询语句上,兼容SQL语法,方便进行数据对接与改造。


图9 Lindorm TSDB 时序引擎 TSQL的核心能力

8、核心能力八:时序洞察

最后,Lindorm数据库的核心能力还体现在时序洞察方面。除了有异常检测,预测这类常用的时序分析的算法之外,还有序列数据的降维算法,帮助用户从高维数据里边找到相似性、相关性与因果关系。


图10 Lindorm TSDB 在时序洞察上的核心能力

以上就是我今天的分享内容,谢谢大家!

更多精彩内容,欢迎大家观看视频回放与会议资料
视频回放:https://www.modb.pro/video/6118
会议资料:https://www.modb.pro/doc/56839

  • 查看原文:https://www.modb.pro/db/335237
  • 相关阅读:国产数据库沙龙 | 张玮绚:TDengine,高性能、分布式、支持SQL的时序数据库
  • 查看【国产数据库沙龙】往期生态工具、图数据库专场资源:https://www.modb.pro/topic/157860

墨天轮,围绕数据人的学习成长提供一站式的全面服务,打造集新闻资讯、在线问答、活动直播、在线课程、文档阅览、资源下载、知识分享及在线运维为一体的统一平台,持续促进数据领域的知识传播和技术创新。

关注官方公众号: 墨天轮、 墨天轮平台、墨天轮成长营、数据库国产化 、数据库资讯


推荐阅读
  • 深入解析Redis内存对象模型
    本文详细介绍了Redis内存对象模型的关键知识点,包括内存统计、内存分配、数据存储细节及优化策略。通过实际案例和专业分析,帮助读者全面理解Redis内存管理机制。 ... [详细]
  • 智慧城市建设现状及未来趋势
    随着新基建政策的推进及‘十四五’规划的实施,我国正步入以5G、人工智能等先进技术引领的智慧经济新时代。规划强调加速数字化转型,促进数字政府建设,新基建政策亦倡导城市基础设施的全面数字化。本文探讨了智慧城市的发展背景、全球及国内进展、市场规模、架构设计,以及百度、阿里、腾讯、华为等领军企业在该领域的布局策略。 ... [详细]
  • 热璞数据库与云宏达成兼容性互认证,共筑数据安全屏障
    热璞数据库与云宏信息技术有限公司近期宣布完成产品兼容性互认证,旨在提升数据安全性与稳定性,支持企业数字化转型。 ... [详细]
  • 优化ListView性能
    本文深入探讨了如何通过多种技术手段优化ListView的性能,包括视图复用、ViewHolder模式、分批加载数据、图片优化及内存管理等。这些方法能够显著提升应用的响应速度和用户体验。 ... [详细]
  • 1:有如下一段程序:packagea.b.c;publicclassTest{privatestaticinti0;publicintgetNext(){return ... [详细]
  • 数据库内核开发入门 | 搭建研发环境的初步指南
    本课程将带你从零开始,逐步掌握数据库内核开发的基础知识和实践技能,重点介绍如何搭建OceanBase的开发环境。 ... [详细]
  • 深度学习理论解析与理解
    梯度方向指示函数值增加的方向,由各轴方向的偏导数综合而成,其模长表示函数值变化的速率。本文详细探讨了导数、偏导数、梯度等概念,并结合Softmax函数、卷积神经网络(CNN)中的卷积计算、权值共享及池化操作进行了深入分析。 ... [详细]
  • Netflix利用Druid实现高效实时数据分析
    本文探讨了全球领先的在线娱乐公司Netflix如何通过采用Apache Druid,实现了高效的数据采集、处理和实时分析,从而显著提升了用户体验和业务决策的准确性。文章详细介绍了Netflix在系统架构、数据摄取、管理和查询方面的实践,并展示了Druid在大规模数据处理中的卓越性能。 ... [详细]
  • 本文介绍了如何在 C# 和 XNA 框架中实现一个自定义的 3x3 矩阵类(MMatrix33),旨在深入理解矩阵运算及其应用场景。该类参考了 AS3 Starling 和其他相关资源,以确保算法的准确性和高效性。 ... [详细]
  • 为何我选择了华为云GaussDB数据库
    本文分享了作者选择华为云GaussDB数据库的理由,详细介绍了GaussDB(for MySQL)的技术特性和优势,以及它在金融和互联网行业的应用场景。 ... [详细]
  • 使用Python在SAE上开发新浪微博应用的初步探索
    最近重新审视了新浪云平台(SAE)提供的服务,发现其已支持Python开发。本文将详细介绍如何利用Django框架构建一个简单的新浪微博应用,并分享开发过程中的关键步骤。 ... [详细]
  • 最近团队在部署DLP,作为一个技术人员对于黑盒看不到的地方还是充满了好奇心。多次咨询乙方人员DLP的算法原理是什么,他们都以商业秘密为由避而不谈,不得已只能自己查资料学习,于是有了下面的浅见。身为甲方,虽然不需要开发DLP产品,但是也有必要弄明白DLP基本的原理。俗话说工欲善其事必先利其器,只有在懂这个工具的原理之后才能更加灵活地使用这个工具,即使出现意外情况也能快速排错,越接近底层,越接近真相。根据DLP的实际用途,本文将DLP检测分为2部分,泄露关键字检测和近似重复文档检测。 ... [详细]
  • 网易严选Java开发面试:MySQL索引深度解析
    本文详细记录了网易严选Java开发岗位的面试经验,特别针对MySQL索引相关的技术问题进行了深入探讨。通过本文,读者可以了解面试官常问的索引问题及其背后的原理。 ... [详细]
  • 卷积神经网络(CNN)基础理论与架构解析
    本文介绍了卷积神经网络(CNN)的基本概念、常见结构及其各层的功能。重点讨论了LeNet-5、AlexNet、ZFNet、VGGNet和ResNet等经典模型,并详细解释了输入层、卷积层、激活层、池化层和全连接层的工作原理及优化方法。 ... [详细]
  • 深入解析 Vue 的 Transition 组件与第三方动画库的结合使用
    本文详细介绍了 Vue 中的 Transition 组件,探讨其内置类名机制、触发时机及自定义类名的应用。同时,结合 animate.css 和 GSAP 等第三方库,展示了如何实现复杂的动画效果。 ... [详细]
author-avatar
ccccccc_fly_887
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有