热门标签 | HotTags
当前位置:  开发笔记 > 数据库 > 正文

新一代数据库的五大标准

新一代的数据库区别传统的数据库的地方在于:对巨量拥有简单数据建模的主要类型数据,能够做到快速处理;对TB级数据(甚至PB级),可以轻松应对;对于我们终端用户,还要实现SQL语句的实时操作。这样的话,新一代的数据库标准就必须包括:MPP—

新一代的 数据库 区别传统的 数据库 的地方在于:对巨量拥有简单 数据 建模的主要类型 数据 ,能够做到快速处理;对TB级数据(甚至PB级),可以轻松应对;对于我们终端用户,还要实现 SQL 语句的实时操作。这样的话,新一代的数据库标准就必须包括: MPP —

新一代的数据库区别传统的数据库的地方在于:对巨量拥有简单数据建模的主要类型数据,能够做到快速处理;对TB级数据(甚至PB级),可以轻松应对;对于我们终端用户,还要实现SQL语句的实时操作。这样的话,新一代的数据库标准就必须包括:

  • MPP — 大规模的并行处理能力。新一代的数据库必须提供大规模的并行处理能力,实现不同机器上同时摄入、处理或者查询等操作。性能必须远甚于只在单台机器上运行,有着数据摄入瓶颈的传统数据库。
  • 无共享架构: 无共享(内存或磁盘等)架构就意味着新一代数据库系统将无懈可击!每个节点工作都是独立的,这样即使其中一台机器出故障,其他机器仍然可以保持继续运行。这在MPP环境中非常重要,因为经常可能有数百台机器同时并行处理数据,机械出故障是难以避免的。
  • 柱状结构:而不是关系数据库中常见的队列式的数据存储或处理。柱状结构下,只有对结果起决定性作用栏目中的数据才会被处理,对比处理所有数据,结果简直是瞬间给出的。这同样意味着数据不用像传统的数据库中一样被有组织的放入整齐的列表中。
  • 卓越的数据压缩能力:卓越的数据压缩能力允许新一代的数据库摄入和储存更多的数据,而且还会比传统的数据库更节约硬件资源。一个拥有10:1压缩能力的数据仓库,举个例子:可以把10TB的数据压缩到1TB。数据压缩的相关技术叫做文件编码,这项技术对数据压缩起着决定性作用。
  • 通用的硬件设施:就像Hadoop集群一样,大部分的新一代数据库都可以在通用的硬件设施上使用,来自Dell、IBM或者其他的,这样使用者就可以在对比一系列来厂商后做出合适的决定。

虽然新的数据库还只是蓝图,但是纵观数据库发展史后不难发现:也许不用多久就会超越上述标准了。

推荐阅读
  • Hadoop入门与核心组件详解
    本文详细介绍了Hadoop的基础知识及其核心组件,包括HDFS、MapReduce和YARN。通过本文,读者可以全面了解Hadoop的生态系统及应用场景。 ... [详细]
  • 本文详细探讨了 org.apache.hadoop.ha.HAServiceTarget 类中的 checkFencingConfigured 方法,包括其功能、应用场景及代码示例。通过实际代码片段,帮助开发者更好地理解和使用该方法。 ... [详细]
  • 简化报表生成:EasyReport工具的全面解析
    本文详细介绍了EasyReport,一个易于使用的开源Web报表工具。该工具支持Hadoop、HBase及多种关系型数据库,能够将SQL查询结果转换为HTML表格,并提供Excel导出、图表显示和表头冻结等功能。 ... [详细]
  • 本文探讨了如何在Hive(基于Hadoop)环境中编写类似SQL的语句,以去除字段中的空格。特别是在处理邮政编码等数据时,去除特定位置的空格是常见的需求。 ... [详细]
  • 本文详细介绍如何使用 Apache Spark 执行基本任务,包括启动 Spark Shell、运行示例程序以及编写简单的 WordCount 程序。同时提供了参数配置的注意事项和优化建议。 ... [详细]
  • 本文详细介绍了 Flink 和 YARN 的交互机制。YARN 是 Hadoop 生态系统中的资源管理组件,类似于 Spark on YARN 的配置方式。我们将基于官方文档,深入探讨如何在 YARN 上部署和运行 Flink 任务。 ... [详细]
  • Hadoop发行版本选择指南:技术解析与应用实践
    本文详细介绍了Hadoop的不同发行版本及其特点,帮助读者根据实际需求选择最合适的Hadoop版本。内容涵盖Apache Hadoop、Cloudera CDH等主流版本的特性及应用场景。 ... [详细]
  • 全面解析运维监控:白盒与黑盒监控及四大黄金指标
    本文深入探讨了白盒和黑盒监控的概念,以及它们在系统监控中的应用。通过详细分析基础监控和业务监控的不同采集方法,结合四个黄金指标的解读,帮助读者更好地理解和实施有效的监控策略。 ... [详细]
  • 从码农到创业者:我的职业转型之路
    在观察了众多同行的职业发展后,我决定分享自己的故事。本文探讨了为什么大多数程序员难以成为架构师,并阐述了我从一家外企离职后投身创业的心路历程。 ... [详细]
  • 本文详细介绍了如何在 Android 中使用值动画(ValueAnimator)来动态调整 ImageView 的高度,并探讨了相关的关键属性和方法,包括图片填充后的高度、原始图片高度、动画变化因子以及布局重置等。 ... [详细]
  • CentOS 6.8 上安装 Oracle 10.2.0.1 的常见问题及解决方案
    本文记录了在 CentOS 6.8 系统上安装 Oracle 10.2.0.1 数据库时遇到的问题及解决方法,包括依赖库缺失、操作系统版本不兼容、用户权限不足等问题。 ... [详细]
  • 本文详细介绍了如何搭建和配置ZooKeeper集群,包括环境变量设置、配置文件调整、主机映射关系配置及启动验证等关键步骤。 ... [详细]
  • 本文详细介绍了 Linux 系统中用户、组和文件权限的设置方法,包括基本权限(读、写、执行)、特殊权限(SUID、SGID、Sticky Bit)以及相关配置文件的使用。 ... [详细]
  • 深入解析Hadoop的核心组件与工作原理
    本文详细介绍了Hadoop的三大核心组件:分布式文件系统HDFS、资源管理器YARN和分布式计算框架MapReduce。通过分析这些组件的工作机制,帮助读者更好地理解Hadoop的架构及其在大数据处理中的应用。 ... [详细]
  • 本文探讨了Hive作业中Map任务数量的确定方式,主要涉及HiveInputFormat和CombineHiveInputFormat两种InputFormat的分片计算逻辑。通过调整相关参数,可以有效控制Map任务的数量,进而优化Hive作业的性能。 ... [详细]
author-avatar
大美女慧慧慧
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有