热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

ApacheKudu又升级?1.4版本改进了Web界面

ApacheKudu1.4已经发布,改进了KuduWeb界面的可用性,以及一个新的文件系统检查实用程序。ApacheKudu原来是Cloudera的项目,现在是ApacheHado

Apache Kudu 1.4已经发布,改进了Kudu Web界面的可用性,以及一个新的文件系统检查实用程序。

Apache Kudu原来是Cloudera的项目,现在是Apache Hadoop生态系统的一部分。Apache表示其可以用于快速分析数据。实际上,Kudu是一个柱状存储引擎,填补了Hadoop分布式文件系统(HDFS)和HBase NoSQL数据库之间的差距。

Kudu表具备由一个或者多个列组成的主键,并使用诸如游程编码,差分编码和向量化位打包等高效地存储读取数据。它旨在与结构化数据一起使用,支持低推迟随机访问以及高效的分析访问模式。对于“NoSQL”的访问,程序员可以选择Java,C ++或者Python API。

Kudu在Hadoop集群中扮演着“好公民”的角色,程序员可以使用Java用户端从现场实时数据源将数据流传输到Kudu,而后使用Spark,Impala或者MapReduce立即解决。程序员甚至可以透明地将Kudu表与其余Hadoop存储(如HDFS或者HBase)中的数据进行连接。它可以与HDFS DataNodes共享数据磁盘,并且轻负载下的RAM占用空间小至1 GB。

Apache Kudu又升级?1.4版本改进了Web界面

C ++和Java用户端库已经在新版本中进行了升级,因而可以改变存储属性(如编码和压缩)以及现有列的默认值。C ++用户端库附带一个试验性的KuduPartitioner API,程序员可以使用它来有效地将行映射到相关联的分区和主机。Java用户端库也已升级,以支持扫描仪上的容错功能。

Kudu现在具备在服务器上存储的所有数据上计算,存储和验证校验和的可选功能。要知道,以前的版本只对存储数据的某些部分执行校验和。

Kudu Web界面的可用性得到改进,特别是对于服务器托管许多平板电脑或者具备许多分区的情况,并在可切换部分下显示完整列表。

维护也得到了改进。它可以更好地利用已配置的维护线程,并且当内存消耗超过配置的进程范围的60%时,将主动调度内存中的数据进行刷新。

Kudu命令行工具也通过新的高级管理命令得到改进。

这样的改进,程序员还满意吗?来来来,评论区留言吧!


推荐阅读
  • 本文介绍了Python高级网络编程及TCP/IP协议簇的OSI七层模型。首先简单介绍了七层模型的各层及其封装解封装过程。然后讨论了程序开发中涉及到的网络通信内容,主要包括TCP协议、UDP协议和IPV4协议。最后还介绍了socket编程、聊天socket实现、远程执行命令、上传文件、socketserver及其源码分析等相关内容。 ... [详细]
  • 搭建Windows Server 2012 R2 IIS8.5+PHP(FastCGI)+MySQL环境的详细步骤
    本文详细介绍了搭建Windows Server 2012 R2 IIS8.5+PHP(FastCGI)+MySQL环境的步骤,包括环境说明、相关软件下载的地址以及所需的插件下载地址。 ... [详细]
  • 本文介绍了在Win10上安装WinPythonHadoop的详细步骤,包括安装Python环境、安装JDK8、安装pyspark、安装Hadoop和Spark、设置环境变量、下载winutils.exe等。同时提醒注意Hadoop版本与pyspark版本的一致性,并建议重启电脑以确保安装成功。 ... [详细]
  • ZooKeeper 学习
    前言相信大家对ZooKeeper应该不算陌生。但是你真的了解ZooKeeper是个什么东西吗?如果别人面试官让你给他讲讲ZooKeeper是个什么东西, ... [详细]
  • 这个问题困扰了我两天,卸载Dr.COM客户端(我们学校上网要装这个客户端登陆服务器,以后只能在网页里输入用户名和密码了),问题解决了。问题的现象:在实验室机台式机上安装openfire和sp ... [详细]
  • 《Spark核心技术与高级应用》——1.2节Spark的重要扩展
    本节书摘来自华章社区《Spark核心技术与高级应用》一书中的第1章,第1.2节Spark的重要扩展,作者于俊向海代其锋马海平,更多章节内容可以访问云栖社区“华章社区”公众号查看1. ... [详细]
  • Kylin 单节点安装
    软件环境Hadoop:2.7,3.1(sincev2.5)Hive:0.13-1.2.1HBase:1.1,2.0(sincev2.5)Spark(optional)2.3.0K ... [详细]
  • bat大牛带你深度剖析android 十大开源框架_请收好!5大领域,21个必知的机器学习开源工具...
    全文共3744字,预计学习时长7分钟本文将介绍21个你可能没使用过的机器学习开源工具。每个开源工具都为数据科学家处理数据库提供了不同角度。本文将重点介绍五种机器学习的 ... [详细]
  • 本文详细介绍了SQL日志收缩的方法,包括截断日志和删除不需要的旧日志记录。通过备份日志和使用DBCC SHRINKFILE命令可以实现日志的收缩。同时,还介绍了截断日志的原理和注意事项,包括不能截断事务日志的活动部分和MinLSN的确定方法。通过本文的方法,可以有效减小逻辑日志的大小,提高数据库的性能。 ... [详细]
  • 无损压缩算法专题——LZSS算法实现
    本文介绍了基于无损压缩算法专题的LZSS算法实现。通过Python和C两种语言的代码实现了对任意文件的压缩和解压功能。详细介绍了LZSS算法的原理和实现过程,以及代码中的注释。 ... [详细]
  • Maven构建Hadoop,
    Maven构建Hadoop工程阅读目录序Maven安装构建示例下载系列索引 序  上一篇,我们编写了第一个MapReduce,并且成功的运行了Job,Hadoop1.x是通过ant ... [详细]
  • 什么是大数据lambda架构
    一、什么是Lambda架构Lambda架构由Storm的作者[NathanMarz]提出,根据维基百科的定义,Lambda架构的设计是为了在处理大规模数 ... [详细]
  • Hadoop源码解析1Hadoop工程包架构解析
    1 Hadoop中各工程包依赖简述   Google的核心竞争技术是它的计算平台。Google的大牛们用了下面5篇文章,介绍了它们的计算设施。   GoogleCluster:ht ... [详细]
  • 基于,docker,快速,部署,多,需求,spark ... [详细]
  • 你知道Kafka和Redis的各自优缺点吗?一文带你优化选择,不走弯路 ... [详细]
author-avatar
为爱进地狱天堂_954
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有