热门标签 | HotTags
当前位置:  开发笔记 > 后端 > 正文

raid读写速度对比_一种高速的文件读写机制的设想

最近在自己开发文件系统,不知不觉,一个奇妙的想法一闪而过,关于文件的读写。设想:把单个文件储存在多个磁盘上,由于cpu速度比

最近在自己开发文件系统,不知不觉,一个奇妙的想法一闪而过,关于文件的读写。

设想:把单个文件储存在多个磁盘上,由于cpu速度比磁盘速度快,那么可以在一块磁盘上读写的时候,cpu进行另外一个磁盘上读写。那么这样一来,整个文件的读写时间就大大缩短了。有点像cpu的流水线技术!

我们知道,现在的单个文件都是储存在一个磁盘上的,也就是说整个文件都是在一个磁盘上,例如windows的c盘有一个文件test.txt,它文件数据就是在这个磁盘上的。对于单个磁盘的操作,它是线性的,只有完成前面的数据读写,才能继续后面数据的读写。

假设我们有2块磁盘,分别是sda, sdb吧。现在有一个test.txt文件在sda上面,假设,它的大小是1MB,假设磁盘读写速度是1MB/S,那么读取这个文件需要花费1秒的时间。

那么,如果此时把文件的数据分别储存到2个磁盘上,当从一个磁盘sda读取数据的时候,我们切换到另一个磁盘sdb,再读取数据。相当于把文件分成2半,当前半部分在sda中读写的时候,cpu再到sdb中进行读写。如果忽略cpu的运行,绝对得来看,对于1MB的文件,我们是不是在0.5S就读写完成了呢?当然这个只是绝对得来看。但是这种设想,也不是不可取。

如果我们把cpu的时间加上,浪费0.1秒,那么现在就0.6s来读写这个文件,速度照样可以提升40%。这是什么概念?对于小文件来说,这倒无所谓,可是对于大文件来说,这个设想就十分有利。如果一个1G的文件需要花费10s来完成读写,如果作用这个机制,时间就是6s。对于数据库文件的读写,可以大大缩短整个响应时间。

不过。这种方式最大的弊端就是,把文件分别储存到了多个磁盘上,如果一个磁盘受损,那么这个文件就废了。

如果是"同时"操作4块磁盘的话?如果每个磁盘可以提高一半的速度,那么,4块磁盘的就只需要0.625s时间!!!震惊!

不过,这些都是理想状态下的。还有许多都被忽略了。为什么还是要提出来呢?因为从这个数据读写速度的角度来说,是非常乐观的。

如果这个理论运用于实际中去,再结合多处理器,那么,在未来,对于文件的读写在以后速度将成倍提高!

原本打算进一步研究,写成一篇论文的,由于自己太懒了,就没去做。

我是操作系统BookOS的开发者,我们的官网是http://www.book-os.org,欢迎各位操作系统开发爱好者来玩(不忘为自己打广告,哈哈)。



推荐阅读
  • 本文详细介绍了Linux中进程控制块PCBtask_struct结构体的结构和作用,包括进程状态、进程号、待处理信号、进程地址空间、调度标志、锁深度、基本时间片、调度策略以及内存管理信息等方面的内容。阅读本文可以更加深入地了解Linux进程管理的原理和机制。 ... [详细]
  • Mac OS 升级到11.2.2 Eclipse打不开了,报错Failed to create the Java Virtual Machine
    本文介绍了在Mac OS升级到11.2.2版本后,使用Eclipse打开时出现报错Failed to create the Java Virtual Machine的问题,并提供了解决方法。 ... [详细]
  • 一、Hadoop来历Hadoop的思想来源于Google在做搜索引擎的时候出现一个很大的问题就是这么多网页我如何才能以最快的速度来搜索到,由于这个问题Google发明 ... [详细]
  • 本文是一位90后程序员分享的职业发展经验,从年薪3w到30w的薪资增长过程。文章回顾了自己的青春时光,包括与朋友一起玩DOTA的回忆,并附上了一段纪念DOTA青春的视频链接。作者还提到了一些与程序员相关的名词和团队,如Pis、蛛丝马迹、B神、LGD、EHOME等。通过分享自己的经验,作者希望能够给其他程序员提供一些职业发展的思路和启示。 ... [详细]
  • 本文讨论了Alink回归预测的不完善问题,指出目前主要针对Python做案例,对其他语言支持不足。同时介绍了pom.xml文件的基本结构和使用方法,以及Maven的相关知识。最后,对Alink回归预测的未来发展提出了期待。 ... [详细]
  • Windows下配置PHP5.6的方法及注意事项
    本文介绍了在Windows系统下配置PHP5.6的步骤及注意事项,包括下载PHP5.6、解压并配置IIS、添加模块映射、测试等。同时提供了一些常见问题的解决方法,如下载缺失的msvcr110.dll文件等。通过本文的指导,读者可以轻松地在Windows系统下配置PHP5.6,并解决一些常见的配置问题。 ... [详细]
  • 在说Hibernate映射前,我们先来了解下对象关系映射ORM。ORM的实现思想就是将关系数据库中表的数据映射成对象,以对象的形式展现。这样开发人员就可以把对数据库的操作转化为对 ... [详细]
  • 本文介绍了在SpringBoot中集成thymeleaf前端模版的配置步骤,包括在application.properties配置文件中添加thymeleaf的配置信息,引入thymeleaf的jar包,以及创建PageController并添加index方法。 ... [详细]
  • 知识图谱——机器大脑中的知识库
    本文介绍了知识图谱在机器大脑中的应用,以及搜索引擎在知识图谱方面的发展。以谷歌知识图谱为例,说明了知识图谱的智能化特点。通过搜索引擎用户可以获取更加智能化的答案,如搜索关键词"Marie Curie",会得到居里夫人的详细信息以及与之相关的历史人物。知识图谱的出现引起了搜索引擎行业的变革,不仅美国的微软必应,中国的百度、搜狗等搜索引擎公司也纷纷推出了自己的知识图谱。 ... [详细]
  • 基于事件驱动的并发编程及其消息通信机制的同步与异步、阻塞与非阻塞、IO模型的分类
    本文介绍了基于事件驱动的并发编程中的消息通信机制,包括同步和异步的概念及其区别,阻塞和非阻塞的状态,以及IO模型的分类。同步阻塞IO、同步非阻塞IO、异步阻塞IO和异步非阻塞IO等不同的IO模型被详细解释。这些概念和模型对于理解并发编程中的消息通信和IO操作具有重要意义。 ... [详细]
  • 1,关于死锁的理解死锁,我们可以简单的理解为是两个线程同时使用同一资源,两个线程又得不到相应的资源而造成永无相互等待的情况。 2,模拟死锁背景介绍:我们创建一个朋友 ... [详细]
  • 后台获取视图对应的字符串
    1.帮助类后台获取视图对应的字符串publicclassViewHelper{将View输出为字符串(注:不会执行对应的ac ... [详细]
  • C++字符字符串处理及字符集编码方案
    本文介绍了C++中字符字符串处理的问题,并详细解释了字符集编码方案,包括UNICODE、Windows apps采用的UTF-16编码、ASCII、SBCS和DBCS编码方案。同时说明了ANSI C标准和Windows中的字符/字符串数据类型实现。文章还提到了在编译时需要定义UNICODE宏以支持unicode编码,否则将使用windows code page编译。最后,给出了相关的头文件和数据类型定义。 ... [详细]
  • CentOS 7部署KVM虚拟化环境之一架构介绍
    本文介绍了CentOS 7部署KVM虚拟化环境的架构,详细解释了虚拟化技术的概念和原理,包括全虚拟化和半虚拟化。同时介绍了虚拟机的概念和虚拟化软件的作用。 ... [详细]
  • Java在运行已编译完成的类时,是通过java虚拟机来装载和执行的,java虚拟机通过操作系统命令JAVA_HOMEbinjava–option来启 ... [详细]
author-avatar
mobiledu2502925687
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有