热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

京都大学超级计算机备份期间丢失77TB数据

京都,大学,超级,计算机,备份,期间,

根据外媒 The Stack 的报道,日本京都大学由于其惠普超级计算机的备份系统出现错误,导致约 77TB 的研究数据被删除。

京都大学目前使用 Hewlett Packard Cray 计算机系统和 DataDirect ExaScaler 存储系统,这两个系统被许多研究小组用于各种用途。

该事件发生在 2021 年 12 月 14 日至 16 日,共计 14 个研究小组的 3400 万份文件从系统和备份文件中被抹去。在进行调查以确定损失的影响后,京都大学得出结论,四个受影响研究小组的数据已无法通过备份系统恢复。

超级计算机系统供应商 HPE 发表了一份日文声明,声称对数据丢失“承担 100% 的责任”。

从 HPE 的声明可以看到,此次事件发生在更新了超级计算机使用的备份脚本之后,而此次更新旨在“提高可见性和可读性”。具体来说就是,备份脚本包含的 find 命令可用于删除超过 10 天的日志文件,随着脚本功能的改进,传递给 find 命令的删除过程的变量名也有所改变,以提高可见性和可读性。

然而,负责备份这个超级计算机系统的存储的程序出现了一个缺陷,HPE 补充道:“这个修改后的脚本的发布程序缺乏考虑。原脚本(bash 脚本)仍在运行期间我们就发布了新的脚本(shell 脚本),因此导致在执行过程中重新加载修改后的 shell 脚本,从而导致出现未定义的变量,结果,/LARGE0(备份磁盘存储)中的原始日志文件被删除,但没删除保存在日志目录的文件。”

事件发生后,备份过程已停止,预计 1 月底恢复备份。为防止数据再次丢失,京都大学已弃用备份系统,计划在 2022 年 1 月进行改进并重新引入新的备份系统。除了完整备份镜像之外,还会保留增量备份功能。


推荐阅读
  • 10分钟带你搞定 Linux awk命令
    欢迎加入JackTian技术交流群!CSDN海量资源免费下载!简介awk是一个强大的文本分析工具,相对于grep的查找,se ... [详细]
  • sedi 单引号中嵌套双引号_面试中的shell部分看着就对了
    “进入企业后,大部分情况都是Linux操作系统,那么熟悉命令的用法以外,熟悉使用shell脚本也是让我们有更多时间摸鱼的好办法(ps面试要 ... [详细]
  • Linux系统中lftp用法汇总:Linux众多操作中,lftp可用于ftp文件的下载上传,登陆ftp等,拥有多种使用方法,下面小编就针对lftp给大家做个详细介绍,感兴趣的朋友不 ... [详细]
  • 前段时间使用MySQL作为数据存储做了一个小项目。项目上线运行了几十天之后,数据已经越来越多,达到了100多M。用mysqldump每天备份全量数据然后 ... [详细]
  • [转]Makefile 使用总结
    2019独角兽企业重金招聘Python工程师标准1.Makefile简介Makefile是和make命令一起配合使用的.很多大型项目的编译都是通过Makefile来组织的,如 ... [详细]
  • 1.标准输入与输出我们知道,执行一个shell命令行时通常会自动打开三个标准文件,即标准输入文件(stdin),通常对应终端的键盘;标准输出文件(stdout)和标 ... [详细]
  • Docker的网络实现其实就是利用了Linux上的网络命名空间和虚拟网络设备(特别是vethpair).基本原理首先,要 ... [详细]
  • 搭建weblogic12.1.3
    适 ... [详细]
  • js前端如何实现图片文本文件预览功能
    这篇“js前端如何实现图片文本文件预览功能”文章的知识点大部分人都不太理解,所以小编给大家总结了以下内容,内容详细,步骤清晰,具有一定的借 ... [详细]
  • Hudi是一种数据湖的存储格式,在Hadoop文件系统之上提供了更新数据和删除数据的能力以及流式消费变化数据的能力。应用场景近实时数据摄取Hudi支持插入、更新和删除数据的能力。您 ... [详细]
  • 本文目录一览:1、如何查看mysql数据库的日志文件 ... [详细]
  • Linux DNS
    libnss_files.solibnss_dnslibnss_ldap展现的就是一个配置文件etcnsswitch.conf?查看这个文件这个files就是通过libnss_fi ... [详细]
  • 篇首语:本文由编程笔记#小编为大家整理,主要介绍了实现MySQL半同步架构相关的知识,希望对你有一定的参考价值。默认情况下,MySQL的复制功能是异步的, ... [详细]
  • MySQL的内存结构与物理结构
    从MySQL的物理结构和内存结构开始了解整个MySQL的运行机制,其中有几个特别重要的概念,也是平时工作中更加关注的地方,如:binlog、redolog、表空间、慢查询日志、My ... [详细]
  • 如题,今天帮朋友把一个客户的SQL2005备份数据库文件导入到我朋友的SQL2000服务器中。为此,整整折腾了3天的时间。总算弄明白了。为此࿰ ... [详细]
author-avatar
瑞铭与我_109
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有