首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

bug 导致 77 TB数据被删光,HPE 称 100% 负责:在执行过程中重新加载修改后的shell脚本,从而导致未定义的变量

由于HPE发布的软件更新版有缺陷,结果无意中删除了备份内容,日本京都大学丢失了多达77TB的研究资料。 这起事件发生在2021年12月中旬,导致14个研究小组总共丢失了约3400万份文件。据京都大学声称,来自其中四个研究小组的数据无法通过备份系统来恢复。 HPE发表了一份日文声明,声称对文件丢失“承担100%的责任”。 HPE声明显示,京都大学超级计算机系统的脚本更新最初旨在“提高可见性和可读性”,其中包括一个find命令,用于删除超过10天的日志文件。 然而,负责备份日本惠普公司制造的这个超级计算机系

02

今日指数项目之需求调研【三】

大数据平台作为底层的基础数据平台,集群规模、计算存储性能将决定流、批的性能指标上限。所以需要考虑整个大数据平台的吞吐量(网络、磁盘IO)、响应速率、计算能力、高并发性、高可用、维护性方便等,以满足多业务场景下,不同应用需求的建设任务,比如多维分析、实时计算、即席查询和数据统计分析等应用功能。 本项目大数据平台在建设过程中,将满足如下性能指标: 批处理部分指标: 支持批处理集群批量总写入速度2GB/秒,批量读取速度300MB/秒; 平台支持并发执行300个查询和200个加载任务; 应用查询时间对于数据库的简单数据读取将不超过1~2秒,三个月统计计算查询时间将不超过15秒,复杂查询时间将不超过1分钟; 复杂批处理任务,ETL的处理时间将不超过2个小时; 实时流处理指标: 平台支持接收峰值为每秒100万条+的流数据; 平台能够在峰值条件下,完成2秒内的实时预警,2秒内完成针对当日数据的查询; 平台每日实时处理模块能够累积处理144亿笔(按4小时交易日保持峰值流速计)订单流数据; 平台支持至少50个并发访问/查询当日数据。 应用响应指标: 数仓应用项目离线报表30秒内完成数据响应查询; 实时大屏数据展示5秒内完成数据响应查询; 应用平台支持并发执行500个用户查询请求;

02

国际资深存储技术专家带你读懂对象存储!

存储,在人类发展的漫长历史长河中,始终扮演着至关重要的角色。远古时代结绳记事中的“绳”是记录事件的载体,随着文字和图画的产生,记载甲骨文的龟壳和承载先人绘画的岩壁成为历史的印记。 但是这些信息记录方式原始且效率低下,中国发明的造纸术和活字印刷术,让信息以书的形式得以大规模传播和保存,大大提高信息记录和传播的效率。 20世纪中叶,以电子计算机为代表的第三次科技革命,推动了信息技术急风骤雨般的演进,也激发了专业存储厂家的创新浪潮,从早期大型机的纸带存储到广泛使用的光盘存储、磁盘存储,从单机存储到分布式存储,从存

01
领券