0
  • 聊天消息
  • 系统消息
  • 评论与回复
登录后你可以
  • 下载海量资料
  • 学习在线课程
  • 观看技术视频
  • 写文章/发帖/加入社区
会员中心
创作中心

完善资料让更多小伙伴认识你,还能领取20积分哦,立即完善>

3天内不再提示

腾讯云攻坚技术难题,让硬盘始终不下线

独爱72H 来源:环球网 作者:环球网 2020-03-24 10:19 次阅读

(文章来源:环球网)

硬盘作为服务器数据的载体、一旦出现故障,就会出现信息的缺失和遗漏。为了解决企业级场景下,硬盘对于精准海量记忆的苛刻要求,腾讯云一方面与全球领先的数据存储解决方案提供商希捷合作,率先在国内引入定制化机制,保证硬盘质量的源头管理;另一方面,利用大数据分析技术对硬盘健康状况作多维度 “体检”,实现了对硬盘品质和可靠性的有效管控,为腾讯云数百万用户的底层数据安全能力提供了强有力保障。

据了解,在当前大数据应用场景中,TB级的大容量机械式硬盘是最为广泛的物理载体,其主流数据记录方式普遍采用垂直磁记录技术,在该技术下主要依靠同等体积内增加磁头、磁碟的数量,以及增加单盘容量的方式来堆高容量。这不仅对硬盘的工艺、机械结构、伺服系统、信号处理等带来极大的挑战,也增加了硬盘数据管理的难题。

与此同时,大数据业务场景下往往伴随着长时间的高工作负载,即便硬盘本身有强大的自恢复机制,但在庞大的强负载压力下,内部的重试纠错机制也会影响到上层的数据读写,影响系统的稳定性。为有效解决这样的难题,腾讯云携手希捷联合开展独家质量提升项目,率先在国内云厂商中引入定制化机制,实现了根据自身业务需求对硬盘可靠性的“量身定制”。

希捷根据腾讯云的业务需求开发了定制化内部日志,建立新产品联合导入测试机制,帮助硬盘加速进入稳定运营期,提升产品的性能与稳定性,保障用户体验。经过数月的运营统计数据表明,腾讯云大数据业务中希捷12TB硬盘的可靠性表现得到了显著提升。

据腾讯服务器供应链总经理刘裕勋介绍,硬盘的健康维护是一项综合性工程,腾讯云在硬盘数据安全防护上做了大量的探索,除了和希捷在强化源头管理的同时,为最大程度保护云端用户的安全和稳定,腾讯云还借助最新的大数据AI技术优化硬盘的健康管理。

例如,腾讯云开发的硬盘健康度打分系统,不仅可以智能化对单盘本身的参数进行健康评估,识别出参数恶化的硬盘。在实际业务中,运维人员根据该打分情况,实时掌握重点客户的硬盘健康状况,对运行着重要业务的机器提前进行低分盘更换,保障业务系统和数据安全。

实际上,除了上述高负载给硬盘带来的威胁以外,随着硬盘本身容量的不断上升,其自身可靠性的挑战也在不断加大。面对这样的挑战,腾讯云通过不断优化自身业务架构,将单盘故障做到业务零感知。

例如,腾讯云对象存储COS业务中就通过就近访问的方式减少访问延迟。在多副本架构下,采用一写多读的读写策略,结合容错机制保证数据一致性。同时,基于该读写策略,计算框架会根据硬盘位置信息采用离数据最近的机器存储数据,很好地规避了由于单盘故障和网络读写导致的延迟和服务不可用情况,有效提升了服务的可靠性。

此外,当出现单块硬盘故障的时候,腾讯云对象存储COS业务会将硬盘置脏处理,同时,将请求分流至可用的硬盘上,并后端进行无感的数据恢复措施,保障数据保持持久高可用状态。

腾讯服务器供应链总经理刘裕勋表示:“大容量的机械硬盘仍然是当前大数据业务的主力存储设备。面对技术以及业务的双重挑战,腾讯云除了加强与全球存储巨头之间的合作之外,还将进一步依托领先的大数据分析技术和业务架构的持续优化,来全面降低硬盘故障对云端业务的影响,为数百万用户的数据安全保驾护航。”
(责任编辑:fqj)

声明:本文内容及配图由入驻作者撰写或者入驻合作网站授权转载。文章观点仅代表作者本人,不代表电子发烧友网立场。文章及其配图仅供工程师学习之用,如有内容侵权或者其他违规问题,请联系本站处理。 举报投诉
  • 腾讯
    +关注

    关注

    7

    文章

    1627

    浏览量

    49220
  • 云技术
    +关注

    关注

    1

    文章

    187

    浏览量

    18772
收藏 人收藏

    评论

    相关推荐

    固态硬盘和机械硬盘区别在哪

    固态硬盘(SSD)和机械硬盘(HDD)是两种不同类型的存储设备,它们在技术原理、速度、可靠性、功耗、噪音等方面有着相当大的区别。在本文中,将详细介绍固态硬盘和机械
    的头像 发表于 01-18 09:43 1194次阅读

    NAS设备及硬盘的选购与安装使用

    面对海量的存储需求难题,众多企业与工作室往往会首选NAS存储解决方案。但市面上NAS设备与硬盘产品繁多,如何组建适合自己的一套NAS系统也常常令人头疼。
    的头像 发表于 01-07 15:39 695次阅读
    NAS设备及<b class='flag-5'>硬盘</b>的选购与安装使用

    全球首辆钠电池汽车正式下线

    值得一提的是,12月28日,“孚能科技全球首辆钠电车型下线仪式”在江西南昌江铃集团新能源能量工厂举行,江铃集团新能源搭载孚能科技钠离子电池的钠电车型正式下线
    的头像 发表于 12-29 17:17 867次阅读

    孚能科技全球首款钠电车型将正式下线

    12月28日,江铃集团新能源搭载孚能科技钠离子电池的全球首款钠电车型将正式下线
    的头像 发表于 12-28 10:05 504次阅读

    踏歌智行浴“雪”奋战不下线 无人驾驶运输坚守前线保生产

    12月4日至12号,新疆准东煤田多次出现最低零下35度的极寒大雪天气,踏歌智行准东项目团队浴“雪”奋战, 是该矿坚守到最后的无人运输运营队伍, 15辆车组成的无人驾驶宽体车队始终保持着24小时
    的头像 发表于 12-19 19:05 443次阅读

    【ELF 1开发板试用】+ 8.2 MQTT开发——连接腾讯【原创】

    MQTT开发——连接腾讯 前文我们基于文档中提供的项目教程,复现ELF 1连接阿里物联网平台,进行了MQTT开发,复现后,笔者就想“为何不试试其它平台”,抱着整活学习的心,腾讯
    发表于 12-15 23:10

    明阳智能MySE18.X-20MW海上风电机组下线

    MySE18.X-20MW机组的下线,是明阳坚持技术创新,始终将推动海上风机容量大型化、高质量发展视为己任的最好诠释。明阳十年一剑,对大容量机组创新求索的脚步从未停歇,并一步一个脚印,始终
    的头像 发表于 12-14 10:17 441次阅读

    改变电动机的下线方法对电动机的影响是什么?

    修复电动机,重新下线时绕组模式不变,但下线的方法改变(绕组的头和尾跨距改变)或正下·反下。对电机的正常工作有影响吗??拜求各位高手!!
    发表于 12-11 06:44

    机械硬盘和固态硬盘的工作原理

    不同的工作原理和技术特点。本文将详尽、详实、细致地解释机械硬盘和固态硬盘的工作原理,并讨论它们在存储性能、耐用性和能耗方面的差异。 1. 机械硬盘的工作原理: 机械
    的头像 发表于 12-07 16:52 861次阅读

    常见几种硬盘的简单介绍

    终端、电力、医疗、航空、导航设备等领域。 混合硬盘:  是既包含传统硬盘又有闪存模块的大容量存储设备。闪存处理存储中写入或恢复最频繁的数据。很多公司开始提供这项技术的变体,他们期望它会在高端系统中受到
    发表于 10-18 16:56

    兰钧首批314Ah电芯正式量产下线

    量产下线。 对于大型储能下一代产品,兰钧始终坚持单体尺寸标准化、模组模块化、系统组成多样化的理念,选择开发280Ah电芯同尺寸的升级产品。 从行业内看,71173尺寸下的储能电芯目前已适配主流大储产品,并且得到市场验证,打通了商业性。而电池企业寻求同尺寸下
    的头像 发表于 10-17 11:49 610次阅读
    兰钧首批314Ah电芯正式量产<b class='flag-5'>下线</b>

    后发而先至的腾讯混元大模型,到底有哪些技术亮点?

    腾讯集团副总裁蒋杰在采访中介绍:“在腾讯内部,混元已经内测很久了,不是现在第一天才有。”腾讯是国内最早研究大模型的企业之一。2021年,腾讯推出了千亿规模的NLP大模型。2022年,
    的头像 发表于 09-12 17:25 1122次阅读
    后发而先至的<b class='flag-5'>腾讯</b>混元大模型,到底有哪些<b class='flag-5'>技术</b>亮点?

    首批沟槽型MOSFET器件晶圆下线

    2023年8月1日,九峰山实验室6寸碳化硅(SiC)中试线全面通线,首批沟槽型MOSFET器件晶圆下线。实验室已具备碳化硅外延、工艺流程、测试等全流程技术服务能力。
    发表于 08-11 17:00 291次阅读

    王传福哽咽落泪 比亚迪第500万辆新能源汽车下线 但造车之路很艰难

    王传福哽咽落泪 比亚迪第500万辆新能源汽车下线 但造车之路很艰难 在比亚迪第500万辆新能源汽车下线现场王传福哽咽落泪,造车之路很艰难在比亚迪的至暗时刻,真的差点就走不下去。 在下线
    的头像 发表于 08-10 12:50 1110次阅读

    FPGA:基于Cortex-M33的平台技术参考手册

    FPGA:基于Cortex-M33的平台技术参考手册
    发表于 08-02 14:53