筑牢数据存储底座,天翼云 HPFS赋能企业高效“掘金”数据

近年来,随着各行业数智转型逐步深入以及人工智能大模型的蓬勃发展,气象分析、大模型训练、自动驾驶、石油勘探、EDA仿真、基因分析等高性能计算(HPC)场景和智算场景(AI)不仅对算力需求激增,也产生了图片、视频等大规模非结构性数据,企业在实践中面临着数据量大、存储性能不足等问题,导致训练阻塞、算力利用率低甚至训练中断现象频繁发生。在此背景下,企业需要不断创新和优化存储系统技术架构,以便实现更加高效、可靠和灵活的存储解决方案。

作为云服务国家队,天翼云坚持科技创新,不断加快推进数据存储基础设施建设,创新推出并行文件服务HPFS(CT-HPFS,High Performance File Storage),助力企业构建高性能存储底座。天翼云HPFS支持全NVMe闪存和InfiniBand高速网络,并融入RDMA技术,可提供最高千万IOPS和TBps吞吐,同时保证亚毫秒时延。该产品具有高性能、高可靠性、高可扩展性的特点,可充分满足企业在HPC和AI等场景下的存储需求。

天翼云HPFS具备共享访问、弹性扩展、安全可信、性能优越四大产品优势。在共享访问方面,HPFS支持数千台客户端挂载同一文件系统,从而实现共享访问;无缝适配主流应用程序进行数据读写,满足多客户端并行计算场景需求。在弹性扩展方面,HPFS元数据采用集群架构,单文件系统文件数量可达百亿级别,文件系统支持在线扩展。在安全方面,HPFS采用多种EC纠删码方式、热备盘备份来保证数据的可靠性,同时,支持HA,故障时自动切换,服务可用性在99.90%以上,有效保障数据安全。在性能方面,HPFS使用100G以太网或IB、RoCE网络,性能随文件系统容量增长呈线性提升,同时可保证亚毫秒时延。

天翼云HPFS在高性能并行文件存储方向持续突破,面向HPC/AI场景大规模非结构化数据及性能深度优化,保障用户数据安全、实现高效存储。

在HPC场景,天翼云HPFS支持并行计算MPI-I/O(Message Passing Interface)接口,在多客户端同一时间并发读写同一个文件时,通过字节粒度锁机制,保证文件一致性,大幅提高多客户端读写同一文件的性能。

在AI应用领域,天翼云HPFS支持万亿参数大模型,助力客户构建高速大模型训练平台,根据不同AI业务流程特点,灵活调用存储服务能力,满足数据预处理、训练、仿真等数据存储能力的要求,并大幅提升训练数据读取和checkpoint回写速度,降低企业AI训练成本投入,加速模型迭代。

未来,天翼云将继续加大数据存储产品技术创新,以扎实的数据存储能力,为客户打造高性能存储底座,持续推动技术创新与产业协同发展,为构建安全、高效的数据基础设施贡献力量。

本网信息来自于互联网与网友投稿,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,并请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。https://yz.zjcxinw.com/11120.html

(0)
上一篇 2024年8月13日 下午2:48
下一篇 2024年8月13日 下午8:39

相关推荐

  • 人形机器人品牌“灵宝CASBOT”发布|拉开商业落地帷幕

    10月30日,北京中科慧灵机器人技术有限公司发布通用人形机器人品牌“灵宝CASBOT”。伴随着全新Logo亮相,灵宝CASBOT以一支前瞻且立意深远的品牌概念片,阐释了其清晰切实的商业化路径。此番品牌发布不仅输出了全新的品牌视觉形象,同步上线了其官方网站casbot.tech,也掀开了灵宝在人形机器人和具身智能领域技术迭代与商业落地跃进的新篇章。 【灵宝】意…

    2024年10月31日
    0
  • 索未来科技集团自研人工智能大模型:多领域应用推动行业智能化变革

    在数字化转型浪潮中,人工智能已成为驱动各行业发展的核心力量。索未来科技集团凭借其卓越的技术研发能力,自主研发了“智界”人工智能大模型,推动行业智能化变革,取得了显著成果。 智界大模型的技术优势 智界人工智能大模型融合了深度学习和大数据分析技术,具备强大的计算能力和卓越的性能。其独特的多模态学习能力,使其能够处理文本、图像、语音等多种数据类型,实现跨领域的智能…

    2024年7月31日
    0
  • 启迪拼搏之光——董明珠告诫女性要展现力量,成就美好生活

    在2023年粤港澳大湾区妇女融合协同发展活动上,珠海格力电器股份有限公司董事长兼总裁董明珠以《“她力量”撑起美好生活“半边天”》为题进行了主旨演讲。她深情地表达了对女性的勉励,强调在拼搏中展现力量的同时,不忘本职工作,以成就美好生活为己任。 作为一位知名女企业家,董明珠在演讲中坦言:“有时候我觉得我很努力了,但是放眼一看,更多女性依然在拼搏,和我一样。所以我…

    科技 2024年2月10日
    0
  • 亚洲最大重型自航绞吸船天鲲号现身 “天鲲号”亮相

    亚洲最大重型自航绞吸船天鲲号现身 “天鲲号”亮相 近日,10月21日,亚洲最大重型自航绞吸船“天鲲号”完成全部设备调试及工前准备工作,正式投入连云港港赣榆港区10万吨级航道南延伸段一期工程建设。 “天鲲号”是我国自主设计建造的目前亚洲最大、最先进,也是目前世界上智能化水平最高的重型自航绞吸船。“天鲲号”全长140米,宽27.8米,总装机功率25843千瓦,设…

    科技 2022年11月24日
    0
  • 中国第一颗可重复使用返回式卫星!载荷正式交付

    中国第一颗可重复使用返回式卫星!载荷正式交付 10月24日,国家航天局在京举办实践十九号卫星返回后载荷交付仪式,标志着卫星工程返回任务圆满完成。 此次交付的实践十九号卫星搭载载荷,包括主粮作物、经济作物、微生物航天育种载荷,以及空间技术试验载荷等,总共20大类。 据介绍,实践十九号充分发挥了新一代返回式空间试验平台“育种周期短、搭载效率高”优势,圆满完成了近…

    2024年10月25日
    0