筑牢数据存储底座,天翼云 HPFS赋能企业高效“掘金”数据

近年来,随着各行业数智转型逐步深入以及人工智能大模型的蓬勃发展,气象分析、大模型训练、自动驾驶、石油勘探、EDA仿真、基因分析等高性能计算(HPC)场景和智算场景(AI)不仅对算力需求激增,也产生了图片、视频等大规模非结构性数据,企业在实践中面临着数据量大、存储性能不足等问题,导致训练阻塞、算力利用率低甚至训练中断现象频繁发生。在此背景下,企业需要不断创新和优化存储系统技术架构,以便实现更加高效、可靠和灵活的存储解决方案。

作为云服务国家队,天翼云坚持科技创新,不断加快推进数据存储基础设施建设,创新推出并行文件服务HPFS(CT-HPFS,High Performance File Storage),助力企业构建高性能存储底座。天翼云HPFS支持全NVMe闪存和InfiniBand高速网络,并融入RDMA技术,可提供最高千万IOPS和TBps吞吐,同时保证亚毫秒时延。该产品具有高性能、高可靠性、高可扩展性的特点,可充分满足企业在HPC和AI等场景下的存储需求。

天翼云HPFS具备共享访问、弹性扩展、安全可信、性能优越四大产品优势。在共享访问方面,HPFS支持数千台客户端挂载同一文件系统,从而实现共享访问;无缝适配主流应用程序进行数据读写,满足多客户端并行计算场景需求。在弹性扩展方面,HPFS元数据采用集群架构,单文件系统文件数量可达百亿级别,文件系统支持在线扩展。在安全方面,HPFS采用多种EC纠删码方式、热备盘备份来保证数据的可靠性,同时,支持HA,故障时自动切换,服务可用性在99.90%以上,有效保障数据安全。在性能方面,HPFS使用100G以太网或IB、RoCE网络,性能随文件系统容量增长呈线性提升,同时可保证亚毫秒时延。

天翼云HPFS在高性能并行文件存储方向持续突破,面向HPC/AI场景大规模非结构化数据及性能深度优化,保障用户数据安全、实现高效存储。

在HPC场景,天翼云HPFS支持并行计算MPI-I/O(Message Passing Interface)接口,在多客户端同一时间并发读写同一个文件时,通过字节粒度锁机制,保证文件一致性,大幅提高多客户端读写同一文件的性能。

在AI应用领域,天翼云HPFS支持万亿参数大模型,助力客户构建高速大模型训练平台,根据不同AI业务流程特点,灵活调用存储服务能力,满足数据预处理、训练、仿真等数据存储能力的要求,并大幅提升训练数据读取和checkpoint回写速度,降低企业AI训练成本投入,加速模型迭代。

未来,天翼云将继续加大数据存储产品技术创新,以扎实的数据存储能力,为客户打造高性能存储底座,持续推动技术创新与产业协同发展,为构建安全、高效的数据基础设施贡献力量。

本网信息来自于互联网与网友投稿,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,并请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。https://yz.zjcxinw.com/11120.html

(0)
上一篇 2024年8月13日 下午2:48
下一篇 2024年8月13日 下午8:39

相关推荐

  • 西人马(FATRI)自主研发的楔形自锁结构,一个标志性的技术飞跃,为传感器封装技术树立了新的标杆

    在精密仪器与传感器制造领域,技术的每一次微小革新都如同蝴蝶效应般,可能掀起一场行业变革的巨浪。西人马公司自主研发的楔形自锁结构,正是这样一个标志性的技术飞跃,它不仅为传感器封装技术树立了新的标杆,更以其卓越的性能和独特的设计,引领着整个传感器行业向前迈进。 传感器,作为现代工业和信息技术的核心元件,其性能的优劣直接影响到系统的准确性和可靠性。然而,长期以来,…

    2024年7月4日
    0
  • 百度数字人生成专利公布:可像人类一样表达意识和情感

    百度数字人生成专利公布:可像人类一样表达意识和情感 12月19日消息,据媒体报道,今天,百度在线网络技术(北京)有限公司的“数字人生成方法和装置”专利申请公布,生成的数字人能够像人类一样表达自己的意识和情感。据专利摘要显示,该专利提供了一种数字人生成方法和装置,涉及人工智能技术领域,具体为计算机视觉、自然语言处理、深度学习等技术领域,可应用于元宇宙、数字人等…

    2023年12月19日
    0
  • 蓝图影像软硬一体化再升级,vivo X200系列刷新影像旗舰体验

    10月14日,vivo X200系列新品正式发布,不仅在性能、续航、通信、屏幕等多方面带来重大升级,更是凭借在影像领域的深厚积累,软硬一体释放极致影像力,重新定义影像旗舰,带来“一超多能”的旗舰体验。随着vivo X200系列的发布,vivo蓝图影像再进化,用vivo需求定义传感器效果,为移动影像带来“涡轮增压”变革;Ultra同款蔡司2亿APO超级长焦、与…

    2024年10月22日
    0
  • 助力构建雄安智慧大脑,眼神科技ABIS平台发挥“引擎”作用

    京津冀协同发展是党中央国务院作出的重大决策部署,是实现京津冀地区人口,经济,资源,社会,生态环境可持续发展的一项重大国家战略,要紧跟数字化、信息化发展新趋势,不断完善京津冀在要素、产业、平台等方面的协同创新机制,持续探索河北承接京津科技成果转移转化的路径方式,更好地将创新资源转化为产业提档升级的源动力、经济高质量发展的支撑力,将京津冀打造成具有全球影响力的协…

    2023年7月10日
    0
  • 弘扬奥运精神 绽放国云力量,天翼云科技赋能体育产业高质量发展

    【导语】科技创新成果落地应用是推动千行百业高质量发展的重要动能,作为云服务国家队,天翼云走出了一条以科技创新驱动高质量发展之路,广泛赋能政务、医疗、农业、教育、工业制造等行业客户上云用云。《何以国云》系列,将通过挖掘天翼云以澎湃算力赋能千行百业上云用数赋智的丰富素材,专注于讲好国云故事,诠释何谓“国云”、何以“国云”。 第33届夏季奥林匹克运动会让全球目光聚…

    科技 2024年7月26日
    0