此前,国内某 L4 级自动驾驶公司主要采取的是开源的存储解决方案,将 GPU 计算和存储以融合的形式进行部署,但是随着文件数量的上升,性能出现明显下降,原有的存储方式也逐渐开始影响训练的效率。因此,他们开始考虑升级现有的存储解决方案。在升级过程中,该公司重点关注并解决以下问题:在日益剧增的海量数据场景下,如...
海量数据,毫厘必争 此前,国内某 L4 级自动驾驶公司主要采取的是开源的存储解决方案,将 GPU 计算和存储以融合的形式进行部署,但是随着文件数量的上升,性能出现明显下降,原有的存储方式也逐渐开始影响训练的效率。因此,他们开始考虑升级现有的存储解决方案。在升级过程中,该公司重点关注并解决以下问题: 在日益剧增的海量...
通过部署 Fluid + YRCloudFile Runtime,Kubernetes 容器能方便的通过 YRCloudFile 来高效使用对象存储。 Fluid 简介 Fluid 是一款开源的云原生基础架构。在计算和存储分离的大背景驱动下,Fluid 的目标是为 AI 与大数据云原生应用提供一层高效便捷的数据抽象,将数据从存储抽象出来,以便实现: 通过数据亲和性调度和分布式...
在海量的文件场景下,YRCloudFile 能很好地支撑业务运行,依托于分布式元数据横向扩展架构、虚拟目录、静态子树和目录 Hash 等技术,在 0-100 亿级别的海量文件背景下,文件操作性能以及文件的读写性能非常平稳,这决定了在海量的场景下,YRCloudFile 依然能够支撑上层应用,远远优于其他开源产品和商业存储产品。4、...
KubeVirt 是一个 Kubernetes 插件,由 Redhat 开源,在调度容器之余也可以调度传统的虚拟机。它通过使用自定义资源(CRD)和其它 Kubernetes 功能来无缝扩展现有的集群,以提供一组可用于管理虚拟机的 API 。 KubeVirt 并不是虚拟化平台的替代品,它只是利用 Kubernetes 的整体框架以及 CRD 来管理 VM,底层调用的依旧是基于...
在海量的文件场景下,YRCloudFile 能很好地支撑业务运行,依托于分布式元数据横向扩展架构、虚拟目录、静态子树和目录 Hash 等技术,在 0-100 亿级别的海量文件背景下,文件操作性能以及文件的读写性能非常平稳,这决定了在海量的场景下,YRCloudFile 依然能够支撑上层应用,远远优于其他开源产品和商业存储产品。 4、存储系...
焱融科技YRCloudFile顶级容器存储技术助力企业上云 近日,由全球企业级开源解决方案领导者 SUSE 举办的第四届“企业云原生创新大会 Enterprise Cloud Native Innovation Conference” (以下简称“ECIC”) 在北京圆满落幕。作为国内规模最大、影响力最强的云原生技术大会之一,ECIC 邀请到各行业头部企业的技术专家带来十多场...
此前,国内某 L4 级自动驾驶公司主要采取的是开源的存储解决方案,将 GPU 计算和存储以融合的形式进行部署,但是随着文件数量的上升,性能出现明显下降,原有的存储方式也逐渐开始影响训练的效率。因此,他们开始考虑升级现有的存储解决方案。在升级过程中,该公司重点关注并解决以下问题: ...
Fluid 是一个开源的基于 Kubernetes 的分布式数据集编排和加速引擎,主要服务于云原生场景下的数据密集型应用,例如:大数据应用、AI 应用等。在计算和存储分离的大背景驱动下,Fluid 的目标是为 AI 与大数据云原生应用提供一层高效便捷的数据抽象,将数据从存储抽象出来。
近日,由全球企业级开源解决方案领导者SUSE举办的第四届“企业云原生创新大会Enterprise Cloud Native Innovation Conference”(以下简称“ECIC”)在北京圆满落幕。 (ECIC会议现场) 作为国内规模最大、影响力最强的云原生技术大会之一,ECIC邀请到各行业头部企业的技术专家带来十多场与企业云原生落地实践经验和创新解决方案的精...