科普信息网

青云存储 QingStorU10000专业服务非结构化数据场景

发布时间:2023-08-09 18:10:58 来源:砍柴网 责任编辑:caobo

长期自研存储技术的青云科技正式推出的非结构化数据统一存储平台QingStorU10000,面向私有云场景,以期赋能企业加速数字化转型。

和QingStorNeonSAN主要面向结构化数据高性能业务场景需求不同,QingStorU10000主要面向非结构化数据的场景,包括影像数据、音视频数据、数据湖、大数据、物联网等场景。青云希望通过专业的存储分工能更好地服务专业的场景。

QingStorU10000产品设计初衷就是为了帮助客户更好地实现海量数据的价值挖掘。QingStorU10000支持文件、对象和大数据三种非结构化数据访问协议互通及无损共享,容量方面支持横向扩展,线性增加整体系统的容量和性能,且可独立水平扩展元数据和存储节点;安全性方面,实现元数据和业务存储数据分离存储,有效规避单点故障;在运维方面,提供资源管理、配置管理、告警、日志、监控等一系列的统一管理平台。


(资料图片仅供参考)

根据客户需求,QingStorU10000支持软件交付和存储一体机两种交付模式。

自研

青云存储产品的一个重要特点就是,真正自研的中国存储。和QingStorNeonSAN一样,QingStorU10000继承与融合QingStor对象存储及文件存储,也是由青云科技存储团队自主设计,没有继承任何开源的架构,不存在任何知识产权的风险。自主研发使得技术QingStorU10000百分百可控,不存在技术盲区,能更好支撑企业数字化转型需求。

在信创领域,包括QingStorU10000在内的青云各产品线兼容核心国产硬件平台和操作系统平台,比如鲲鹏、飞腾、海光等目前主流的国产硬件平台,还有麒麟软件、统信、openEuler等国产操作系统,青云已实现完整的生产化兼容。

真多协议无损互通

QingStorU10000相比于青云早前推出的QingStor对象存储和文件存储产品,除了产品力的全面继承,还以几个方面做了明显的能力提升,包括实现数据协议的互通,功能和性能的增强,整个算力平台对接的强化等。QingStorU10000构建了统一索引架构,支持多协议无损互通,从而实现数据的访问和流通的高效。

无论是基于对象接口存进来的数据、基于NFS/SMB存进来的数据,还是通过HDFS大数据专用协议存进来的数据,QingStorU10000都是基于统一的索引架构提供这些数据的元数据管理。这种架构为应用带来好处就是:不需要通过格式转化就能让对象存储存进来的数据,通过NFS访问,或者NFS存进来的数据可以通过S3访问。存储和读取数据之间不需要经过格式转化,这样就不会存在性能和语义的损失。

以自动驾驶场景为例。通常情况下,一辆路测车每天可能会产生几TB或者几十TB的数据,有几十辆路测车,每天产生差不多1PB的数据,正常情况下,这1PB的数据需要通过四个环节的处理才能真正发挥其作用。第一个环节是数据的上传和导入,通常会用到存储里的S3和NFS的协议。第二个环节是数据预处理,基本上以HDFS这种大数据分析的框架为主。第三个环节是AI训练,以NFS协议为主。第四个环节还会涉及仿真测试,主要以NFS和SMB协议为主。通过自动驾驶完整数据链的处理环节可以看到,一份数据在不同的阶段,需要通过不同的数据访问协议对接不同的计算框架,只有协议互通才能让数据分析更高效。

市面上虽然也有在讲协议互通的分布式存储厂商,但大多是通过格式转化的技术实现的,谈不上真正的“多协议无损互通”,在底层来看,就是因为没有统一的索引架构。

QingStorU10000广泛适用于容器存储、大数据分析、PACS(医疗影像系统)、高精度地图、多媒体数据处理与存储、冷数据备份和归档等应用场景,并已经在互联网体检、智能驾驶、智能工厂的IoT场景和多元化的超算场景成功应用。例如,青云提供的存储集群及算力资源,基本上解决了某智能驾驶科技公司的高精度地图业务场景从采集、生产、训练整个生命周期的存储和算力的需求。

标签:

上一篇:海信中央空调知风系列风管机:43℃高温制冷不衰减 性能小钢炮
下一篇:最后一页

新闻排行