正在阅读:全自研 青云科技推出非结构化数据统一存储平台QingStor U10000

全自研 青云科技推出非结构化数据统一存储平台QingStor U10000

2022-05-25 08:35:38来源:TechWeb.com.cn 关键词:存储设备阅读量:23487

导读:青云科技产品技术解决方案总监张忠华介绍,QingStor U10000广泛适用于容器存储、大数据分析、PACS(医疗影像系统)、高精度地图、多媒体数据处理与存储、冷数据备份和归档等应用场景,并已经在互联网体检、智能驾驶、智能工厂的IoT场景和多元化的超算场景成功应用。
  5月24日消息,仅一辆自动驾驶汽车每一天产生的数据量就可达数TB甚至数十TB。随着自动驾驶、物联网、人工智能、AR、5G等技术更深入应用于生产生活,其带来的文本、图形、图像、音频、视频等非结构化数据为主的信息数据量急剧增加。
 
  据IDC预测,到2025 年,全球产生的数据量将达到175ZB,其中超过80%的数据都会是处理难度较大的非结构化数据。
 
  当前,对巨量且仍不断增长的非结构化数据进行高效存储、管理、分析,已经成为企业数字化、智能化转型时需要着重处理的环节。
 
  近期,长期自研存储技术的青云科技正式推出了非结构化数据统一存储平台QingStor U10000,面向私有云场景,以期赋能企业加速数字化转型。
 
  青云科技存储产品总监冯相东介绍,和QingStor NeonSAN 主要面向结构化数据高性能业务场景需求不同,QingStor U10000 主要面向非结构化数据的场景,包括影像数据、音视频数据、数据湖、大数据、物联网等场景。青云希望通过专业的存储分工能更好地服务专业的场景。
 
  据悉,QingStor U10000产品设计初衷就是为了帮助客户更好地实现海量数据的价值挖掘。QingStor U10000支持文件、对象和大数据三种非结构化数据访问协议互通及无损共享,容量方面支持横向扩展,线性增加整体系统的容量和性能,且可独立水平扩展元数据和存储节点;安全性方面,实现元数据和业务存储数据分离存储,有效规避单点故障;在运维方面,提供资源管理、配置管理、告警、日志、监控等一系列的统一管理平台。
 
  根据客户需求,QingStor U10000支持软件交付和存储一体机两种交付模式。
 
  全 自研
 
  冯相东表示,青云存储产品的一个重要特点就是,真正自研的中国存储。和QingStor NeonSAN 一样,QingStor U10000继承与融合QingStor对象存储及文件存储,也是由青云科技存储团队自主设计,没有继承任何开源的架构,不存在任何知识产权的风险。自主研发使得技术QingStor U10000百分百可控,不存在技术盲区,能更好支撑企业数字化转型需求。
 
  在信创领域,包括QingStor U10000在内的青云各产品线兼容核心国产硬件平台和操作系统平台,比如鲲鹏、飞腾、海光等目前主流的国产硬件平台,还有麒麟软件、统信、openEuler等国产操作系统,青云已实现完整的生产化兼容。
 
  “青云作为中国云计算公司,怀揣着中国存储服务数字中国的愿景,希望通过自身的努力能消除企业对数据安全的顾虑,以真正自研的中国存储服务于数字中国。”冯相东强调。
 
  真 多协议无损互通
 
  QingStor U10000相比于青云早前推出的QingStor对象存储和文件存储产品,除了产品力的全面继承,还以几个方面做了明显的能力提升,包括实现数据协议的互通,功能和性能的增强,整个算力平台对接的强化等。
 
  冯相东特别强调,QingStor U10000构建了统一索引架构,支持多协议无损互通,从而实现数据的访问和流通的高效。
 
  为什么要特别强调“协议互通可以让数据分析更高效”,冯相东阐述道:“一份数据在一个完整的业务场景下可能会在多个环节有数据处理的需求,如果做不到协议互通,这个数据需要不停地Copy,比如在这个业务的存储空间里先处理完,再Copy到另一个存储空间,用另一种存储协议做访问,这样会增加多种存储间数据迁移的成本。”
 
  也就是说,无论是基于对象接口存进来的数据、基于NFS/SMB存进来的数据,还是通过HDFS大数据专用协议存进来的数据,QingStor U10000都是基于统一的索引架构提供这些数据的元数据管理。这种架构为应用带来好处就是:不需要通过格式转化就能让对象存储存进来的数据,通过NFS访问,或者NFS存进来的数据可以通过S3访问。存储和读取数据之间不需要经过格式转化,这样就不会存在性能和语义的损失。
 
  以自动驾驶场景为例,冯相东介绍道,“通常情况下,一辆路测车每天可能会产生几TB或者几十TB的数据,有几十辆路测车,每天产生差不多1PB的数据,正常情况下,这1PB的数据需要通过四个环节的处理才能真正发挥其作用。第一个环节是数据的上传和导入,通常会用到存储里的S3和NFS的协议。第二个环节是数据预处理,基本上以HDFS这种大数据分析的框架为主。第三个环节是AI训练,以NFS协议为主。第四个环节还会涉及仿真测试,主要以NFS和SMB协议为主。通过自动驾驶完整数据链的处理环节可以看到,一份数据在不同的阶段,需要通过不同的数据访问协议对接不同的计算框架,只有协议互通才能让数据分析更高效。”
 
  市面上虽然也有在讲协议互通的分布式存储厂商,但大多是通过格式转化的技术实现的,谈不上真正的“多协议无损互通”,在底层来看,就是因为没有统一的索引架构。冯相东认为:“统一的索引架构是QingStor U10000 在架构层面非常明显的一个优势。”
 
  青云科技产品技术解决方案总监张忠华介绍,QingStor U10000广泛适用于容器存储、大数据分析、PACS(医疗影像系统)、高精度地图、多媒体数据处理与存储、冷数据备份和归档等应用场景,并已经在互联网体检、智能驾驶、智能工厂的IoT场景和多元化的超算场景成功应用。例如,青云提供的存储集群及算力资源,基本上解决了某智能驾驶科技公司的高精度地图业务场景从采集、生产、训练整个生命周期的存储和算力的需求。
 
  原标题:全自研 青云科技推出非结构化数据统一存储平台QingStor U10000
 
我要评论
文明上网,理性发言。(您还可以输入200个字符)

所有评论仅代表网友意见,与本站立场无关。

  • 存储涨价已成定局!闪迪美光先行、三星和SK海力士紧随

    据媒体报道,美光和闪迪等美国内存制造商已决定在下个月开始涨价,其中闪迪将从4月1日起将NAND价格提高10%以上。作为全球排名第一和第二的NAND闪存厂商,有行业消息人士表示,这两家也准备在下个月提高NAND价格。
    存储设备NAND价格
    2025-03-12 14:14:37
  • 工信部组织开展算力强基揭榜行动

    工业和信息化部近日印发通知,组织开展算力强基揭榜行动。工业和信息化部将统筹利用各类资源对揭榜入围、优胜单位予以支持,推动优秀成果示范应用推广。
    算力数字经济存储设备
    2025-02-27 09:51:59
  • 紫光发布一大波全新SSD:国产先进主控、闪存

    西安紫光国芯UniIC宣布正式推出全新SSD产品,共有四大系列。这些SSD在规格上多种多样,分别支持SATA 6Gbps、PCIe 3.0、PCIe 4.0,并有2.5英寸、M.2 2280/2242三种不同形态。
    SSD产品存储设备
    2024-04-30 13:23:53
  • 早报|百度终止收购YY;中国坐稳全球第二企业级存储市场座椅

    2023年前三季度,中国企业级存储市场同比下降0.8%,存储销售容量达到16.7EB,不过在全球份额已提升到19.2%,牢牢坐稳全球第二企业级存储市场这把座椅;1月1日,百度宣布通过行使合同权利,终止收购欢聚集团在国内视频娱乐直播业务......
    存储设备无人机
    2024-01-03 10:09:45
  • 存储行业拐点来了:SSD等要涨价 有厂商财报明确!

    7月6日消息,对于存储行业,拐点可能真的来了,至少有厂商已经在财报中明确了。
    存储设备SSD
    2023-07-06 10:01:53
  • 这家厂商斩获多个激光退火设备大订单

    日前,美国维易科精密仪器(Veeco Instruments)公司宣布,公司从一家全球先进的半导体存储设备制造商那里获得了多个激光尖峰退火(LSA)设备订单。
    半导体存储设备存储设备
    2023-05-29 14:27:24
版权与免责声明:

凡本站注明“来源:智能制造网”的所有作品,均为浙江兴旺宝明通网络有限公司-智能制造网合法拥有版权或有权使用的作品,未经本站授权不得转载、摘编或利用其它方式使用上述作品。已经本网授权使用作品的,应在授权范围内使用,并注明“来源:智能制造网”。违反上述声明者,本站将追究其相关法律责任。

本站转载并注明自其它来源(非智能制造网)的作品,目的在于传递更多信息,并不代表本站赞同其观点或和对其真实性负责,不承担此类作品侵权行为的直接责任及连带责任。如其他媒体、平台或个人从本站转载时,必须保留本站注明的作品第一来源,并自负版权等法律责任。如擅自篡改为“稿件来源:智能制造网”,本站将依法追究责任。

鉴于本站稿件来源广泛、数量较多,如涉及作品内容、版权等问题,请与本站联系并提供相关证明材料:联系电话:0571-89719789;邮箱:1271141964@qq.com。

不想错过行业资讯?

订阅 智能制造网APP

一键筛选来订阅

信息更丰富

推荐产品/PRODUCT 更多
智造商城:

PLC工控机嵌入式系统工业以太网工业软件金属加工机械包装机械工程机械仓储物流环保设备化工设备分析仪器工业机器人3D打印设备生物识别传感器电机电线电缆输配电设备电子元器件更多

我要投稿
  • 投稿请发送邮件至:(邮件标题请备注“投稿”)1271141964.qq.com
  • 联系电话0571-89719789
工业4.0时代智能制造领域“互联网+”服务平台
智能制造网APP

功能丰富 实时交流

智能制造网小程序

订阅获取更多服务

微信公众号

关注我们

抖音

智能制造网

抖音号:gkzhan

打开抖音 搜索页扫一扫

视频号

智能制造网

公众号:智能制造网

打开微信扫码关注视频号

快手

智能制造网

快手ID:gkzhan2006

打开快手 扫一扫关注
意见反馈
我要投稿
我知道了