最新消息:欢迎来到 艺宵网,有任何问题或建议请联系!在线留言

100自主研发聚焦四大场景 青云科技分布式存储再升级

Jacky 艺宵网

青云QingCloud (qingcloud.com)一直是比较“重”的云计算独角兽,很多核心技术都坚持自主研发、自主可控,存储也不例外。

从2012年推出第一个版本的云计算产品开始,青云QingCloud 旗下QingStor 分布式存储产品从架构设计到产品开发,完全采用 100 %自主设计、自主研发,从零开始构建而成。八年后,QingStor 分布式存储产品线日益完善,可以支撑市面上几乎全部主流云计算平台,应对企业对存储产品极致性能、大容量、高 IOPS、高吞吐及通用接口等多种复杂需求。

2020年9月2日,QingStor举行年度新品发布会,旗下NeonSAN、对象存储、文件存储和融合存储四款产品全面升级,并推出容器存储一体机 KubeSphere KF3000 和分布式全闪存储一体机 QingStor NF6000 两大新品。

企业级存储有哪些新的发展趋势?新一代QingStor产品有哪些技术创新?当很多厂商选择基于开源存储平台Ceph做二次开发时,青云QingCloud为什么要走从零开始自研这条艰难的路?近日,「智能进化论」采访了QingStor研发团队。

  热、冷、温、混合数据,四大场景产品全面升级

过去十年,企业级存储市场发生了巨大变革。云计算、移动互联网、大数据、5G、AIoT等新兴应用场景对存储不断提出新的需求。

QingStor 存储产品线研发负责人王煜认为,企业级存储市场的发展有两大趋势:

第一,分布式存储仍处在爆发增长期。IDC报告显示,无论是对象存储、文件存储还是块存储,在未来几年里都会保持两位数高速增长;

第二,随着SSD全闪介质成本快速下降,全闪存储逐渐成为主流。IDC报告显示,全闪存储在所有采用存储的企业里已经占80%的使用率。而且今后几年每年都会保持50%的年均增速。

QingStor 存储产品线研发负责人 王煜

当企业的存储场景越来越多样和复杂,没有任何一种存储方案能够完全满足所有存储场景。有些场景需要极致性能,有些需要大容量,有些需要高IOPS,有些需要高吞吐,有些则需要通用的接口。

青云QingCloud把存储场景分为热数据、冷数据、温数据以及混合场景四大类。QingStor的四个产品分别针对四大场景开发:面向企业核心业务数据的块存储;面向海量静态数据、适合非结构化数据的对象存储;面向通用场景的文件存储;以及兼顾多种存储场景的融合存储。

分布式块存储QingStor NeonSAN是面向企业关键业务与核心数据的性能担当。能否稳定运行Oracle RAC集群数据库是对高端存储性能的一个考验。此前只有传统存储才能做到。QingStor NeonSAN是第一款也是唯一一款能够支持Oracle RAC的分布式存储产品。

而且在兼容性方面,QingStor NeonSAN可以对接VMware、OpenStack、Hyper-V等主流的虚拟化或云计算平台。同时,面对日益普及的云原生环境,QingStor NeonSAN可以为K8s、KubeSphere容器平台提供高性能、可靠性、企业级分布式存储的能力。

根据IDC最新的研究报告,目前全球数据总量已达50ZB(约等于1万亿GB),其中非结构数据占到80%。对象存储正是管理快速增长的非结构化数据的最佳选择。QingStor 对象存储 3.0 是一款鱼和熊掌兼得的存储服务,兼得海量数据存储和数据存储的超高性能。3.0版本新增了数据迁移、数据保护、数据备份、AI视频监控等更多场景。性能方面,当单存储桶(Bucket)对象数量超百亿时,QingStor 对象存储性能仍可保持稳定,在业界处于领先地位。

文件存储是最古老且运用最广泛的一种数据存储方式。全新升级的QingStor文件存储通过自研整个文件系统栈,搭建统一命名空间,让文件存储摆脱了本地文件系统的限制。每一个目录支持多个接入节点同时访问,在容量和和文件数量上没有限制,让处理能力有了水平扩展。

QingStor融合存储满足的是企业一次采购就能获得多种存储类型和存储接口的需求。它将上面三款专业存储在部署层面上做了整合,但是在架构层面上依然保持每一个专业存储本身的架构特点,以及完整的功能和性能。

开源VS自研,真正的创新源自最难走的路

目前,很多国内存储厂商在技术路线上,会选择基于Ceph这样的开源分布式存储平台作为底层进行二次封装和二次开发。青云QingCloud为什么要选择100%自研这条非常艰难的路?王煜表示,主要基于两点:

第一, 企业核心业务上云对于安全性、隔离性、大规模水平扩展能力都有很高的要求,开源分布式存储产品很难全面满足这些要求。通过对Ceph性能的严格测试,以及对大量企业客户的调研,QingStor研发团队认为,Ceph最根本的逻辑是期望通过一套解决方案满足所有的需求,这对具有高专业性的存储业务不太适用。

“如何快速开发分布式存储的企业级产品,Ceph给企业提供了很好的平台。但是如果在底层技术研发上没有积累,后面的发展会比较危险。这也是为什么我们很难在企业核心业务场景里看到Ceph的身影,比如高性能数据库等场景。更多是用在新兴场景,对象存储的接口等。”

第二, 自研可以为中国客户提供全栈自主可控的优质产品,从而消除企业对数据安全的顾虑。目前,从软件架构、底层芯片到操作系统,QingStor 已经全面实现和国产化厂商的兼容、互认证,构建起国产化生态。目前QingStor已完成与鲲鹏、飞腾、中科海光、浪潮 OpenPower 等国产芯片的兼容适配测试,实现对统信 UOS、麒麟、欧拉等主要国产操作系统的兼容对接。

正是自研让青云QingCloud在存储领域获得了一些行业领先的新技术。比如,在QingStor NeonSAN 3.0版本里推出NVMe over RoCE的技术,简称为NVMeoF,实现客户端访问存储的新协议。在文件存储中,QingStor 已经用到现在业界最先进的、非常适合底层存储编码的Rust语言。用Rust语言开发存储系统正在成为一种行业趋势,AWS无服务器服务、Dropbox的核心存储系统、Facebook区块链项目Libra都已支持Rust语言。

  强化场景化能力,做能解决业务问题的存储

除了技术、性能、功能上的全面提升,场景化能力也是本次QingStor年度升级的重磅内容。

一方面,QingStor 产品更加注重与上层应用开发合作伙伴的无缝对接。“我们新版本发布的非常重要的一个方向就是场景化能力的加强,帮助存储行业上层的ISV厂商,更容易基于我们的产品来开发上层应用。”王煜表示。

KubeSphere KF3000 容器一体机,就是为帮助企业用户优化落地容器平台的生产环境而推出。QingStor 存储产品线产品经理冯相东介绍,“如果青云QingCloud 只是把目前在国内第一款开源容器平台 KubeSphere,以及在业界领先的分布式块存储 QingStor NeonSAN 提供给企业,企业还需要做大量配置的工作,在落地生产上也要再做优化。”

QingStor存储产品线产品经理 冯相东

另一方面,QingStor让存储产品更落地场景,旨在帮企业直接解决业务问题,而不仅仅是增强IT能力。比如,在AI视频监控场景下,QingStor对象存储彻底打通视频影像数据的生命周期,让企业轻松管理从海量数据存储到数据分析处理,到数据归档的流程。通过SDK让智能终端直接写数据到对象存储,简化了端到存储的流程,并平滑对接外部数据AI分析引擎。

自动驾驶是一个典型的对象存储商业场景,企业每天采集到的原始数据量级达到上百TB。在某自动驾驶客户的案例中,QingStor对象存储因其超高的性能,标准开放的应用接口、灵活部署、运维简单等优势满足了客户需求。目前,QingStor对象存储已经为该客户存储了超过 10PB 的数据。在业务初期,还解决了跨云跨区海量数据迁移的难题。

  写在最后

技术路线的选择与企业的价值观息息相关。在低成本快速开发产品与沉下心自研提供最高阶的品质之间,青云QingCloud选择了后者。

经过 8 年锻造,100%自主设计和研发,为云而生的QingStor 分布式存储,不仅是青云QingCloud自身全部云产品的底层支撑,也已经被数万企业客户大规模验证。

大家都在看

incaseformat病毒大面积爆发,请早做防范
科技资讯

incaseformat病毒大面积爆发,请早做防范

观威海 2021-01-14 536浏览 0评论

近期,部分单位政务网、互联网电脑感染“incaseformat病毒”,病毒可通过U盘、光盘等移动介质传播,导致删除大量文件且无法恢复,请各单位及时更新杀毒软件病毒库,专杀工具互联网下载地址:http://59.224.26.143。下班后关闭不使用的电脑,不要长期使电脑处于待机状态。...

2021年需要关注的10个IT趋势
科技资讯

2021年需要关注的10个IT趋势

Danny 2021-01-13 637浏览 0评论

当行业分析师和技术专家在2020年年初做出年度预测时,他们专注于云计算、人工智能、机器人等技术将如何改变市场。他们预测,对IT人才的需求将会供不应求,数据科学将继续发挥重要作用,数字化转型将决定组织业务的成败。但他们却没有预料到在全球爆发的新冠病毒疫情会从根本上改变人们工作和个人生活的各个方面。...

阿里百度等互联网平台上线“绿网计划”
科技资讯

阿里百度等互联网平台上线“绿网计划”

郑合惠子 2020-11-28 898浏览 0评论

每一年,涌入互联网平台的非正常搜索高达数百亿次。这些搜索背后,可能暗藏着试图自杀的人的挣扎与呼救。让每一次搜索背后的求助都能得到回应,而不是冰冷的报错与拦截,阿里百度等互联网平台上线“绿网计划” ,用暖心的宣导呼吁来取代“抱歉,这个页面找不到”。...

云麦科技出席CNBC全球科技大会,探讨智能健康未来
科技资讯

云麦科技出席CNBC全球科技大会,探讨智能健康未来

Jacky 2020-11-20 512浏览 0评论

以东西方科技对话为主题的2020CNBC全球科技大会,于2020年11月17日在广州召开。作为智能运动健康领域的头部企业,云麦科技受邀参加本次大会,云麦科技创始人CEO Wyatt出席,并与古德菲力CEO许捷一同参与《结构后疫情时代健康产业趋势》主题圆桌会谈。 疫情期间,大众对健康的关注度大幅提升,希望通过运动增强免疫,根据CBNDATA调...

奥克斯率先携手中国标准化研究院,联合共建首个符合GB/T33658热舒适实验室!
科技资讯

奥克斯率先携手中国标准化研究院,联合共建首个符合GB/T33658热舒适实验室!

Jacky 2020-11-20 476浏览 0评论

11月17日上午,奥克斯与中国标准化研究院在人类工效学领域达成共识,进行了合作签约,并在奥克斯创研中心举行了热舒适联合共建实验室揭牌仪式。中国标准化研究院作为国家级科研机构,拥有国内唯一经CNAS认可的人类工效学实验室。这是家电企业首次联合中国标准化研究院共建热舒适实验室,对奥克斯乃至整个家电行业来说意义非...

2020电子政务与智慧城市解决方案提供商100强
科技资讯

2020电子政务与智慧城市解决方案提供商100强

Danny 2020-11-18 1328浏览 0评论

智慧城市是电子政务的延伸与拓展,赋予了电子政务新的内涵。某种意义而言,电子政务与智慧城市就是同气连枝的共生关系,电子政务与智慧城市解决方案提供商正是将二者的发展做到“曲尽其妙”之境的重要推手。...

K歌人的狂欢,电商赛拉开2020全民K歌年度盛典大幕
科技资讯

K歌人的狂欢,电商赛拉开2020全民K歌年度盛典大幕

Jacky 2020-11-16 923浏览 0评论

日前,2020全民K歌年度盛典线上大赛电商赛场正式开赛,比赛将从主播、商家和品牌三个维度进行比拼,最终决出年度电商带货主播和商家的优胜者,跨界音乐人们将在这里实现自我价值的又一次飞跃。 除电商赛场之外,今年的年度盛典还设置了其余6大赛道公会、个人、粉丝团、歌房、家族和星计划,平台上的每位主播都将开足火力全...

新技术驱动新商业 网易创新企业大会看点前瞻
科技资讯

新技术驱动新商业 网易创新企业大会看点前瞻

Jacky 2020-11-16 912浏览 0评论

突如其来的疫情对传统商业模式的冲击,让各大企业看到了数字化技术和能力对于商业模式创新和商业生态系统重构的助力。AI、5G、云计算、超高清、VR/AR新技术层见迭出,线上零售、在线会议、互联网医疗、AI 营销新商业模式不断显现,正在重塑全行业。那么企业该如何利用新技术驱动新商业,获得创新发展呢? 11月28日,网易旗...

奢护四季 吾衣例外,COLMO洗衣机 X 例外打造奢品护理季,掀全国奢护美学风暴
科技资讯

奢护四季 吾衣例外,COLMO洗衣机 X 例外打造奢品护理季,掀全国奢护美学风暴

Jacky 2020-11-16 183浏览 0评论

高端衣物的背后,究竟有何奢护美学?自10月17日开始,从北京到重庆、上海、成都等全国十几座城市,高端AI科技家电品牌COLMO携手国内一线时装品牌例外,打造奢品护理季,让1%菁英群体零距离尊享空气洗体验,与数千位对品质生活有着无限追求的消费者一道,共同完成了一场奢护四季吾衣例外高端衣物奢护美学之旅。 尊享奢洗五 步...

网易数帆入选2020年电子信息行业自主创新成果
科技资讯

网易数帆入选2020年电子信息行业自主创新成果

Jacky 2020-11-16 515浏览 0评论

11月12日,2020第二十四届中国国际软件博览会(以下简称软博会),在杭州白马湖国际会展中心开幕。大会以软件铸魂,数智转型为主题,展现软件产业发展新特点、新模式、新业态。会上,中国电子信息行业联合会正式发布《2020年电子信息行业自主创新成果推广目录》。网易数帆基础软件平台成功入编该目录,荣膺自主创新应用称号...

发表我的评论
取消评论
昵称 (必填) 手机号 (必填)

网友最新评论【查看所有评论

阅读原文 阅读 100000+