基础架构>业界新闻

Infrastructure

让交付再快一些,QingStor全面拥抱云原生

作者:李丽   责任编辑:李丽 2021-07-29 15:22:05
来源:电脑商情在线关键字:青云科技,CIC,云计算峰会上,QingStor,分布式存储

在分布式存储领域,QingStor已经有了近十年的技术积累。在一路演进的过程中,QingStor已经可以提供云原生时代的全栈存储服务。

“现在存储的服务化趋势越来越明显,开发者甚至不需要了解太多存储的特性,只需要描述需求,就可以通过QingStor的提供的API使用存储服务。这种服务化已经不仅仅局限在对象存储,块存储和文件存储也可以以这种方式实现交付,这就是云原生的带来的最大变化”。青云科技QingStor存储平台总监王煜分析说。

如果把数据中心看作是一台PC,那么QingStor分布式存储就是里面的硬盘。

让存储天然生长在云上可能是QingStor与我们熟知的传统存储品牌最大的不同。

王煜在采访中也表示,我们一方面不相信硬件完全可靠,又要让硬件充分发挥出它的性能,所以就需要用软件去弥补这一反差,如何找到这个平衡点正是我们架构设计的出发点。

如王煜所说,QingStor为了提供云原生时代的全栈存储服务,设计了两套引擎。一套是就是之前推出的软件定义分布式SAN存储系统——NeonSAN,另一套就是即将发布的自研的云原生分布式文件系统——HydroFS。

在7月29日青云科技一年一度的CIC(Cloud Insight Conference)云计算峰会上,QingStor宣布要全面拥抱云原生,并面向云原生存储需求,重磅推出专为云原生发布的块存储产品——NeonIO,以及自研的云原生分布式文件系统——HydroFS。

除了重磅新品发布,QingStor 块存储、对象存储、文件存储三款主力产品全面升级到v4.0,打造更大规模、更高性能、功能丰富的企业级分布式存储。

同时,青云科技也宣布全面开启开源之旅:HydroFS 全面开源,推动建立 BeyondStorage 开源社区打造跨多云数据存储服务。

NeonIO:专为云原生设计的块存储

这次新发布的NeonIO 是专为云原生设计的块存储产品,全面兼容主流容器平台,如KubeSphere、OpenShift等等,通过完整实现 CSI 容器存储接口,实现在容器平台上支持卷动态置备、创建、销毁、快照等存储功能。除提供 CSI 接口外,NeonIO 也更适应云原生的架构设计理念,实现了全栈存储组件的容器化部署,实现平台无关,可运行在国产操作系统和 ARM 架构平台,与云原生应用融合部署运行。在架构设计过程中,NeonIO 也尽量最大化利用 k8s 集群本身的健康检查、选主机制、任务队列、日志收集、配置保存等能力。

NeonIO 还通过 Operator 机制实现了自动化部署和扩容能力,更匹配云原生应用的安装部署习惯。

事实上,NeonIO 并非完全意义上的全新产品,其在架构设计上汲取了 NeonSAN 的优势,以及经历了多年企业生产环境验证,能够充分保障产品的高性能、高可靠性。如 NeonIO 继承了 NeonSAN 短 IO 路径的优势,实现从逻辑上的卷到物理硬盘的直接映射,中间不存在本地文件系统的额外开销。

NeonIO 已在上半年发布了内部测试版本,也将在下季度正式发布社区版,可通过 GitHub 等开源社区下载安装。

HydroFS:自研的云原生分布式文件系统

Hydro 的本意是水利发电,如果把数据比作海洋或湖泊,那么青云希望HydroFS 能真正成为企业数据的基础设施,从而最大化挖掘数据价值。

HydroFS 将成为 QingStor 企业级存储产品的全新存储引擎,但并不仅限于此,HydroFS 作为领先的分布式文件系统架构,可以脱离 QingStor 独立部署和使用。HydroFS 可以通过 CSI 接口为云原生应用提供全场景的存储服务,支持在 k8s 平台进行部署和运维,也支持 FUSE/HDFS 接口协议,可作为大数据系统的底层存储,无缝替换 HDFS。

在架构设计上,HydroFS 拥有很多独特的优势,如极短的 IO 路径、高吞吐能力、实现分布式元数据层,以及在灵活性上满足多租户、多场景个性化配置需求,并且创新性的采用 Rust 编程语言,有效提升系统安全和 IO 处理效率。

开源社区打造跨多云数据存储服务

如前文所说,QingStor 将全面拥抱开源社区,并希望通过开源社区拉近产品与开发者之间的距离,从而更好、更快的迭代产品,更希望 QingStor 的开源项目能够对接更贴近用户的软件生态,进而深度赋能更广泛的应用场景。

为实现上述目标,QingStor 制定了详细的开源计划。首先,QingStor 在跨云数据迁移、对象存储管理等领域开源了 qsctl、qscamel、qsftpd 等一系列相关工具。而后,QingStor 将在今年第三季度将云原生分布式文件系统 HydroFS 全面开源。最后,QingStor 将尝试建立并维护一个中立的开源存储生态。

自 2021 年开始,QingStor 牵头建立了一个厂商中立的开源存储社区——BeyondStorage,这是一个专注于提供跨云数据服务的开源社区,社区现有 40 余个开源项目。在整个社区的生态架构层面,QingStor 首先实现了一个厂商中立的存储开发库——go-Storage,对下可通过插件机制对接来自于不同厂商的云存储服务,对上则提供了一个完全统一的应用开发接口,所以通过 go-Storage 进行开发的应用都可以无缝对接下层的存储服务。

如何根据业务特性选择分布式存储解决方案,又如何基于分布式存储实现大数据的统一操作管理、更好支持上层应用乃至敏捷业务创新,是当前企业最为关注的问题。NeonSAN是QingStor面向云时代企业关键业务的软件定义分布式 SAN存储系统,它与新发布的NeonIO 和HydroFS形成了完整的组合,也让不同需求的企业用户有了对应的选择。

让存储生长在云上,并不是简单的容器部署,而是使用云原生的能力解决复杂性,QingStor希望可以做到直达开发者,让交付更灵活更快捷。



CBI 友情链接: 至顶网 |  腾讯科技 |  凤凰科技 |  商业伙伴 |  移动信息化 |  企业网 |  中国软件网 |  CIO时代网 |  更多>>

CBI集团介绍 |  联系我们 |  CBINEWS刊例 |  版权声明  

版权所有:电脑商情信息服务集团 北京赢邦策略咨询有限责任公司

地址:北京市海淀区西三环北路72号院世纪经贸大厦B座1709室联系电话:(010)62178877

商务、内容合作QQ:2291221 联系电话:13391790444 詹老师

ICP证:川B2-20070068-5 川预审H8VZ-RBP6-X228-T60Z号 北京市公安局海淀分局备案编号:1101083710

声明:本媒体部分图片、文章来源于网络,版权归原作者所有,我司致力于保护作者版权,如有侵权,请与我司联系删除