ZKX's LAB

UCloud优刻得推出自研存储引擎US3 持续降低用户存储成本

2020-11-02新闻12

伴随着5G、大数据的广泛应用,带来了数据量的爆炸式增长。根据IDC预测,2025年全球数据总量将达到惊人的175ZB。数据存储在未来的数字化时代将面临更多挑战:每秒钟存储数据写入性能、数据云端存储可靠性、数据存储成本增高等问题尤为突出。

10月23日以“构建·创见”为主题的UCloud优刻得用户大会暨Think in Cloud 2020在上海召开。本次大会上,UCloud优刻得基于自研的全新存储底层架构,推出新一代对象存储产品US3。在可用性提升5倍,带宽提升2倍、IOPS提升10倍的同时,价格直降30%;并可精准定位在线音视频、大数据分析、内容分发及海量数据归档备份等多个领域。

推出新一代自研存储引擎,持续降低存储成本

UCloud优刻得在今年8月推出了“0.024元/GB/月”的归档存储产品,打破了存储领域降本的边界。仅仅2个月后,UCloud优刻得就基于自研的存储底层架构,推出全新一代对象存储产品——US3,在可靠性、安全性、高效性以及性价比上发挥更大优势。

特点一:可靠性

数据在存储过程中,通常也会发生一些静默错误。UCloud优刻得定期的Scrub一致性检查,能够帮助客户在数据长时间未被读取的情况下,通过公有云的定期数据校验发现并修复异常状态,保障数据长期存储的可靠性。新架构还提供了全链路CRC校验,同时保留传统的etag校验方式;两种方式并存,能够保证数据传输、存储的可靠性和一致性。除此之外,US3还支持跨区域复制功能,以满足更高的跨地域容灾需求。US3在低频和归档类型存储中,采用了大比例EC校验模式,校验块数量更多,可容忍更多磁盘同时故障。

特点二:安全性

支持客户端加密SDK,客户上传文件时可自行加密后上传,以确保用户数据上云的安全性。Token权限方面,在原有基础上支持了权限精细化控制,包括对某一存储用户Get、Put、List操作的独立控制。Token白名单的加入,可在一些内网服务场景中,保障用户不受Token泄露带来的数据泄露影响,确保数据在指定网段内才可被访问的安全性。

特点三:高效性

US3国内单个地域存储集群可支持超过50GB每秒写入带宽负载。相比原有架构,用户4MB分片上传延迟降低35%,小文件并发写入IOPS提升10倍。在大数据场景下,US3支持完整Hadoop接入方案,相同规模的对象存储集群,可比原有HDFS集群提升5倍数据写入速度;Spark数据处理时间缩短75%,帮助用户大幅提升数据处理效率。

特点四:性价比

存储成本的持续降低,离不开存储架构的优化与硬件资源的性能。UCloud优刻得采用了西部数据的磁盘阵列和SMR盘设备作为专有存储硬件,将单机柜存储容量提升5倍以上。0.024元/GB/月的归档存储价格,降低了客户的数据存储成本同时具备分钟级别取回时效。分钟级别的取回时效,让客户无需担心数据取回时效过长的问题。

精准定位四大场景,存储性能持续优化

US3将精准定位在线音视频、内容分发和数据分享、大数据分析,海量数据归档备份等四大场景,进行写入性能优化、读取性能优化、应用快速接入、降低存储成本的持续服务优化。以下是US3在两个大型企业的典型应用场景。

视频监控行业高写入负载案例

视频监控行业的快速发展,让网络高清摄像头进入了我们的生活。伴随着业务快速增长,数据云存储写入带宽的压力也随之而来。UCloud优刻得为某视频监控领域头部企业,提供单个存储区域可承载30G/s的写入带宽,2021年预计将达到100G/s。视频往往存在实时回看的需求,这就意味着更高的可用性挑战。US3在实际生产环境验证可达到99.999%的可用性,通过专有机房配合专线的定制化服务模式,能够满足重点客户海量视频数据的写入带宽需求。

Hadoop 适配,大数据应用快速接入

近年来电商行业蓬勃发展,对大数据场景有了更多探索。很多用户往往是通过购买云主机搭建Hadoop集群,利用云主机本地盘构建HDFS集群,进行大数据的存储。这种方案不仅存储空间有限、不易于扩容,且建设成本颇高。US3对象存储提供的Hadoop适配工具,为某电商服务公司实现Hadoop集群的数据接入,将大量分析数据存储在对象存储中。实现计算与存储分离,不仅可以获得更低的存储成本,也无需再担心存储集群扩容问题。除了接入客户自建的Hadoop集群,US3对象存储还可对接ES集群进行数据采集,使用托管的UHadoop集群实现数据分析,协助还不具备大数据集群运维能力的用户简化数据分析的难度。

UCloud优刻得作为一家中立的云计算厂商,始终关注着用户数据存储的性能与安全。未来,US3将持续优化存储性能,通过与各类场景结合,降低用户的硬件成本和运营成本,为用户提供安全可靠、极致性能、成本可控、便捷易用的数据存储服务,让用户的数据资产在未来释放更大价值。

#行业互联网

随机阅读

qrcode
访问手机版