数据结构论坛

首页 » 分类 » 问答 » 双十一,尾款人的狂欢同时也是数据存储的大
TUhjnbcbe - 2024/6/7 18:27:00

尾款、满减、秒杀,今年双十一你“剁手”了吗?

据官方数据显示,双十一零点开售仅45分钟,天猫个品牌成交额已突破一亿,最终商品交易总额达到5,亿元。这场全民购物狂欢的背后离不开各类技术的支持,今天,小元菌主要想聊一聊其中至关重要的一个环节——存储。

随着人们浏览习惯的改变,为了更好地吸睛和激发购买欲,电商商品展示页面多是大量精美的图片,5G时代的到来,短视频和直播产业发展迅速,为电商发展带来新的活力,同时,海量的图片、视频等非结构化数据也为存储带来巨大压力。

今年双十一,天猫共有29万商家参加,在线商品达到万,超8亿消费者参与,当天访问量达到平时的8倍,预售首日,头部主播李佳琦、薇娅直播间观看总人数近5亿。在如此庞大的数据背后,用户购买体验的保障,离不开海量非结构化数据实时储存、处理需求的稳定支撑。

非结构化数据的存储难题

非结构化数据是数据结构不规则或不完整,没有预定义的数据模型,包括所有格式的办公文档、文本、图片、XML、HTML、各类报表、图像和音视频信息等。随着大数据、AI、物联网、5G技术兴起,近几年,非结构化数据呈爆发式增长,据IDC预测,到年,全球数据总量达到ZB,而非结构化数据将会占据数据总量的80%-90%。

与直接投入应用的结构化数据不同,非结构化数据由于其高增量以及不规则或不完整结构导致企业用户在统一存储、管理、分析和应用等方面陷入困局。从应用的角度看,对于存储提出的挑战主要有以下这几个方面:

面对不断增长的数据,需要存储系统具有更强的扩展性;

面对多种多样的数据类型,需要存储系统有更丰富的存储接口;

面对非结构化数据变现难的问题,需要存储系统能更好地支持数据分析应用。

YC-DUS为非结构化数据而生

为应对非结构化数据挑战,元核云资深技术团队根据十余年存储产品研发运维经验,倾力打造的拥有自主知识产权的软件定义分布式存储产品——YC-DUS,该产品利用先进的分布式存储技术,将标准X86、ARM、国产化芯片服务器整合为统一的存储资源池,为上层应用提供对象、块、文件统一存储服务。

YC-DUS产品基础架构

YC-DUS六大核心优势

01、聚合性能

支持PCI-ESSD、SATASSD、SAS/SATAHDD纵向block级融合加速,横向全分布式无单点性能聚合。支持GE、10GE、InfiniBand、FC网络。最高可支持万级节点数、EB级容量。

02、弹性扩展

支持在线scaleup(纵向扩展)和scaleout(横向扩展)。支持多存储服务硬件共享和池化,按资源池扩容。

03、智能运维

支持硬件性能打分、一键化自动部署、多数据中心集群统一管理、统一监控、多种异常告警方式。支持硬件异常智能检测、硬件故障自动隔离、数据智能恢复、数据报表、智能统计报告等运维功能。

04、安全稳定

支持多副本、EC、故障隔离域、数据多级归档、同城双活、异地灾备、延迟删除、多版本策略等多种数据安全特性。拥有超过40PB、千级服务节点、千亿级文件数量、万级虚拟机支持、近六年无故障的单一客户案例,期间经历机房断电、硬盘/网卡/服务器等硬件损坏、网络异常、OS系统升级、多次扩容、服务器替换等各种生产运营场景。

05、硬件适配

支持标准X86服务器和自主可控的国产化芯片服务器。支持CentOS、Ubuntu、RedHat等多款主流操作系统,同时支持自主可控的主流国产化操作系统。拥有集成HP、超微、联想、戴尔、浪潮、华为、宝德等多款服务器产品的长时间稳定运营案例。和东芝、超微、赞华等多家企业建立联合实验室,共同对软件定义存储硬件适配场景进行深入测试调研。

06、大数据平台支撑

可替代原生HDFS,为Hadoop、Spark等大数据平台提供更加专业、高效的数据存储服务,为计算分析提供稳定可靠的底层支撑。

以双十一为代表场景,如今,非结构化数据无处不在,且对各企业的数据存储和管理提出更高的要求。元核云通过不断深耕非结构化存储领域,帮助客户构建更加智慧的IT基础设施,以适应数据增长与应用趋势,进一步提升企业的竞争力和用户服务能力。

1
查看完整版本: 双十一,尾款人的狂欢同时也是数据存储的大