东数西算的专利故事
一项大工程启动了!2022年2月,国家发展改革委等部门同意京津冀、长三角、粤港澳大湾区、成渝、内蒙古、贵州、甘肃、宁夏8地启动建设全国一体化算力网络国家枢纽节点,并规划了10个国家数据中心集群。至此,全国一体化大数据中心体系完成总体布局设计,“东数西算”工程正式全面启动。这可谓是数字经济时代的“南水北调”、“ 西电东送”、“ 西气东输”。、
“东数西算”指的是什么呢?
“数”指的是数据,“算”指的是算力,即对数据的处理能力、计算能力。算力如同农业时代的水利、工业时代的电力,是数字经济发展的核心能力之一。通俗点说,就是在西部地区发展数据中心,把东部地区经济活动产生的数据和需求放到西部地区来计算和处理。
“东数”为什么要“西算”?
东部地区虽然经济发达,但随着经济的快速发展,能源、水资源、土地等资源提供的压力加大,发展数据中心受限,而西部地区能源丰富、土地面积广,能够承载不同地区算力的大量需求,也能够拉动西部数字经济发展。
中国一直希望东部带动西部经济发展,但是单靠传统的方式比较难,而如今“数据西迁”不正是一个推动西部经济发展的好时机吗?
一时间,“东数西算”工程引起了全网热议,恰逢新一轮科技革命和产业变革正在重塑全球经济结构,越来越多的高科技企业相继投入其中。华为云已布局一南一北两大云数据中心以及三大核心数据中心,阿里云、腾讯在多个枢纽节点均设有数据中心。
“东数西算”分为“数”与“算”,其中重要的问题便是数据从何而来?数据如何处理?作为专利工作者,笔者将从专利的角度进行解读:
首先,来看看数据的“来”。
现有技术中,通常采用专线的方式进行海量数据的远距离迁移,往往构建多个专线需要耗费大量的硬件成本以及时间成本。北京星汉未来网络科技有限公司对远距离数据迁移进行思考,提出了一种数据迁移系统,该系统包括调度服务器和至少一个云平台,调度服务器在确定接收到针对待迁移的目标数据的数据迁移请求后,获取目标数据的数据配置信息;根据数据配置信息,对至少一个云平台进行弹性扩容,获得服务器集合;调用服务器集合中的云服务器,对目标数据进行数据迁移,确定数据迁移完成时,释放服务器集合,既提高了数据迁移效率,也降低了数据迁移的成本(CN113986825A)。
将数据中心从一线城市向周边转移,也少不了不同区域的数据互通的问题,北京东方国信科技股份有限公司针对这一问题进行了创新,提出了一种基于大数据的跨地域任务调度方法,采用跨域调度引擎根据元数据信息对语法树进行拆解,生成并分发在总数据平台或分数据平台执行的多个逻辑执行计划,收到逻辑执行计划的集群,由跨域调度引擎获取相关的本集群存储的元数据,并从元数据中获取所有数据块的位置信息产生最终在本集群执行的逻辑执行计划;跨域调度引擎向数据节点分发逻辑执行计划,收到逻辑执行计划的数据节点上的数据分析引擎进行数据读取和计算,集群汇总计算产生初步汇总结果并根据发送位置信息发送;收到初步汇总结果的集群将数据二次汇总计算产生最终查询结果返回给用户。能够有效避免海量数据传输,节约带宽,降低成本(CN109815254A)。
其次,对于数据我们又需要进行什么样的工作呢?
无论是硬件设备损坏造成的宕机还是自然灾害等造成的机房失效,亦或是难以预料的极端情况都会给数据中心带来数以万计的损失,而数据与我们的生活息息相关,可见,必要的数据灾备可以说是我们生活的保障。
阿里巴巴集团控股有限公司为数据灾备技术做出了贡献,提出了不同地理区域间的数据同步,通过扫描被同步设备中的更新占比计算同步进度,在感知到备份设备的情况下,按照确定的同步进度同步数据给备份设备,通过在不影响一致性服务单元的前提下,增加一致性服务单元的备份节点,特别地,在机房故障或者其他灾难的情况下,能够很好地预估能够恢复数据量(CN112988882A)。
随着互联网的大规模普及和应用,数据量的爆炸式增长标志着大数据时代的来临。海量数据的发展为人们的生活带来诸多便利,例如云存储、电子支付、网络购物等,但随之而来的也有处理海量数据的严峻挑战。腾讯科技(深圳)有限公司针对数据查询分析时延的问题,提出一种数据处理方法,通过将相关的数据导入数据库管理系统,然后根据客户端设置的数据处理规则对数据库管理系统中存储的海量数据进行查询分析,并得到不同维度下的目标数据,利用数据库管理系统的特点以及数据同步服务的结合可以自义定查询数据,并且可以缩短聚合数据查询分析的响应时间,提升在线实时分析查询的效率,实现查询结果的所见即所得 (CN112416991A)。
可以预见,“东数西算”项目建设周期将是持续数年的长线工程,在数据传输、存储等的方面,各高科技公司已经进行了多年的潜心研究和技术革新,随着技术的不断创新,网络长距离传输造成的时延,配套设施问题等影响将不再是难以突破的障碍,将可再生能源丰富的西部地区与高耗能的数据中心结合起来,促进东西部数据流通、价值传递,带动数据中心相关产业由东向西有效转移,将实现更好的可持续发展。
-
上一篇:
-
下一篇: