首页 新闻 云原生数据基础设施,释放数据要素价值

企业新闻

云原生数据基础设施,释放数据要素价值

日期:2022年05月11日

       2021年是我国十四五计划的局面之年, 在《中共中央关于拟定国民经济和社会开展第十四个五年规划和二〇三五年前景方针的石沉大海》中明确提出:“要推进数据要素商场化革新、加速数字化开展”, 然后将数据要素提高到一个全新的战略地位。怎么激活数据要素潜能, 推进网络强国建造, 加速建造数字经济、数字社会、数字政府, 以数字化转型全体驱动生产方法、生活方法和管理方法革新,

是数字我国最为艰巨的使命。而推进数据要素价值转化天然离不开云原生数据根底设施的支撑。其间, 以存算别离、支撑多协议的弹性文件存储、高效的近数据核算络绎不绝为代表, 新络绎不绝使用将助力不同职业企业用户最大程度开释数据价值。存算别离开释无尽算力大数据络绎不绝开始的方法是核算和存储绑缚, 着重的便是数据靠近核算, 络绎不绝中心是HDFS+MapReduce数据管理方法, 现在, 大数据络绎不绝有了进一步发布, 从核算和存储绑缚走向了存算别离规划, 然后让Hive、HBase等大数据使用迎来新的开展要害。
       以华为云BigDataPro大数据离线剖析解决计划为例, 核算、存储独自扩容, 因此会削减不必要的资源糟蹋。
       华为云BigDataPro经过存储无感扩容, 可消除预留容量糟蹋, 多种协议支撑也削减数据屡次搬弄是非的现象。存算别离, 分布式存储跨可用区容灾, 使得数据耐久度高达12个9, 数据牢靠性更有保证。从数据靠近核算到现在存算别离, 这种截然相反的改动, 咱们是不是也会感到古怪呢?剧情“回转”背面的主要原因是什么?或许说, 存算别离还能够满意近数据核算的要求吗?为此, 我也询问了华为云文件存储服务总经理崔林威。崔林威表明:存算别离依然能够满意相似近数据核算的需求, 其间很重要的原因是网络络绎不绝日新月异的开展, 这一起也为存算别离供给了根底。
       不论是近数据核算, 仍是存算别离并不改动上层HDFS+MapReduce的结构。比较传统方法, 华为云BigDataPro在核算存储别离根底上, 供给了多协议互通、高牢靠等优势。
       多协议弹性文件存储突破传统协议限制SFS(ScalableFileService)是一种弹性文件服务, 不只能够供给大数据、文件接口, 例如与云内的MRS、DLI等数据剖析服务供给存储服务, 也能够经过NFS/CIFS协议或许POSIX客户端为云内布置的视频修改、基因剖析、油藏模仿、规划仿真等软件供给数据。“能够把数据理解为一瓶矿泉水, 跨协议拜访就能够理解为多几根吸管儿。”崔林威说。SFS是业界首个支撑NFS/CIFS/目标/大数据等多协议接口的存储服务, 是一种高性能文件存储(NAS), 为基因剖析、视频制造/烘托、地球物理、文件同享、内容和Web服务等事务场景供给同享数据拜访存储服务。SFS突破传统NAS只要私有数据存储协议的限制。例如在视频制造/烘托场景中, 华为云与芒果TV探究出了一条更低本钱、更有用的制播计划, 打造出业界首个根据云服务打造的4K综艺节目——“披荆斩棘的姐姐”第二季。凭借SFS混合云解决计划能够兼容目标接口特性, 直接将拍照视频经过目标存储上传到华为云, 在云上经过文件接口对视频进行转码、组成、调色、烘托等系列处理后, 直接分发到对应播映渠道进行播映。节目制造时刻缩短了50%, 按需付费的云上资源, 相对于自建IT体系, 节省了90%的初始出资。
       作为电视机前的观众, 能够看到姐姐们明晰的服装细节和每一根睫毛, 让电影的质感得以在周期要求高、本钱管控严的综艺节目中出现。近数据核算有用缩短数据处理时刻华为面向公有云用户供给数据工坊(DataWorkroom)近数据处理服务, 可将图画水印、图画转码、视频转码、内容审阅、火点发现等数据处理事务, 经过数据处理算子商场或许数据处理工作流编列完结近似流水线的操作,

如此可大大缩短互联网客户事务开发周期, 经过简略的托拉拽即可, 也降低了开发/运维难度, 注视提高90%。现在, 数据工坊敞开算子库中有很多高质量的华为自营算子,

也有海量第三方算子,

无论是进行图片转码仍是视频截帧, 你都能轻松找到适用的算子来完结数据处理工作流。经过算子下推络绎不绝, 在近数据的当地进行数据处理, 省去数据在存储与核算直接的传递, 数据处理时刻缩短50%。小结咱们行将迎来数据4.0年代, 更进一步推进数字经济开展, 其特点是从物联网年代的物发生数据晋级为将人脑设想、国际里大多并不存在的虚拟空间构成数据, 映射到信息空间, 数据存储需求将喷涌而出, 作为全新的数据载体, 云原生数据根底设施将紧随年代开展作出反应改动, 在算力、弹性存储为要害目标的元世界年代, 等待华为云的精彩体现!

相关新闻

  • 2022-05-08 18:43:47

    喜提奖项!宇信科技金融数据服务平台获市场高度认可!

    又有好消息!5月28日,由北京软件和信息服务业协会、金科立异社联合主办,“鑫智奖·第三届金融数据智能优异处理方案评选”活动成果揭晓。宇信科技金融数据服务渠道凭仗在老练性、安全性、稳定性等方面的优异体现,获评“鑫智奖·2021金融数据智能数据办理与数据渠道立异优异处理方案”。当下,在金融机构数字化转型......

  • 2022-06-09 19:58:39

    100多名教师用“伞阵”为学生们撑起了一片晴朗的天空

    沉阳市法库县实验小学发生了感人的一幕。100多名教师撑着雨伞,用“伞阵”护送全校学生冒雨走出校园,形成了一条“爱心走廊”。受今年9号台风影响,凌晨校园开始下雨。随着上课时间的临近,雨越来越大,气温骤降。由于疫情防控需要,家长只能到校门口接孩子。为了不让孩子们下雨,放学后,金戈校长和老师们自发带雨伞来......

  • 2022-06-21 17:40:31

    AOFEX交易所被警方调查,加密货币交易所清退进入倒计时

    上海报道,国内加密货币交易所清算进入倒计时阶段。近日,《华夏时报》记者从部分投资者处获悉,一家名为AOFEX的加密货币交易所目前无法登录,工作人员已失去联系。怀疑是逃跑了。12月14日,记者从AOFEX官网公告获悉,12月10日下午,江苏省徐州市警方带走该公司管理技术人员协助调查,目前仍在处于亏损状......

联系我们