从云原生数据库服务到新型“数联网”基础设施

作者&投稿:子索 (若有异议请与网页底部的电邮联系)
~

作者 石默研

新型“数联网”基础设施

2020年4月,《中共中央国务院关于构建更加完善的要素市场化配置体制机制的意见》(下称《2020数据要素意见》)发布以来,数据要素的市场价值日益受到重视。同时,长期的实践证明,数据要素的威力,大多数情况下源于对多源数据的融合分析,单一组织靠自身积累往往难以聚集足够价值的数据,因此,只有通过数据跨域流通与共享开放才能真正发挥大数据的应用价值。如银行、保险、政府、电商等等行行业业,已经有了强烈、广泛的数据跨域集成与融合的市场需求。另一方面,随着数字化的深入发展,信息技术已经开始从助力经济发展的辅助工具向引领经济发展的核心引擎转变,大数据资源应该向资产升级,对“数字经济”新范式产生更加直接的驱动作用。而大数据资源向资产升级的关键则是高效、安全的互联互通、精确的计量计价及数据所有权、使用权的市场化清晰界定。


于是,“数据要素互联互通网络”数联网成为国家乃至国际一项重要的新型互联网基础设施与创新业态诉求,有着重大的 社会 价值与广阔的市场空间。


2. 云原生数据库服务

云原生数据库,是支撑现代数据服务的主体设施,它生于云上,长于云上,对外形成按需获取的DBCloud形态,使用者无需关心数据计算与存储的具体细节,无需为部署、运维、扩缩等工作付出精力,无需对数据计算的模态(AP,TP,流,图等)做出额外的规划与设计,无需区分所选择云计算基础设施IaaS的特性与区别,只需要向云原生数据库DBCloud的运营者申请使用相应的服务即可,这是现代数据库技术与服务发展的必然方向。毫无疑问,在不久的将来,全球越来越多的数据服务将在云上,包括多云、跨云的环境中以平台化的方式实现。由于云计算环境所带来的强大算力与各项能力,数据服务平台化必将极大地推动与加速各行业业务数字化转型升级的进程,而云原生数据库也必将成为新数字化时代一项关键的公共IT基础设施。


3. 从数据库平台服务到新一代互联网基础设施“数联网”

关于数据流通互联基础设施“数联网”,相当长一段时间以来,国内外已经有很多建设与运营的尝试,在我国主要就是各级政府主导的“大数据交易中心”,从2014年起就开始启动,经历了2014-2016年“第一次浪潮”后,于2017-2019年处于“停滞期”,运营实践看,整体成交量远低于预期。原因主要在于数据所有权与使用权属难以界定,隐私、安全与共享之间的矛盾越来越明显。一方面跨域数据共创需求越来越迫切,另一方面,数据的无序流通,又可能导致隐私保护与数据安全的重大风险,必须加以规范与限制。无论是国际还是国内,日趋严格的“数据安全法”“信息保护法案”不断出台,在客观上增加了数据流通的成本,降低了数据综合利用的效率;而大数据价值的精确计量计价也难以实现,不能有效体现数据的资产属性。如何兼顾发展与安全,平衡效率与风险,准确衡量价值,是全世界在大数据治理中一直面临的共同课题,也导致规范高效的数据流通市场始终未能形成。


而中央的《2020数据要素意见》,首次明确了培育数据要素市场的目标和定位,随之有关数据安全、信息保护的法案以及技术系列标准等相继发布,为促进数据流通规范化运作提供了政策制度基础;同时,“数据可用不可见、用途可控可计量”的隐私安全计算技术与创新模式也蓬勃发展并成熟起来,为解决隐私安全问题及数据资产化提供了坚实的技术基础。因此,自2020年至今,以新兴技术驱动“数据使用价值流通”新模式的数据要素流通市场迎来“第二次浪潮”,新一轮建设再次启动,全国一年来共有6家新型数据资产交易中心开始筹备建设,其中北数所等2家新型示范已正式投入运营。隐私安全计算技术采用数据不动、算法流动的策略,在数据不出域的情况下,安全地达到数据跨域联合计算的目的。虽然目前该组技术的成熟度与标准化程度还有待提高,在相当范围内也有炒作的成份,但在强烈需求与趋势的驱动下,发展很快,前景极为可期。


应该可以看到:采用“数据使用权”而不是“所有权”交易实现跨域流通,对数据访问按量计价的新模式同时也给云原生数据库服务带来新的商业发展契机,原因很简单:数据库本身就是以提供数据使用服务为天职的!


仔细调研与分析还会发现,当前政府主导的新型数据资产交易所对“数据使用权”流通模式的尝试,基本还在“雷声大,雨点小”的阶段,至今实效依然甚微!这除了可能还需要一定的市场培育周期以外,本文认为一个最重要的原因是:凭空而生的数据交易所,并没有直接沉淀客户数据的条件,运营只能靠“借鸡生蛋”,而正在发生的事实也正是如此:大都以授权政府数据公开运营为起点,然后大力“邀请”各种数据资源拥有者上平台,培育数据流通生态圈。然而,多数情况下,一是静态政务数据的实用价值很有限(例如对金融风控),二是真正有价值的产业活数据与公民行为数据拥有者(在其自有数据库中)上交易平台的程序非常繁杂,意愿较低......。同时,现阶段在技术体系上,新型交易所主要依赖隐私计算,对数据库总体采用松散繁杂的集成方案对接,就是说,目前还没有系统重视数据库的技术定位。


本文认为,首先,从技术上讲,云原生数据库融入隐私安全计算甚至更广泛的跨域安全计算手段,并没有太大的瓶颈,还可以方便地承担可信安全中介的角色,却会赋予数据资源拥有者最便利的“数据使用权”共享能力。更重要的是,当云计算环境下的数据服务平台化成为全球化趋势后,全 社会 范围内大多数的数据库服务都将由云原生数据库平台运营者所承担,它就自然建立了最广泛丰富的“数据流通生态圈”,天然拥有提供“数据跨域流通互联”服务的各种有利条件。而云原生数据流通显然是目前数据要素市场化领域需求与商业前景最为强烈的可运营业务之一,如果云原生数据库服务运营者借其固有优势,同时运营数据要素流通业务,必将在技术效能与商业模式上超越现存的各种模式,对政府主导、靠“借鸡生蛋”现有市场带来巨大的挑战,甚至是终结。


进一步讲,这种能力的提供,不仅可以最大限度地挖掘与发挥数据要素的价值与红利,还可以极大地加速各行业、各组织对云原生数据库平台服务的消费需求,两种因素又会相互促进,从而使云原生数据库服务成为将来数据要素市场化的新标准,自然进化为新一代互联网基础设施“数联网”本身。





从云原生数据库服务到新型“数联网”基础设施
云原生数据库,是支撑现代数据服务的主体设施,它生于云上,长于云上,对外形成按需获取的DBCloud形态,使用者无需关心数据计算与存储的具体细节,无需为部署、运维、扩缩等工作付出精力,无需对数据计算的模态(AP,TP,流,图等)做出额外的规划与设计,无需区分所选择云计算基础设施IaaS的特性与区别,...

数据库上云有哪几种方式?
数据库上云有三种主要方式:物理迁移、云原生数据库及数据库云服务平台。1. 物理迁移:这种方式是将传统的本地数据库通过一系列技术处理,迁移到云服务提供商的基础设施上。在迁移过程中要保证数据的一致性、完整性和安全性。通过这种方式上云,可以利用云计算的弹性伸缩、高可用性等特性来提升数据库的性能...

2024 云原生数据库发展现状
在技术发展趋势上,云原生数据库强调多级高可用性和异地灾备,内存池与HTAP的融合、Serverless的普及以及AI的智能化应用,都预示着数据库服务将更加智能、高效和安全。未来,云原生数据库将更加普惠,满足更多企业对数据管理的多元化需求,同时在技术可控性和TCO方面寻求平衡。随着云计算的深入,企业对云原生数据...

云原生数据库是什么
“云原生”是一种构建和运行应用程序的方法,它利用了云计算交付模型的优势。“云原生”是关于如何创建和部署应用程序,和位置无关。这意味着应用程序位于云中,而不是传统数据中心。首先,一个云原生数据库不仅是一个TP数据库,也是一个AP数据库,TP和AP融合在一起,称之为HTAP,从这种架构中获益良多...

阿里云数据库这样的云数据库是如何实现的?用到了一些什么
阿里云数据库团队在DTCC 2020上展示了其在数据库技术领域的强大实力。本次大会围绕数据架构、AI与大数据、数据库内核等核心议题展开深入讨论,阿里云数据库团队带来了九场干货演讲,为参会者献上了一场技术盛宴。李飞飞分享了云原生分布式数据库与数据仓库系统的构建方式,为数据上云之路提供了创新思路。叶正盛...

阿里云李飞飞:全面向「云原生数据库2.0」演进
云深处,新世界。数据库行业最大的变化是全面向演进,阿里云打造的,将云计算领域非常重要的云原生技术和分布式技术合二为一:上层是分布式,下层以云原生的方式实现,每个分区都可以享受云原生带来弹性、高可用的能力,同时上面有分布式带来的水平拓展的能力,解决高并发可能带来的瓶颈问题。在这个基础上,打造...

超级节点+原生节点,腾讯云发布多款新产品
原生节点则针对需要深度资源管理的客户,提供标准K8S和混合技术,确保7*24小时资源高效利用。在数据库领域,TDSQL经过升级,具备大规模复制、国产替代、HTAP和云原生Serverless等特性,服务众多金融机构,包括刷新世界纪录的TPC-C基准测试。云原生数据湖仓库解决方案则提升至每秒百万级数据更新能力,帮助企业高效...

数字基础设施已成新趋势:云原生数据库如何解决中小企业上云关键问题...
而云计算云原生架构带来的技术先进性,必然会发生的对传统商业数据库发生挑战和替代的过程。阿里云智能总裁张建锋表示,今年不仅会在基础设施上加大投入,同时将大规模引进顶级科技人才,阿里云再招5000人,重点吸引云服务器、网络、芯片、数据库、人工智能等核心技术领域的攻坚人才。中小企业如何上云如今,中小...

百度云原生数据库GaiaDB的HTAP与多地多活技术实践
在2023年的云数据库盛会上,百度云的创新之作——原生数据库GaiaDB凭借其独特的HTAP(Hybrid Transactional and Analytical Processing)与多地多活技术,引起了业界的广泛关注。作为一款兼容MySQL且支持大规模数据处理的解决方案,GaiaDB以存算分离技术为基石,显著提升了数据处理的效率和规模,展现了其在吞吐...

淘金云安全吗
为了帮助更多开发者和企业洞察行业趋势和技术热点,CSDN打造了《技术访谈》金牌栏目《架构师说》,聚焦数字化转型、云原生、数据库、开源技术、人工智能、出海等核心话题,与行业内领先的架构师对话技术趋势。随着新科技产业革命,人工智能、区块链、大数据、云计算、物联网等信息技术与金融业务深度融合,为...

汤旺河区19334041568: 数据库技术的发展应用 -
蓬衫裸花: 从20世纪60年代末期开始到如今,数据库技术已经发展了30多年.在这30多年的历程中,人们在数据库技术的理论研究和系统开发上都取得了辉煌的成就,而且已经开始对新一代数据库系统的深入研究.数据库系统已经成为现代计算机系统的...

汤旺河区19334041568: 云计算和大数据是什么关系 -
蓬衫裸花: 原发布者:天成信息云计算与大数据的关系  从技术上来看,大数据和云计算的关系就像一枚硬币的正反面一样密不可分.大数据必然无法用单台的计算机进行处理,必须采用分布式架构.它的特色在于对海量数据进行分布式数据挖掘,但它...

汤旺河区19334041568: 大数据与云计算和物联网是什么关系 -
蓬衫裸花: 大数据技术是指从各种抄各样类型的数据中,快速获得有价值信息的能力.适用于大数据的技术,包括大规模并行处理(MPP)数据库,数据挖掘电网,分布式文件系统,分布式数据库,云计算平台,互联网,和可扩展的存储系统.大数据的...

汤旺河区19334041568: 如何将大数据,云计算和物联网相结合为企业进行服务 -
蓬衫裸花: 大数据,云计算和物联网本就是不可分割的组合:大数据是一种规模大到在获取、存储、管理、分析方面大大超出了传统数据库软件工具能力范围的数据集合,具有海量的数据规模、快速的数据流转、多样的数据类型和价值密度低四大特征.云计算是基于互联网的相关服务的增加、使用和交付模式,通常涉及通过互联网来提供动态易扩展且经常是虚拟化的资源.物联网是利用局部网络或互联网等通信技术把传感器、控制器、机器、人员和物等通过新的方式联在一起,形成人与物、物与物相联,实现信息化、远程管理控制和智能化的网络.大数据,云计算和物联网结合的解决方案案例如:电子人物联网为工业企业提供的工业物联网云服务解决方案,可以助你理解

汤旺河区19334041568: 数据库技术的应用与发展 -
蓬衫裸花: 数据库技术是现代信息科学与技术的重要组成部分,是计算机数据处理与信息管理系统的核心.数据库技术研究和解决了计算机信息处理过程中大量数据有效地组织和存储的问题,在数据库系统中减少数据存储冗余、实现数据共享、保障数据安...

本站内容来自于网友发表,不代表本站立场,仅表示其个人看法,不对其真实性、正确性、有效性作任何的担保
相关事宜请发邮件给我们
© 星空见康网