加入星计划,您可以享受以下权益:

  • 创作内容快速变现
  • 行业影响力扩散
  • 作品版权保护
  • 300W+ 专业用户
  • 1.5W+ 优质创作者
  • 5000+ 长期合作伙伴
立即加入
  • 正文
    • 数据规模大、类型多,一站式服务需求激增
    •  
    • 数据库未来趋势?提名“多模数据库”
    • 多模数据库驱动下,助力 AI 逼近“人类智能”
  • 推荐器件
  • 相关推荐
  • 电子产业图谱
申请入驻 产业图谱

数据量井喷增长,库需求迎来AI驱动发展

2020/09/25
167
阅读需 8 分钟
加入交流群
扫码加入
获取工程师必备礼包
参与热点资讯讨论

面对新基建驱动而即将造成的数据量井喷现象,当下的数据库模式将不能够足以支撑,尤其考虑到 AI 正逐步落地的情况。

依据 Raconteur 统计的数据,到 2025 年,全球每天预计有 463 EB 数据产生,相当于每天产出约 2.1 亿张 DVD 碟;IDC 发布的《数据时代 2025》报告中也预测,全球每年产生的数据从 2018 年的 33 ZB 增长到 175 ZB(1 ZB=1024 EB),以 25 MB/ 秒的网速进行下载,需要的时间为 18 亿年。

随着数据量的暴增,问题逐渐暴露。

数据规模大、类型多,一站式服务需求激增

截至目前,针对海量数据的处理,业内既有的数据产品多只能解决某一类问题,譬如 Hive 应用于结构化数据、面向数据存储的文档数据库 MongDB、专注于复杂搜索需求的 ElasticSearch 以及图数据库 Neo4J 等等。

与此同时,围绕多种数据类型的存储与处理需求,业内也搭建了一种混合架构,涉及多种不同的数据库技术,以解决不同的数据问题。

只不过,我们也可以注意到,各个数据库各自为政,这也使得客户在需要使用多种数据库产品时,需要自己重新架设一层,以解决需求被满足时所产生的附加问题,包括数据如何在不同数据库之间导进导出、数据在不同库中的一致性保持、整体运维等等。

仅从文字的描述来看,就可以知道,数据库的单一独立使用和混合使用各有优劣,前者操作简单但供给不足以满足实际应用场景的多样化需求,后者虽然能够满足客户围绕数据产生的多样化需求,但是操作不便、运维复杂等问题也是不可忽视的。

就当下而言,混合架构或许尚能够应对来自产业内的多样化数据需求,但是长久以往下去并不是一个办法,尤其是随着新基建的到来,于国内数据库的发展也带来了极大的挑战。

针对这个问题,腾讯云数据库副总经理王义成指出了三点:

1、数据量出现全面井喷,如何满足相应运算与分析的实时进行?

2、业务融合多样化发出挑战,数据库是否能够接受在不同的业务中心、数据中心、基础设施之间去做相应的部署和融合?

3、老龄化逐步演进,数据库人才缺口可能更大,数据库供应商如何为用户提供多种自动化服务,以及能否为用户的多种服务需求提供自动运维服务,实现整个数据的自动化治理?

图 | 腾讯云数据库副总经理王义成

从这些挑战来看,鉴于数据库与数据库之间的不兼容,为了避免复杂操作性、实现成本有效降低等目的,一个面向数据层面的一站式服务平台显然成为一个刚需。

简单来讲,在这个一站式数据服务平台或数据库中,用户希望能够以简单的操作方式调用多数据库的资源,并处理多种数据模型等等。

 

数据库未来趋势?提名“多模数据库”

在提及数据库在新基建背景下将面临的挑战时,他也指出了这一产品的两点趋势,一点关乎数据库分配模式,“在数据量再扩几倍的情况下,还能保持 TP 与 AP 的整体稳定性和性能,这是一个大趋势,大家也会在这个点上继续去深耕。”

第二点上,王义成则表示随着 5G 的到来,可能会有更多模式的数据库会出来,包括图数据库或是更为稀奇的数据模式。

“数据库的下一个模式会向多模方向发展。数据库的存储模式是不同的,但真正对于应用访问来说,或者对于应用处理来说,需要一个更加经典化、更加统一的标准接口让上层应用能够去访问。”王义成表示,“我认为,应对 5G 带来的应用爆发、数据爆发,多模可能是一个大的趋势点。”

多模数据库究竟是怎样的?与现有的混合架构模式而言,它的优势体现在哪里?

简单来讲,多模数据库最终体现的是一种数据模式的统一,主要形式有两种:

一种是数据存储为统一模式,可以在这一层面暴露多种协议接口类型,比如一套数据存储,可以暴露 Mongo 的访问模式,暴露 MySQL 的访问模式;

另一种则是集中存储,将不同类型的数据库存储到一个整体通用的数据平台,再用一个 up 层,或者用一个接口层去兼容多种协议,让所有的应用都能够更为方便的集中于自身的数据处理跟统一。

相较于混合架构而言,多模数据库在进行统一整合、将操作极简化的同时,也降低了数据在不同库之间来回迁移的成本和风险等。“多模数据库有可能是未来中长期相对比较的趋势。”王义成说到。

多模数据库驱动下,助力 AI 逼近“人类智能”

从前面行业内人士的讲解来看,在数据库赛道中,利好多多的多模数据库已然成为被看好的下一个趋势。当前,在多模数据库赛道中,包括腾讯在内,华为、阿里等大型云服务商也已经推出或即将推出有关产品。

在一些行业赛道中,尤其是那些传统行业,他们的数据多是分散在各个业务系统中,这也为他们的数据化、智能化变革道路中增添了难度。如果一个产品能够帮助他们更快地整合数据,并能够提供抽象化的应用接口,这必然是利好的。

用王义成的话来说,使用多模数据库的目的之一,是解决用户不同调用的使用习惯,助力用户使用。而当谈及落地,“多模数据库”于 AI 的智能提升而言可谓一大助力。

众所周知,AI 与人类智能差距之一就是“多模态信息的智能化理解”,这其中包括视觉、声音、符号语言、嗅觉和触觉等信息。如果能够像人类利用多模态数据学习知识一样,让 AI 也拥有多模态数据的学习能力,AI 的智能程度必然将大大获得提升。

然而,就目前而言,多模态 AI 还存在不少技术难点,其中就涉及到多模态数据的融合。

具体来看,一个软件或算法模型的进步是较为容易的,但当多个算法叠加在一起,难度的升级将会是成倍的,尤其在面对图像、语音、触感等非文本数据时。

就这一点来看,多模数据库与 AI 可以看作是相辅相成的:利用 AI 算法,数据库将能够在现有基础上获得进一步的优化;反过来,正是因为能够调用多个数据库,以及兼具的统一性,多模数据库将能够为 AI 算法模型提供训练平台,以及融合数据处理平台,让 AI 系统的决策更为全面和智能。

推荐器件

更多器件
器件型号 数量 器件厂商 器件描述 数据手册 ECAD模型 风险等级 参考价格 更多信息
KSZ9893RNXI-TR 1 Microchip Technology Inc Ethernet Transceiver
$79.88 查看
KSZ8081RNDIA-TR 1 Microchip Technology Inc IC TXRX ETHERNET 24QFN

ECAD模型

下载ECAD模型
$1.58 查看
ADM3053BRWZ 1 Analog Devices Inc Signal and Power Isolated CAN Transceiver with Integrated Isolated DC-to-DC Converter

ECAD模型

下载ECAD模型
$9.17 查看
腾讯

腾讯

腾讯于1998年11月成立,是一家互联网公司,通过技术丰富互联网用户的生活,助力企业数字化升级。我们的使命是“用户为本 科技向善”。Founded in 1998, Tencent is an Internet-based platform company using technology to enrich the lives of Internet users and assist the digital upgrade of enterprises. Our mission is "Value for Users, Tech for Good".

腾讯于1998年11月成立,是一家互联网公司,通过技术丰富互联网用户的生活,助力企业数字化升级。我们的使命是“用户为本 科技向善”。Founded in 1998, Tencent is an Internet-based platform company using technology to enrich the lives of Internet users and assist the digital upgrade of enterprises. Our mission is "Value for Users, Tech for Good".收起

查看更多

相关推荐

电子产业图谱

镁客网隶属于南京镁一刻网络科技有限公司旗下,关注人工智能、虚拟现实、半导体、新能源、新材料、航空航天等新兴创新的硬科技领域,以科技媒体为核心,致力于打造硬科技领域的产业服务平台,推动硬科技产业落地,助力传统产业升级。目前已上线微信公众号、今日头条、搜狐号、百家号等多个内容平台。