2024年8月22~24日,由IT168联合旗下ITPUB、ChinaUnix两大技术社区主办的第15届中国数据库技术大会(DTCC2024)在朗丽兹西山花园酒店隆重召开。
数字化创新浪潮汹涌澎湃,数据库作为信息技术的核心基础设施,正以前所未用的速度推动各行各业的智能化升级。大会以“自研创新 数智未来”为主题,设置2大主会场,20+技术专场,重点围绕向量数据库与向量检索技术实践、数据治理与数据资产管理、云原生数据库开发与实践、特定场景下的数据库管理与优化、大数据平台建设等内容展开分享和探讨。超百位行业专家倾情奉献,上千名嘉宾汇聚一堂,共享数据库领域饕餮盛宴!
深化交流,共筑技术桥梁
大会首日的主会场,ITPUB总经理、DTCC中国数据库技术大会创办人唐川,借大会开幕之际重点介绍了ITPUB私享会,诚邀广大技术专家加入,共赴数据技术创新之旅。
▲ITPUB总经理、DTCC中国数据库技术大会创办人 唐川
自2009年起,ITPUB社区便与中国数据库技术的发展同行,连续十四届DTCC中国数据库大会,以及十八届SACC中国系统架构师大会的成功举办,见证了社区成长与蜕变。这背后,是超过3000位技术专家的智慧与汗水,是他们对技术的执着追求,让ITPUB有了今天的成就。
为了更好地服务于这些优秀的技术老师, ITPUB私享会将再接再励,打造一个专属于技术人的高端交流平台。
ITPUB社区正在努力的方向,几个重要城市的活动可以证明。从北京的繁华到上海的现代,从广州的开放到南京的深邃,ITPUB社区已经在多个城市成功举办了多场专题研讨会,收获了满满的热情与无数正向反馈。而未来,ITPUB的步伐不会停歇,成都的悠然、西安的古韵、武汉的活力,都将成为新活动的舞台。
ITPUB私享会,形式多样,内容丰富。既可以是十余人围坐一堂的小型行业交流会,也可以是集合多方智慧的专题研讨会。同时,它还能是亲子同乐的户外活动,让技术与生活完美融合。今晚即将举行的DB之夜晚宴,正是私享会特色活动的一次精彩呈现,期待与广大技术专家深度交流与沟通。
另外,为了进一步提升服务质量,ITPUB正在组建一支由300名培训专家组成的“天团”,以课程培训的方式深度覆盖各个领域的技术难点。
未来,ITPUB社区将始终致力于搭建技术专家与企业用户之间的桥梁。通过不断的交流与合作,能够实现技术老师、ITPUB社区以及企业用户之间的共赢。
自研创新,集中式与分布式一体化新型集群架构探索
经过几十年的发展,达梦依托一套代码根,已经走出了一条中国数据库自主发展之路。为满足不同客户对数据库的需求,集中式与分布式一体化新型集群架构的创新,可以说是为数据库的自主研发带来了“新范式”。
▲武汉达梦数据库股份有限公司产品服务中心总经理 黄海明
会议期间,武汉达梦数据库股份有限公司产品服务中心总经理黄海明,揭开了数据库大会的首日精彩。
自2008年起,达梦不断优化架构,从单机到主从、主备,再到共享存储集群,直至现在的分布式数据库。特别是在国产芯片兴起后,达梦推出了读写分离架构,能够更有效地利用资源。
黄海明重点介绍了共享存储集群与分布式数据库。共享存储集群方面,达梦历经多年研发,解决了文件系统选择、内核改造等难题,最终实现了多个节点共享集群,并支持快速故障切换。在金融、电力等领域,达梦共享集群已广泛应用,如南方电网超大型ERP系统、梅州客商银行核心业务等。
分布式数据库方面,达梦从MPP架构起步,逐步发展为存算分离的原生分布式架构,支持事务型应用和HTAP。福建移动大数据、全民医疗健康系统等案例,展现了达梦分布式数据库的强大能力。
更为关键的是,达梦实现了集中式和分布式的一体化架构。通过同一套代码根(达梦DM8),可以灵活部署为集中式或分布式模式,提供统一的语法、编程接口及运维管理。这种设计让用户可根据业务需求自由选择,极大地提升了灵活性和便捷性。
达梦坚持自主可控的研发路线,能够快速响应市场需求,不断创新。近十年来,平均每年响应超千项用户需求,并持续推出新产品和解决方案。
数智跃升,从全场景规模复制到更优数据底座
打造全场景工程化复制能力,很多国产数据库企业都在走相同的道路。但从未来发展来看,拥有更可靠的运行能力,需要从内核角度不断打磨,进行更多层面的创新。
▲华为云数据库业务CTO 苏光牛
华为云数据库业务CTO苏光牛 在主题分享中,介绍了GaussDB最新进展以及华为自身数据库的替换历程。面对7亿行代码挑战,华为在两年内实现了数据库的成功替换,展现了强大的工程能力。在应对流量洪峰、大数据量及长订单处理过程中,GaussDB能够实现高效处理,支持高达24T单实例,并且实现了TP/AP分离,每秒处理超200兆日志。
在数智创新过程中,GaussDB与国内大行联创,解决了复杂表关联与存储过程替换问题,并向城商、融信等关键信息基础设施行业拓展,如医保、人社等,均实现成功替换。
为实现平滑迁移,GaussDB提出三大方案:分布式架构兼容集中式使用,降低迁移难度;单体分布式架构支持多应用共存,灵活资源分配;强大扩展性应对大数据量业务。
在实际业务场景中,GaussDB强调稳定可靠与高性能并重,避免“单库风险”,同时通过数据同步实现TP与AP分离,提升决策效率与业务智能化。目前,GaussDB已具备全场景覆盖能力,助力企业实现数据库替换与智能化转型。
紧跟时代,全栈自研助力企业数智化转型
顺应企业数字化转型及大模型技术发展,腾讯云数据库紧跟时代,实现了从云数据库到云原生数据库的跃迁,从自研管控到内核+管控全栈自研,使得腾讯云数据库服务能够不断突破自我,获得行业和客户认可。
▲腾讯云数据库副总经理 罗云
腾讯云数据库副总经理罗云,在主题分享中表示,自研体系对智能化和国产化至关重要,不管是关系型数据库还是非关系型数据,包括SaaS生态工具,只有具备全栈自研能力,才能在AI的浪潮中帮助用户把数据用好,进而实现智能化升级。
具体到腾讯云数据库的全栈自研策略,大概可以概括为三个发展阶段:从初期的开源数据库云托管,到云体系内自研数据库的创新,再到如今的智能化与国产化双轮驱动,一直在苦练技术内功。
走到今天,全栈自研涵盖关系型与非关系型数据库产品线,如TDSQL-C云原生数据库,以其存算分离架构解决了传统数据库弹性与扩容难题;TDSQL金融级数据库,凭借高一致性与事务完整性,在金融领域广泛应用;以及为时序与KV场景定制的时序数据库CTSDB与KV数据库,均展现了腾讯云数据库的专业与深度。
自研背后,是腾讯内部复杂业务场景的持续打磨与流量验证,确保产品的稳定性与成熟度。TDSQL解决了TP与AP流量的数据一致性与运维成本问题,为金融等行业提供了高效解决方案。
此外,随着AI与Serverless技术的发展,腾讯云推出了专为AI设计的向量数据库与TDSQL-C Serverless云原生数据库,通过AI赋能运维与查询优化,进一步降低存储与计算成本,提升整体效能。
大体来看,腾讯云数据库的全栈自研策略,以智能化与国产化为目标,通过不断的技术创新与市场验证,助力企业在数字化转型中抓住机遇,实现数据的最大化价值。
一站式数据管理,Data+Al与云原生时代的“刚需”
「Data+AI」已成为驱动企业创新的核心力量,是释放数据价值的关键。
▲阿里云数据库产品管理与技术架构部负责人、PolarDB开源社区技术委员会主席 王远
王远在大会分享中认为,面对数据管理挑战和机遇,只有提供更便捷、高效的一站式数据管理平台,才能降低数据库使用门槛,为业务创新带来动力引擎。
在阿里云瑶池数据库为用户提供如同“搭积木”体验背后,其实是整个数据平台的多层打磨,通过自研技术的不断创新,满足用户多样化需求。
阿里云瑶池数据库所做的自研功能基本上归四类:一、能够管理各式各样的数据资源;二、可以挖掘各种各样的数据内容;三、通过一系列的AI技术能够帮助用户更好的去理解数据,让数据库也能够更好的去理解用户的意图;四、云上数据库的数据安全和隐私。
而从智能时代数据平台的整体架构来看,最底层是基础设施层,包括存储和计算,这是传统数据库、云数据库特别擅长的方向;最上层是端到端智能化的服务,目前来讲是以RAG服务为代表,主要面向用户、面向开发者提供一些能力,提供包括模型、算法管理、向量检索的能力,特别是把向量检索基于SQL的检索结合起来。
超越传统,云数据库迎来高速发展期
国内数据库产业近年来蓬勃发展,得益于信息化与互联网的快速发展。数据库作为产品与服务,要想更好地满足用户需求,需融入全球趋势,并持续满足用户需求。
▲OceanBase首席科学家 阳振坤
阳振坤在演讲中强调,数据库的扩展性、应用敏捷性及成本是三大核心需求。当前,云数据库已成为全球主流,云上数据库市场份额超过60%,且增量贡献超90%。谷歌、亚马逊和微软等云巨头因云数据库而显著受益,而传统数据库厂商市场份额逐渐缩减。
云数据库的优势在于其易用性、资源动态伸缩、按需付费及成本降低。云通过资源共享与复用,显著提高了资源利用率与厂商盈利能力。在云环境中,数据库需兼具扩展性、敏捷性及成本效益,同时需向HTAP(混合事务与分析处理)方向发展,实现交易与分析的一体化处理,提升系统效率与资源复用。
然而,HTAP系统面临行存与列存整合、存储系统优化及分布式数据库敏捷性挑战。云数据库的发展需持续克服这些难题,提升系统的综合性能与用户体验。简而言之,云数据库以其易用性、成本效益及HTAP能力,正引领数据库产业的未来发展。
高水平科技创新,国产数据库保障行业高质量发展
肩负振兴国家基础软件重任,保障国家重点行业关键领域科技安全,国产数据库必须勇担责任,肩负历史使命。
▲金篆信科有限责任公司副总经理 秦延涛
金篆信科有限责任公司副总经理秦延涛,在主题分享中介绍了GoldenDB在核心关键业务分布式改造中所取得的成果。
金篆信科起源于中兴通讯的“省钱”使命,致力于自主研发数据库,降低对国际品牌的依赖。自2014年起,公司与中信银行合作,成功实践数据库替代,并于2019年完成中信银行信用卡核心系统分布式转型,至今运行稳定,无生产事故。这一实践推动了金篆信科在金融、运营商等行业的快速拓展。
在分布式改造中,金篆信科面临硬件变化大、可靠性降低等挑战。为此,公司聚焦强一致性、高性能、高可靠、高兼容、云原生及高效运维六大关键点。通过技术创新,如分布式事务处理、高并发优化、两地三中心架构等,确保系统稳定可靠,满足关键业务需求。
如今,金篆信科的产品在金融、运营商等头部行业得到广泛应用,包括中国银行、建设银行等。这些实践不仅验证了金篆信科的技术实力,也全面推动了信创和分布式改造进程。
总结:
为期三天的第十五届中国数据库技术大会(DTCC2024)正在火热进行,历经十多年的积累与沉淀,如今的DTCC已然成为国内数据库领域的技术风向标,从人工智能到一站式数据平台,再到向量数据库,大会精彩内容不断,激发了对未来的无限憧憬。
展望未来,让我们携手并进,继续在数智化创新的征途上勇往直前,共同开创一个更美好的时代。