第四范式、Intel研究成果入选国际顶会VLDB 全面优化超高维在线预估系统
发表时间:2021年1月9日 19:41 来源:飞象网
英特尔® 傲腾™持久内存的加持满足特征工程数据库对大内存的需求。下图显示了在论文实验中使用的机器配置,在10TB数据的业务场景中,基于英特尔® 傲腾™持久内存的FEDB的硬件成本仅为基于纯内存版本的41.6%。
硬件成本比较(10TB业务数据)
在服务中断情况下实现数据快速恢复,服务恢复时间减少99.7%,全面降低对线上服务质量的影响。如在论文中描述的结果(见下图,PA-FEDB为基于持久内存优化的FEDB,D-FEDB为内存版本的FEDB),在实际业务场景中,其数据恢复时间从原来的六个小时缩短至一分钟左右。
数据恢复时间比较
持久内存(PA-FEDB)vs. 纯内存(D-FEDB)
基于英特尔® 傲腾™持久内存进行持久化数据结构设计的FEDB舍弃了原有纯内存方案以及基于外存储设备的备份机制,实现了长尾延迟(TP-9999)接近20%的改善(见下图,PA-FEDB为基于持久内存优化的FEDB,D-FEDB为内存版本的FEDB )。
长尾延迟TP-9999比较
持久内存(PA-FEDB)vs. 纯内存(D-FEDB)
未来,第四范式与英特尔联合实验室还将在软硬一体技术、面向AI的高性能计算等方面展开深入合作,结合英特尔领先的软硬件产品以及第四范式在AI领域的深厚积累、研发优势,推动AI技术的创新和落地,加速企业规模化AI应用进程,共同引领AI产业化发展。
[1] [2]