长安汽车申请一种数据湖数据处理方法专利,能够提高数据湖读写处理的效率

视界达人视界达人 2023-11-26 8.37 W 阅读

金融界2023年11月26日消息,据国家知识产权局公告,重庆长安汽车股份有限公司申请一项名为“一种数据湖数据处理方法、装置、系统、设备及介质“,公开号CN117111856A,申请日期为2023年9月。

专利摘要显示,本申请涉及大数据技术领域,提供了一种数据湖数据处理方法、装置、系统、设备及介质,方法应用于从节点服务,方法包括:获取待写入数据;在预先创建的预写日志文件中记录待写入数据,根据待写入数据的数据类型在预先创建的内存分区中记录待写入数据;根据预写日志文件和内存分区中记录的信息,生成待写入数据对应的初始表格式文件,并将初始表格式文件传输至主节点服务以生成初始快照;将初始快照中的等值删除文件转换为位置删除文件,并根据预设表格式文件容量合并初始快照中的文件,得到目标表格式文件;将目标表格式文件传输至主节点服务以生成目标快照,完成将待写入数据写入数据湖。通过本申请方案,能够提高数据湖读写处理的效率。

长安汽车申请一种数据湖数据处理方法专利,能够提高数据湖读写处理的效率

本文源自:金融界

作者:情报员

The End

文章声明:以上内容(如有图片或视频亦包括在内)除非注明,否则均为互联网收集整理内容,如有侵权,请联系客服进行处理

上一篇 下一篇

相关阅读

取消
微信二维码
微信二维码
支付宝二维码