发明

一种连续寻址高效分片读取大文件的方法2026

2024-04-07 07:25:05 发布于四川 1
  • 申请专利号:CN202311702795.6
  • 公开(公告)日:2026-02-10
  • 公开(公告)号:CN117827091A
  • 申请人:天翼云科技有限公司
摘要:本发明公开了一种连续寻址高效分片读取大文件的方法,具体涉及数据处理技术领域,包括:步骤1.打开待读取的大文件,并读取大文件中的数据;步骤2.持续读取数据并按页提交数据回调给业务处理;步骤3.当业务处理完成后,继续根据大文件路径进行下一页数据获取;步骤4.重复步骤2和步骤3,直至完成对大文件的读取和处理,本发明通过在文件中使用连续的数据块来存储文件内容,并采用预先计算的索引表来定位数据块的位置,在读取数据时,系统直接根据索引表找到目标数据块的位置,并进行连续的读取操作,避免了重复寻址和深度翻页的问题,提高了数据读取的效率和性能,并减少了IO操作和资源开销。

专利内容

(19)国家知识产权局 (12)发明专利申请 (10)申请公布号 CN 117827091 A (43)申请公布日 2024.04.05 (21)申请号 202311702795.6 (22)申请日 2023.12.12 (71)申请人 天翼云科技有限公司 地址 100007 北京市东城区青龙胡同甲1 号、3号2幢2层205-32室 (72)发明人 陈玉君 谢锶瑜  (51)Int.Cl. G06F 3/06 (2006.01) G06F 12/02 (2006.01) 权利要求书2页 说明书6页 附图3页 (54)发明名称 一种连续寻址高效分片读取大文件的方法 (57)摘要 本发明公开了一种连续寻址高效分片读取 大文件的方法,具体涉及数据处理技术领域,包 括:步骤1.打开待读取的大文件,并读取大文件 中的数据;步骤2.持续读取数据并按页提交数据 回调给业务处理;步骤3.当业务处理完成后,继 续根据大文件路径进行下一页数据获取;步骤4. 重复步骤2和步骤3,直至完成对大文件的读取和 处理,本发明通过在文件中使用连续的数据块来 存储文件内容,并采用预先计算的索引表来定位 数据块的位置,在读取数据时,系统直接根据索 引表找到目标数据块的位置,并进行连续的读取 操作,避免了重复寻址和深度翻页的问题,提高 A 了数据读取的效率和性能,并减少了IO操作和资 1 源开销。 9 0 7 2 8 7 1 1 N C CN 117827091 A 权 利 要 求 书

最新专利