登录
首页 >  Golang >  Go问答

最佳比较大型txt文件的方法

来源:stackoverflow

时间:2024-03-13 15:12:29 494浏览 收藏

亲爱的编程学习爱好者,如果你点开了这篇文章,说明你对《最佳比较大型txt文件的方法》很感兴趣。本篇文章就来给大家详细解析一下,主要介绍一下,希望所有认真读完的童鞋们,都有实质性的提高。

问题内容

我有两个txt文件:

文件1:包含 500.000.000 行

文件2:包含 10.000 行

我想迭代 file1 的每一行,并检查它是否包含 file2 的相应行。最基本的方法是创建两个 for 循环。如:

for i in file2:
 for y in file1:
   if y contains i:
     save i to file3

在 go 中最快、最有效的方法是什么?


解决方案


File2 读入内存,并构建一组行。对于 Go 中的集合,请使用 map[string]boolmap[string]struct{}

然后打开File1,逐行读取,检查每一行是否包含在集合(map)中。如果在集合中,则将其保存到File3

以上就是本文的全部内容了,是否有顺利帮助你解决问题?若是能给你带来学习上的帮助,请大家多多支持golang学习网!更多关于Golang的相关知识,也可关注golang学习网公众号。

声明:本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除
相关阅读
更多>
最新阅读
更多>
课程推荐
更多>