登录
首页 >  Golang >  Go问答

与 go-driver 相比,mongodb-rust-driver 在查找和获取大量数据方面表现不佳

来源:stackoverflow

时间:2024-04-15 23:42:34 105浏览 收藏

编程并不是一个机械性的工作,而是需要有思考,有创新的工作,语法是固定的,但解决问题的思路则是依靠人的思维,这就需要我们坚持学习和更新自己的知识。今天golang学习网就整理分享《与 go-driver 相比,mongodb-rust-driver 在查找和获取大量数据方面表现不佳》,文章讲解的知识点主要包括,如果你对Golang方面的知识点感兴趣,就不要错过golang学习网,在这可以对大家的知识积累有所帮助,助力开发能力的提升。

问题内容

我有一个由 85.4k 文档组成的数据库,平均大小为 4kb

我在 go 中编写了一个简单的代码,使用 mongodb-go-driver 从数据库中查找并获取超过 70k 的文档

package main

import (
  "context"
  "log"
  "time"

  "go.mongodb.org/mongo-driver/mongo"
  "go.mongodb.org/mongo-driver/mongo/options"
)

func main() {
  localc, _ := mongo.connect(context.todo(), options.client().applyuri("mongodb://127.0.0.1:27017/?gssapiservicename=mongodb"))
  localdb := localc.database("sampledb")
  collect := localdb.collection("samplecollect")

  localcursor, _ := collect.find(context.todo(), json{
    "deleted": false,
  })
  log.println("start")
  start := time.now()

  var result []map[string] interface{} = make([]map[string] interface{}, 0)

  localcursor.all(context.todo(), &result)

  log.println(len(result))
  log.println("done")
  log.println(time.now().sub(start))
}

大约 20 秒内完成

2021/03/21 01:36:43 start
2021/03/21 01:36:56 70922
2021/03/21 01:36:56 done
2021/03/21 01:36:56 20.0242869s

之后,我尝试使用 mongodb-rust-driver 在 rust 中实现类似的事情

use mongodb::{
  bson::{doc, document},
  error::error,
  options::findoptions,
  client,
};
use std::time::instant;
use tokio::{self, stream::streamext};

#[tokio::main]
async fn main() {
  let client = client::with_uri_str("mongodb://localhost:27017/")
    .await
    .unwrap();
  let db = client.database("sampledb");

  let coll = db.collection("samplecollect");
  let find_options = findoptions::builder().build();

  let cursor = coll
    .find(doc! {"deleted": false}, find_options)
    .await
    .unwrap();

  let start = instant::now();
  println!("start");

  let results: vec> = cursor.collect().await;
  let es = start.elapsed();
  println!("{}", results.iter().len());
  println!("{:?}", es);
}

但是在发布版本上完成相同的任务花了将近 1 分钟

$ cargo run --release
    Finished release [optimized] target(s) in 0.43s
    Running `target\release\rust-mongo.exe`
start
70922
51.1356069s

我可以知道在这种情况下 rust 的性能被认为是正常的,还是我在 rust 代码上犯了一些错误并且可以改进?

编辑

根据评论的建议,这里是示例文档


解决方案


此处的差异是由于 Rust 驱动程序中的一些已知瓶颈造成的,这些瓶颈已在最新的测试版本 (2.0.0-beta.3) 中得到解决;因此,升级您的 mongodb 依赖项以使用该版本应该可以解决问题。

使用所提供的示例文档的 10k 副本重新运行示例,我现在看到 Rust 在我的机器上花费了约 3.75 秒,而 Go 则花费了约 5.75 秒。

本篇关于《与 go-driver 相比,mongodb-rust-driver 在查找和获取大量数据方面表现不佳》的介绍就到此结束啦,但是学无止境,想要了解学习更多关于Golang的相关知识,请关注golang学习网公众号!

声明:本文转载于:stackoverflow 如有侵犯,请联系study_golang@163.com删除
相关阅读
更多>
最新阅读
更多>
课程推荐
更多>