登录
首页 >  数据库 >  MySQL

【巨杉数据库Sequoiadb】sdbimprt工具数据导入性能如何

来源:SegmentFault

时间:2023-01-13 13:33:42 255浏览 收藏

小伙伴们对数据库编程感兴趣吗?是否正在学习相关知识点?如果是,那么本文《【巨杉数据库Sequoiadb】sdbimprt工具数据导入性能如何》,就很适合你,本篇文章讲解的知识点主要包括MySQL。在之后的文章中也会多多分享相关知识点,希望对大家的知识积累有所帮助!

【问题描述】
sdbimprt工具数据导入性能如何,能否提供性能测试报告?
广东省农信运维人员比较关心以下情况:
如:3年的数据有1000w条记录,每条记录约100kb,导入的集合是多维分区表,范围切分以时间作为切分字段,一年一个集合,hash切分则以"_id"切分,将1000W的数据导入到该集合中需要多长的时间?

【问题回复】

  1. 导入工具在多个局点都有使用,目前(v3.0.1)还没有人反映过性能存在问题。
  2. 导入工具支持多线程导入。同时,也可以同时在多个机器上同时使用导入工具一起工作。基本上,导入工具很容易就能将千兆网卡(128M/s)打满。
  3. 该用户关心的场景我们无法准确估计导入需要多长时间。如果能把千兆网网卡打满,估计时间为1000w*100KB/128M=781.25s。实际情况需要根据用户的设备等情况决定。

以上就是本文的全部内容了,是否有顺利帮助你解决问题?若是能给你带来学习上的帮助,请大家多多支持golang学习网!更多关于数据库的相关知识,也可关注golang学习网公众号。

声明:本文转载于:SegmentFault 如有侵犯,请联系study_golang@163.com删除
相关阅读
更多>
最新阅读
更多>
课程推荐
更多>
评论列表