c# 插入数据效率测试(mongodb)
作者:chenqiangdage 发布时间:2021-12-16 12:46:07
mongodb的数据插入速度是其一个亮点,同样的10000条数据,插入的速度要比Mysql和sqlserver都要快,当然这也是要看使用者怎么个使用法,你代码如果10000次写入使用10000次连接,那也是比不过其他数据库使用事务一次性提交的速度的。
同样,mongo也提供的一次性插入巨量数据的方法,因为mongodb没有事务这回事,所以在在C#驱动里,具体方法是InsertManyAsync()一次性插入多个文档。与之对应的是InsertOneAsync,这个是一次插入一个文档;
InsertManyAsync()这个方法带入的参数只要是实现了IEnumerable接口的类型就可以,所以可是list<>,这样的数据类型;
同样的10000次插入,两个方法时间差别很大。如图:
使用一次性插入多个文档方法,插入10000条耗时仅1.3秒,分成10000次插入,耗时19.9秒。区别大了个去。同样,前面我做过使用mysql插入10000条记录,要用4秒多,可见,这mongodb插入速度不是吹 的。
具体的代码如下,贴上:
using System;
using System.Collections.Generic;
using System.Linq;
using System.Text;
using System.Threading.Tasks;
using MongoDB.Bson;
using MongoDB.Driver;
using System.Diagnostics;
namespace sqltomongo
{
public class MongoHelp
{
private static IMongoClient client
{
get
{
if (null == _client)
{
_client = new MongoClient("mongodb://127.0.0.1:27017");
}
return _client;
}
}
public static IMongoDatabase database
{
get {
_database = client.GetDatabase("HotelPersonInfo");
return _database;
}
set {
_database = value;
}
}
public static IMongoCollection<BsonDocument> collection
{
get {
return _collection;
}
set {
_collection = value;
}
}
protected static IMongoClient _client;
protected static IMongoDatabase _database;
protected static IMongoCollection<BsonDocument> _collection;
//测试效率,两个方法用时比较
public async static void TestMongo()
{
//自定义的对象
RoomInfo roomdata = new RoomInfo();
List<BsonDocument> docunemts = new List<BsonDocument>();
collection = database.GetCollection<BsonDocument>("HotelPersonInfo");
Stopwatch sw = new Stopwatch();
sw.Start();
for (int i = 1; i < 10000; i++)
{
//mongo对用户自定义的对象扩展了tobasonDocument这个方法,可直接用
var roomdatadocument = new BsonDocument(roomdata.ToBsonDocument());
docunemts.Add(roomdatadocument);
}
//一次10000条
//这方法 查看api手册,只要实现了IEnumerable借口的类型就都行
await collection.InsertManyAsync(docunemts);
sw.Stop();
TimeSpan ts2 =sw.Elapsed;
Console.WriteLine("total is " + ts2.TotalMilliseconds);
///一次次插 10000次
Stopwatch sw2 = new Stopwatch();
sw2.Start();
for (int i = 1; i < 10000; i++)
{
var roomdatadocument = new BsonDocument(roomdata.ToBsonDocument());
await collection.InsertOneAsync(roomdatadocument);
}
sw2.Stop();
TimeSpan ts22 = sw2.Elapsed;
Console.WriteLine("total is " + ts22.TotalMilliseconds);
// await collection.InsertOneAsync(roomdatadocument);
//collection = database.GetCollection<BsonDocument>("HotelPersonInfo");
// collection.InsertOneAsync(roomdatadocument);
}
}
}
里面使用了一个自定义的对象:
代码如下:
using System;
using System.Collections.Generic;
using System.Linq;
using System.Text;
using System.Threading.Tasks;
using MongoDB.Bson;
namespace sqltomongo
{
public class RoomInfo
{
public RoomInfo()
{
// id = "test";
Name = "nafd"; Moblie = "123456"; EMail = "dd@qq.com"; Tel = "010123"; Fax = "0755-001";
IdentityId = "616112323231"; RegisterType = "tid"; CardNo = "cardno"; Sex = "男"; Birthday = "1999";
Address = "china beijing"; ZipCode = "519000"; RegisterDate = "2015-03-03";
District2 = "District2";
District3 = "District3";
District4 = "District4";
}
// public string id { get; set; }
/// <summary>
/// 名字
/// </summary>
public string Name { get; set; }
/// <summary>
/// 手机号码
/// </summary>
public string Moblie { get; set; }
/// <summary>
/// 邮箱
/// </summary>
public string EMail {get;set;}
/// <summary>
/// 座机
/// </summary>
public string Tel { get; set; }
/// <summary>
/// 传真
/// </summary>
public string Fax { get; set; }
/// <summary>
/// 身份证
/// </summary>
public string IdentityId { get; set; }
/// <summary>
/// 使用什么注册的
/// ID --身份证 (只需要id身份证的信息)
/// </summary>
public string RegisterType { get; set; }
/// <summary>
/// 会员卡号
/// </summary>
public string CardNo { get; set; }
/// <summary>
/// 性别
/// </summary>
public string Sex { get; set; }
/// <summary>
/// 生日
/// </summary>
public string Birthday { get; set; }
/// <summary>
/// 地址
/// </summary>
public string Address { get; set; }
/// <summary>
/// 邮编
/// </summary>
public string ZipCode { get; set; }
public string District2 { get; set; }
public string District3 { get; set; }
public string District4 { get; set; }
/// <summary>
/// 注册时间
/// </summary>
public string RegisterDate { get; set; }
}
}
mongodb的一些小总结
mongodb的安装,官网下载想要的版本,可视化工具mongovue(注意不支持mongodb3.0以上的版本)
下载mis安装,解压后bin,。。。
1.配置环境变量,将H:\mongodb\mongodbInstall\bin bin目录加入环境变量的path里面
2.bin目录同级目录创建data文件夹,data文件夹内新建db、log文件夹log文件夹下再创建mongodb.log
3.输入如下的命令启动mongodb服务:(定位到bin下面)
H:/mongodb/mongodbInstall/bin>mongod --dbpath H:\mongodb\mongodbInstall\data\db
http://localhost:27017 测试是否连接成功
4.data同级目录创建mongodb.config 记事本打开mongodb.config
dbpath=H:\mongodb\mongodbInstall\data\db
logpath=H:\mongodb\mongodbInstall\data\log\mongodb.log
5.用管理员身份打开cmd命令行,进入H:/mongodb/mongodbInstall/bin目录,输入如下的命令:
mongod --config H:\mongodb\mongodbInstall\mongo.config --install --serviceName "MongoDB"
services.msc可以看到mongodb的服务已经启动
mongodb安装配置完成后,cmd直接录入mongo可进入mongo的命令行,show dbs可以看到现有的数据库(我把之前数据库备份的ns文件放入db文件夹内,show dbs的时候并没有显示出来)
然后安装mongovue(只有mysql可以免费导入到mongodb,因为有sqlserver的对应数据库,,,所以转化通过sqlserver转化为mysql再导入到mongovue)
sqlserver->mysql:mysql中导入向导-》选择ODBC-》选择sql server native client 、设置连接(服务器名(本机127.0.0.1)然后sqlserver用户名,密码)下一步-》下一步。。。。结束。
mysql->mongodb:add 一个数据库-》右键RDBMS Import 然后填写连接。
来源:http://blog.csdn.net/chenqiangdage/article/details/50098031


猜你喜欢
- feign传输List的坑无法直接传输List错误方法1@RequestMapping(value = "/stat/mercha
- 你是一名体育老师,在某次课距离下课还有五分钟时,你决定搞一个游戏。此时有100名学生在上课。游戏的规则是:1. 你首先说出三个不同的特殊数,
- 对于数据的访问来说,肯定是在有缓存的情况下运行快一些。对于Hibernate这种与数据库结合紧密的框架来说,在调用数据的时候肯定会有缓存的出
- 本文实例讲述了C#中datatable序列化与反序列化,分享给大家供大家参考。具体方法如下:一、datatable序列化public str
- 在App中经常看到这样的tab底部导航栏那么这种效果是如何实现,实现的方式有很多种,最常见的就是使用Fragment+RadioButton
- 最近在项目中,一个go服务给前端提供了一个接口,返回json格式数据,其中Int64字段会超出javascript Number可表示的最大
- 前言apollo配置经常使用的方式是@value,比较便捷,如果只出现在一个类中还行,但是如果多个类中并不是很方便,特别是如果出现配置值变化
- 一、No serializer found for class org.hibernate.proxy.pojo.bytebuddy.Byt
- Java的源代码是以*.java的纯文本文件,可以使用任何文本编辑器来进行编写,但是这个源代码是无法执行的。执行源代码的这个任务就需要JDK
- REmote DIctionary Server(Redis) 是一个由Salvatore Sanfilippo写的key-value存储系
- 下面就为大家带来3种比较常见的压缩方式先给出一组数据原图:width:2976; height:2976原图实际:--->byte:2
- AndroidStudio由于使用了gradle的进行项目构建,使我们开发app方便很多,今天我就给大家列出几点是用gradle的方便之处。
- Java Hutool 包工具类推荐 ExcelUtil包引入hutool包版本号可根据实际情况更换<dependency> &
- 在笔试编程过程中,关于数据的读取如果迷迷糊糊,那后来的编程即使想法很对,实现很好,也是徒劳,于是在这里认真总结了Java Scanner 类
- 一 模式介绍重试模式,是应用在异常处理中,发生异常的时候,能够对业务程序进行重新调用,在实际中,可以使用Polly提供稳定,简单的用法,自己
- 实现代码一、import java.io.File;import java.io.*;public class DelNullDir {pu
- 前言最近做项目的时候遇到一个卡劵的效果,由于自己觉得用图片来做的话可以会出现适配效果不好,再加上自己自定义view方面的知识比较薄弱,所以想
- 1. 前言我们往往有些配置文件,当项目大的时候,一些配置文件或者一些判断逻辑就会变得复杂,会出现很多判断语句,我在想,能不能通过前缀拼接动态
- 使用工具:IDEA2022Tomcat9.0.41.下载Tomcat:官网:https://tomcat.apache.org/找到需要的版
- 下边是一些我们常用的正则表达式。自己写的一些正则表达式,可以先在线测评一下。一、校验数字的表达式 1 数字:^[0-9]*$&nb