Mongodb批量插入大量数据。


  Mongodb批量插入大量数据,使用python脚本也能实现。在这种场景下尽量减少与数据库的通信,即准备好一定量的数据后批量插入。java mongodb的api提供了批量插入的功能。代码如下。

  

import com.mongodb.BasicDBObject;
import com.mongodb.DBCollection;
import com.mongodb.DBObject;
import com.mongodb.MongoClient;

import java.util.ArrayList;
import java.util.Date;
import java.util.List;

public class MonConnections {

    //Mongo db 批量插入数据
    private static MongoClient mongoClient = new MongoClient("127.0.0.1", 30000);
    private static long count = 2000000;
    public static MongoClient getClient(){
        return  mongoClient;
    }

    public static void  main(String[] args){
        List<DBObject> list = new ArrayList<>();
        DBCollection collection = mongoClient.getDB("test").getCollection("book");

        for (int i = 0; i < 2200000; i++){
            DBObject object = new BasicDBObject();
            object.put("id", String.valueOf(count));
            Date date = new Date();
            object.put("add_time", date);
            object.put("title", "mongo"+count++);
            list.add(object);
            if (i != 0 && i %10000 == 0){
                System.out.println("插入" + " " + i + "本书");
                collection.insert(list);
                list.clear();
            }
        }


    }
}

   注意插入后list一定要clear,否则可能出现id重复。


免责声明!

本站转载的文章为个人学习借鉴使用,本站对版权不负任何法律责任。如果侵犯了您的隐私权益,请联系本站邮箱yoyou2525@163.com删除。



 
粤ICP备18138465号  © 2018-2025 CODEPRJ.COM