Mongodb избегайте дублирования записей

Используйте индекс с опцией {unique:true}.

// everyone's username must be unique:
db.users.createIndex({email:1},{unique:true});

Вы также можете сделать это в нескольких полях. Дополнительные сведения см. в этом разделе документации. детали и примеры.

Уникальный индекс гарантирует, что в проиндексированных полях не будут храниться повторяющиеся значения; то есть обеспечивает уникальность для индексированных полей. По умолчанию MongoDB создает уникальный индекс в поле _id во время создания коллекции.

Если вы хотите, чтобы значения null из уникального ключа игнорировались, вам также необходимо сделать индекс разреженным (см. здесь), также добавив параметр sparse:

// everyone's username must be unique,
//but there can be multiple users with no email field or a null email:
db.users.createIndex({email:1},{unique:true, sparse:true});

Если вы хотите создать индекс с помощью Java-драйвера MongoDB. Пытаться:

Document keys = new Document("email", 1);
collection.createIndex(keys, new IndexOptions().unique(true));

Это можно сделать с помощью поля «_id», хотя такое использование не рекомендуется. предположим, вы хотите, чтобы имена были уникальными, тогда вы можете поместить имена в столбец «_id», и, как вы, возможно, знаете, столбец «_id» уникален для каждой записи.

BasicDBObject bdbo = new BasicDBObject("_id","amit");

Теперь никакая другая запись не может иметь имя «амит» в коллекции. Это может быть одним из способов, о которых вы просите.

Что касается Java-драйвера Mongo v3.0, код для создания индекса выглядит так:

public void createUniqueIndex() {
    Document index = new Document("fieldName", 1);
    MongoCollection<Document> collection = client.getDatabase("dbName").getCollection("CollectionName");
    collection.createIndex(index, new IndexOptions().unique(true));
}

// And test to verify it works as expected
@Test
public void testIndex() {
    MongoCollection<Document> collection = client.getDatabase("dbName").getCollection("CollectionName");

    Document newDoc = new Document("fieldName", "duplicateValue");
    collection.insertOne(newDoc);

    // this will throw a MongoWriteException
    try {
        collection.insertOne(newDoc);
        fail("Should have thrown a mongo write exception due to duplicate key");
    } catch (MongoWriteException e) {
        assertTrue(e.getMessage().contains("duplicate key"));
    }
}

Решение Theon не сработало для меня, но это сработало:

BasicDBObject query = new BasicDBObject(<fieldname>, 1);
collection.ensureIndex(query, <index_name>, true);

Я не программист на Java, но вы, вероятно, можете преобразовать это.

MongoDB по умолчанию имеет первичный ключ, известный как _id, вы можете использовать upsert() или save() для этого ключа, чтобы предотвратить повторную запись документа следующим образом:

var doc = {'name': 'sam'};
db.users.insert(doc); // doc will get an _id assigned to it
db.users.insert(doc); // Will fail since it already exists

Это немедленно остановит дубликаты. Что касается многопоточных безопасных вставок при определенных условиях: ну, в этом случае нам нужно больше знать о вашем состоянии.

Однако я должен добавить, что индекс _id по умолчанию уникален.

используя pymongo, это выглядит так:

mycol.create_index("id", unique=True)

где myCol — коллекция в БД

#!/usr/bin/env python
# -*- coding: utf-8 -*-
import pymongo

myclient = pymongo.MongoClient("mongodb://localhost:27017/")
mydb = myclient["mydatabase"]
mycol = mydb["customers"]
mycol.create_index("id", unique=True)
mydict = {"name": "xoce", "address": "Highway to hell 666", "id": 1}
x = mycol.insert_one(mydict)