Lấy mẫu ngẫu nhiên từ Mongo

Question

Tôi có một bộ sưu tập mongo với tài liệu. Có một trường trong mọi tài liệu là 0 HOẶC 1. Tôi cần lấy mẫu ngẫu nhiên 1000 bản ghi từ cơ sở dữ liệu và đếm số lượng tài liệu có trường đó là 1. Tôi cần thực hiện lấy mẫu này 1000 lần. Tôi phải làm nó như thế nào ?

Answer 1

Dưới đây là một ví dụ trong vỏ mongo .. giả một bộ sưu tập của collname, và một giá trị quan tâm trong thefield:

var total = db.collname.count(); 
var count = 0; 
var numSamples = 1000; 

for (i = 0; i < numSamples; i++) { 
    var random = Math.floor(Math.random()*total); 
    var doc = db.collname.find().skip(random).limit(1).next(); 
    if (doc.thefield) { 
     count += (doc.thefield == 1); 
    } 
} 

Answer 2

tôi sẽ chỉnh sửa nhận xét của tôi về @Stennies trả lời với điều này, nhưng bạn cũng có thể sử dụng một chỉ số ID tăng tự động seprate ở đây như là một thay thế nếu bạn đã bỏ qua số lượng HUGE của hồ sơ (nói chuyện rất lớn ở đây).

tôi đã viết câu trả lời khác cho câu hỏi khác rất nhiều như thế này, nơi một số một đã cố gắng để tìm kỷ lục thứ n của bộ sưu tập:

php mongodb find nth entry in collection

Phần thứ hai của câu trả lời của tôi về cơ bản mô tả một phương pháp tiềm năng bằng cách mà bạn có thể tiếp cận vấn đề này. Bạn sẽ vẫn cần phải lặp 1000 lần để có được hàng ngẫu nhiên của khóa học.

Answer 3

Đối với MongoDB 3.0 và trước đó, tôi sử dụng một mẹo cũ từ các ngày SQL (mà tôi nghĩ Wikipedia sử dụng cho tính năng trang ngẫu nhiên của chúng). Tôi lưu trữ một số ngẫu nhiên giữa 0 và 1 trong mỗi đối tượng tôi cần phải ngẫu nhiên, hãy gọi trường đó là "r". Sau đó bạn thêm chỉ mục vào "r".

db.coll.ensureIndex(r: 1); 

Bây giờ để có được đối tượng x ngẫu nhiên, bạn sử dụng:

var startVal = Math.random(); 
db.coll.find({r: {$gt: startVal}}).sort({r: 1}).limit(x); 

này mang đến cho bạn đối tượng ngẫu nhiên trong một truy vấn tìm duy nhất. Tùy thuộc vào nhu cầu của bạn, điều này có thể là quá mức cần thiết, nhưng nếu bạn định làm nhiều mẫu theo thời gian, đây là một cách rất hiệu quả mà không cần tải phụ trợ của bạn.

Answer 4

Nếu bạn đang sử dụng mongoengine, bạn có thể sử dụng một SequenceField để tạo ra một bộ đếm gia tăng.

class User(db.DynamicDocument): 
    counter = db.SequenceField(collection_name="user.counters") 

Sau đó, để lấy một danh sách ngẫu nhiên nói 100, làm như sau

def get_random_users(number_requested): 
    users_to_fetch = random.sample(range(1, User.objects.count() + 1), min(number_requested, User.objects.count())) 
    return User.objects(counter__in=users_to_fetch) 

nơi bạn sẽ gọi

get_random_users(100) 

Answer 5

Đối với những người đến câu trả lời, bây giờ bạn nên sử dụng chức năng tổng hợp mới $sample, mới trong 3.2.

https://docs.mongodb.org/manual/reference/operator/aggregation/sample/

db.collection_of_things.aggregate(
    [ { $sample: { size: 15 } } ] 
) 

Sau đó thêm bước nữa để đếm lên 0 s và 1 s sử dụng $group để lấy số liệu. Here is an example from the MongoDB docs.