Kiểm tra mức sử dụng bộ nhớ mongodb

Bạn thực sự đã nhận được một hình ảnh không hoàn chỉnh về việc sử dụng bộ nhớ trong trường hợp này. Tổng kích thước của một từ điển nhiều hơn gấp đôi trong các khoảng thời gian không đều và nếu bạn so sánh kích thước của hai cấu trúc này ngay sau khi kích thước từ điển được tăng lên, nó sẽ lớn hơn. Một tập lệnh đơn giản với kích thước đệ quy hàm [xem mã bên dưới] hiển thị một mẫu rõ ràng

Nội dung chính Hiển thị

• Giới thiệu
• bộ dữ liệu
• thí nghiệm
• Danh sách từ điển
• Danh sách từ điển
• Danh sách từ điển
• Từ điển Python có chiếm rất nhiều bộ nhớ không?
• Từ điển có nhanh hơn danh sách Python không?
• Tại sao Dict nhanh hơn danh sách?
• Bao nhiêu bộ nhớ mà một danh sách bị mất trong Python?

i:  2  list size:  296  dict size:  328  difference:  -32
i:  3  list size:  392  dict size:  352  difference:  40
i:  4  list size:  488  dict size:  376  difference:  112
i:  5  list size:  616  dict size:  400  difference:  216
i:  7  list size:  808  dict size:  1216  difference:  -408
i:  10  list size:  1160  dict size:  1288  difference:  -128
i:  13  list size:  1448  dict size:  1360  difference:  88
i:  17  list size:  1904  dict size:  1456  difference:  448
i:  23  list size:  2480  dict size:  3904  difference:  -1424
i:  31  list size:  3328  dict size:  4096  difference:  -768
i:  42  list size:  4472  dict size:  4360  difference:  112
i:  56  list size:  5912  dict size:  4696  difference:  1216
i:  74  list size:  7880  dict size:  5128  difference:  2752
i:  100  list size:  10520  dict size:  14968  difference:  -4448
i:  133  list size:  14024  dict size:  15760  difference:  -1736
i:  177  list size:  18672  dict size:  16816  difference:  1856

Mô hình này tiếp tục khi i phát triển. . Hủy bỏ lợi ích bộ nhớ của danh sách trên từ điển. Nhưng kết quả, trung bình, không phải là từ điển tốt hơn; . Vì vậy, để trả lời cho câu hỏi ban đầu của bạn

Khi bạn muốn lưu trữ nhiều giá trị khóa dữ liệu trong bộ nhớ, cấu trúc dữ liệu nào tiết kiệm bộ nhớ hơn, một lệnh hoặc một danh sách các bộ dữ liệu?

Nó không thực sự quan trọng nếu tất cả những gì bạn quan tâm đều đáng nhớ

Tuy nhiên, lưu ý rằng việc lặp lại từ điển thường chậm hơn một chút so với việc lặp lại trong danh sách, bởi vì không có cách nào tốt để tránh lặp lại trên tất cả các thùng rỗng trong từ điển. Vì vậy, có một chút sự thay đổi từ điển - từ nhanh hơn [nhiều] trong quá trình tìm kiếm chính ngẫu nhiên, nhưng danh sách [một chút] nhanh hơn khi lặp lại. Từ điển có thể sẽ tốt hơn hầu hết thời gian, nhưng trong một số trường hợp cũ, danh sách có thể cung cấp tối ưu hóa vi mô

This is check size code. Nó có thể sẽ không tạo ra kết quả chính xác cho tất cả các góc hợp, nhưng nó nên xử lý các cấu trúc đơn giản như thế này mà không gặp vấn đề gì. [Nhưng hãy cho tôi biết nếu bạn gặp bất kỳ vấn đề nào. ]

import sys, collections, itertools, math

def totalsize[x]:
    seen = set[]
    return ts_rec[x, seen]

def ts_rec[x, seen]:
    if id[x] in seen:
        return 0
    else:
        seen.add[id[x]]

    x_size = sys.getsizeof[x]
    if isinstance[x, collections.Mapping]:
        kv_chain = itertools.chain.from_iterable[x.iteritems[]]
        return x_size + sum[ts_rec[i, seen] for i in kv_chain]
    elif isinstance[x, collections.Sequence]:
        return x_size + sum[ts_rec[i, seen] for i in x]
    else:
        return x_size

for i in [10 ** [e / 8.0] for e in range[3, 19]]:
    i = int[i]
    lsize = totalsize[[[x, x] for x in xrange[i]]]
    dsize = totalsize[dict[[x, x] for x in xrange[i]]]

    print "i: ", i,
    print " list size: ", lsize, " dict size: ", dsize,
    print " difference: ", lsize - dsize