Không có mô hình độc quyền, không có hộp đen. Phương pháp gồm sáu bước, và mỗi bước được thiết kế để có thể bị bác bỏ.
Các vị thế đã đóng, dựng lại từ bản ghi công khai. Không dùng dữ liệu bên thứ ba, không dùng lời khai của người dùng.
Cần một số vị thế đã đóng tối thiểu trước khi xếp hạng. Người giao dịch ba lần không thể so với người giao dịch ba nghìn lần.
Mốc so sánh của một nhà giao dịch được tính sau khi loại chính họ ra. Nếu không, ai cũng vượt mức trung bình của chính mình.
Thứ hạng được xác lập trên một giai đoạn, rồi kiểm chứng trên các giai đoạn sau. Lợi thế không qua được sự thay đổi giai đoạn thì không phải lợi thế.
Nếu phương pháp cho cùng kết quả trên dữ liệu bị xáo trộn, nó không đo được gì cả. Kiểm tra này chạy ở mỗi lần xây lại.
Không bao giờ cập nhật cộng dồn. Cơ sở dữ liệu bắt đầu từ con số không và quét toàn bộ lịch sử, kể cả trước khi công cụ ra đời.
Chỉ cần một kiểm tra thất bại, cơ sở dữ liệu của đêm đó sẽ không được công bố và bản cũ tiếp tục phục vụ. Một trang hiển thị con số sai còn tệ hơn trang không hiển thị gì.
| Kiểm tra | Điều nó ngăn chặn |
|---|---|
| Số lượng nhà giao dịch | Cơ sở dữ liệu bị cắt cụt do sự cố đọc |
| Số nhóm | Việc chia nhóm hỏng làm thứ hạng không so sánh được |
| Không có nhà giao dịch nào không có vị thế | Dòng trống bị tính là nhà giao dịch |
| Có mặt các khoản mất trắng | Chính lỗi đã làm sai lệch phép đo đầu tiên của chúng tôi |
| Tỷ lệ thành công tăng dần | Xếp hạng bị đảo ngược hoặc ngẫu nhiên |
| Mất trắng giảm dần | Cùng phép kiểm tra đó, từ đầu bên kia |
| Kích thước bảng mốc | Mốc được tính trên quá ít trường hợp |
Ở chỉ số có trọng số theo số tiền, nhóm thứ hai và thứ ba đổi chỗ cho nhau. Nguyên nhân là vài nhà giao dịch có khối lượng rất lớn, chiếm tỷ trọng cao trong trung bình có trọng số. Chúng tôi có thể bỏ chỉ số hoặc làm mượt các giá trị cực đoan. Chúng tôi chọn để nó hiển thị và giải thích: hai chỉ số không trọng số tăng đều đặn, không có ngoại lệ.