còn gọi: overfitting, khớp đường cong, thiên lệch khai thác dữ liệu
Tối ưu hóa quá mức là việc tinh chỉnh tham số EA quá khớp với dữ liệu lịch sử, tạo ra chiến lược đẹp trên backtest nhưng kém trên dữ liệu chưa từng thấy, vì nó khai thác nhiễu thay vì mẫu hình thị trường thật.
Chỉnh các quy tắc cho đến khi chúng bám sát quá khứ chặt đến mức đã học được những tình cờ của nó thay vì mẫu hình của nó. Backtest đẹp lên trong khi chiến lược tệ đi, và không có gì trong báo cáo phân biệt được hai điều đó.
Tối ưu hóa quá mức là kiểu hỏng tạo ra bằng chứng đẹp đẽ, và chính vì thế nó sống sót qua vòng rà soát mà một chiến lược tồi sẽ trượt. Mỗi lượt tối ưu đều cải thiện kết quả được báo cáo, bất kể nó có cải thiện chiến lược hay không, nên một quy trình chỉ nhìn kết quả báo cáo thì không thể thấy sự khác biệt.
Một trình tối ưu báo cáo mười bộ tham số tốt nhất cho một chiến lược. Dòng trên cùng là dòng được công bố; chính hình dạng của bảng quanh nó mới nói lên lợi thế có thật hay không.
Lợi thế thật xuống dốc êm khi tham số rời xa điểm tối ưu. Lợi thế bị khớp thì rơi khỏi vách đá, và vách đá ấy đã nhìn thấy được trước khi tiêu một dữ liệu out-of-sample nào.
Phép tính 2,41 in-sample → 0,88 out-of-sample, trong khi các lân cận nằm ở mức hòa vốn
Kết quả Con số 2,41 là thuộc tính của cửa sổ, không phải của quy tắc
Tối ưu hóa quá mức được chẩn đoán từ quy trình tạo ra kết quả, chứ không từ kết quả. Hãy hỏi cái gì đã được tinh chỉnh, trên dữ liệu nào, và cái gì đã được giữ lại.
| Khoảng | Ý nghĩa |
|---|---|
| Một cửa sổ, mọi tham số đều tối ưu, không giữ lại gì | Báo cáo không có giá trị chứng minh nào về tương lai. Nó mô tả các quy tắc có thể bị bẻ cong tới đâu cho vừa một mẫu dữ liệu. |
| Có báo cáo cửa sổ out-of-sample nhưng dùng lại sau mỗi lần chỉnh | Phần dự trữ đã tiêu hết. Một khi kết quả của nó quay lại nuôi việc tinh chỉnh, nó cũng là in-sample. |
| Một cửa sổ out-of-sample duy nhất chưa đụng tới, chỉ nhìn một lần | Chuẩn tối thiểu. Hãy diễn giải khoảng cách thay vì mức tuyệt đối. |
| Walk-forward với cao nguyên tham số rộng và kiểm tra chéo nhiều công cụ | Bằng chứng mạnh nhất có được trước khi chạy thật, vì chính việc khớp lại đã được kiểm tra. |
Các mục đăng trên AIStrategyMiner ghi rõ cửa sổ dữ liệu, mô hình tester và số lệnh, để người đọc có thể đặt những câu hỏi trên thay vì tin vào đường cong.
Mỗi lần một kết quả từ cửa sổ dự trữ dẫn tới một điều chỉnh nữa, cửa sổ đó trở thành một phần dữ liệu huấn luyện. Sau vài vòng thì chẳng còn gì là out-of-sample, và quy trình có vẻ chặt chẽ hơn trong khi chứng minh được ít hơn.
Đó đúng là những con số mà việc khớp thổi phồng lên. Sharpe in-sample trên 3 ở một EA bán lẻ nhiều khả năng là triệu chứng hơn là sự yên tâm.
Số tham số là một đường; việc chọn chiến lược là đường khác. Chọn cái tốt nhất trong hai trăm chiến lược đơn giản trên cùng một cửa sổ vẫn khớp mẫu dữ liệu hiệu quả y như tinh chỉnh một chiến lược phức tạp.
Việc đó khôi phục backtest và lặp lại thất bại, vì bản khớp mới sinh ra từ đúng quy trình đã tạo ra bản cũ. Câu hỏi cần trả lời trước là lợi thế ban đầu đã bao giờ là out-of-sample hay chưa.
| Trên 14 EA được công bố ở đây | Giá trị |
|---|---|
| Profit factor in-sample | 1,27–1,52 |
| Mục đăng có profit factor dưới 1,00 | 0 |
| Có báo cáo khối out-of-sample | 11 |
| Lợi nhuận out-of-sample | −0,57 % đến +3,01 % |
| Khối out-of-sample bị lỗ | 2 |
| Lượt chạy đã kiểm chứng trên tài khoản tiền thật | 0 |
Hãy đọc dòng cuối trước dòng đầu. Một backtest cuốn chiếu vẫn chạy trên lịch sử mà ai đó đã có thể xem qua, nên không có gì ở trên là out-of-sample theo nghĩa quyết định được điều gì — và ba EA đã tuyên bố ngày bắt đầu phần dự trữ rồi từ đó không công bố kết quả nào, đó chính là hình dạng của thiên lệch báo cáo khi nhìn từ bên trong.
Điểm yếu nằm ở kích thước chứ không ở dấu. Bản ghi in-sample trung vị ở đây là 362 lệnh đã đóng; khối dự trữ trung vị là 21. Một lượt chạy ngắn như vậy không thể tách lợi thế khỏi một quý yên ả, và vì thế những con số âm nhỏ (−0,57 %, −0,47 %) không mang nhiều phán quyết hơn những con số dương.
Danh sách Forward của Strategy Tester (No, 1/2, 1/3, 1/4, Custom) chia khoảng thời gian giúp bạn. Nó không thể ngăn bạn đọc lại nửa trước sau mỗi lượt tối ưu, và chính việc đọc lại đó tiêu hết nó. Hãy đặt Forward thành Custom với ngày bạn ngừng nhìn — 2026-04-01 cho mười khối ở trên — và phần dự trữ chỉ đáng giá bằng những gì rơi vào trong đó: 142 lệnh với Cairn, 40 với cái lớn kế tiếp, và số một chữ số với hai cái khác.
