Amazon vừa công bố toàn bộ bộ dữ liệu báo cáo lỗi từ các tác nhân AI của họ khi xây dựng AWS Emulator.

19.244 báo cáo. 21 ngày. Không có sự giám sát của con người.

Bản alpha? Họ sử dụng một định dạng nghiêm ngặt để các tác nhân có thể sửa lỗi của nhau mà không gây nhập nhằng.

12.701 lỗi được các tác nhân khác tự động sửa
2.943 báo cáo được gửi trong một ngày
Chỉ có 5 báo cáo do con người viết

Mỗi báo cáo đều tuân theo cùng một cấu trúc:

Tiêu đề: Mô tả lỗi trong một dòng
Mức độ nghiêm trọng
Vị trí chính xác (hàm/endpoint)
Phân tích nguyên nhân (định dạng 1 trên N nếu có nhiều nguyên nhân)
Hành vi mong đợi so với thực tế
Vì sao điều này quan trọng (tác động đến người dùng)
Định hướng sửa lỗi (không phải bản vá)
Kết quả kiểm thử thất bại
Các bước tái hiện
Tiêu chí hoàn tất (các bài kiểm thử chính xác phải vượt qua)

Quy tắc then chốt: Mỗi mục chỉ có một nguyên nhân. Sửa mã, không sửa kiểm thử. Không phát hành bất cứ thứ gì cho đến khi các bài kiểm thử trong mục Hoàn tất đều vượt qua.

Đây là cách mở rộng quy mô công việc phát triển tự động. Không phỏng đoán. Không qua lại. Chỉ có sự rõ ràng có thể thực thi.

Nếu bạn đang xây dựng hệ thống tác nhân, hãy dán nội dung này vào AGENTS.md và chứng kiến chi phí phối hợp giảm xuống bằng không.