Bằng chứng từ production cho thời code do AI viết.
Kỹ thuật
Mười bản sửa do AI viết trong bài thử đều sai, và bản nào cũng kèm một test fail trước khi sửa, pass sau khi sửa. Test có chứng minh được một điều, chỉ không phải là bug khách gặp đã được sửa.
Andrew Babo5 phút đọc
Hướng dẫn
Một lần chạy agent trên serverless là một chuỗi lần gọi ngắn, mỗi lần có giới hạn thời gian riêng. Bài này chỉ ra cần theo dõi gì ở từng mắt xích, kèm ba thí nghiệm nhỏ cho thấy tín hiệu bị mất ở đâu.
Andrew Babo8 phút đọc
Hướng dẫn
Agent đọc được cả repo mà chỉ có một lời phàn nàn thì vẫn đoán mò. Mình đưa cùng hai bug cho ba model theo năm cách, 108 lần: chỉ có báo lỗi của khách thì đúng bug 8/24 lần, có gói lỗi ngắn thì 24/24.
Andrew Babo8 phút đọc
Kỹ thuật
Trong thí nghiệm của mình, mọi bản sửa sai đều tự nhận đã sửa, kèm test chạy qua và tự chấm 92 đến 100 điểm. Chỉ khi chạy đúng dữ liệu khách gửi mới biết bản nào vẫn crash.
Andrew Babo7 phút đọc
Kỹ thuật
Mình chạy một agent chăm sóc khách hàng 60 lần với lỗi cài sẵn. Mọi lần hoàn tiền thất bại vẫn trả HTTP 200, không lỗi nào tới error tracker. Chỉ trace cho thấy.
Andrew Babo5 phút đọc
Kỹ thuật
Mình dừng một job bằng SIGTERM và SIGKILL, mỗi kiểu ba lần. Một cách gửi ping rất phổ biến báo “thành công” cho job đã bị giết.
Andrew Babo7 phút đọc
Hướng dẫn
Lỗi production chưa nằm trong ngữ cảnh của Claude Code cho tới khi bạn đưa vào. Chỉ có báo lỗi của khách, một model Claude sửa sai bug 8/8 lần; có gói lỗi, sửa đúng 8/8.
Andrew Babo6 phút đọc
Hướng dẫn
Prompt cài đặt chỉ tốt bằng thứ tự file của nó. Prompt cũ của mình gọi init muộn vài dòng: trên bản build production nó báo được 0/12 lỗi khởi động và lỗi trang. Thứ tự đã sửa báo được 12/12.
Andrew Babo7 phút đọc
Hướng dẫn
Debug Mode của Cursor dùng cho bug đã tái hiện được, còn lỗi production đã xảy ra với người khác. Phải biến nó thành các bước tái hiện trước: stack kèm input làm được, lời phàn nàn thì không.
Andrew Babo6 phút đọc
Kỹ thuật
Mình cho 14 kiểu lỗi trình duyệt chạy qua SDK của Sentry và của chính mình, mỗi kiểu ba lần. Lỗi đã bắt mà chỉ log thì không gửi gì; reject bằng chuỗi thì không có stack.
Andrew Babo6 phút đọc
Kỹ thuật
Mình cài một bí mật giả vào 14 lỗi Node.js thật rồi báo bằng SDK Node của Sentry, để nguyên tuỳ chọn mặc định. 13/15 bí mật đã rời khỏi tiến trình, qua message, breadcrumb hoặc các dòng mã nguồn.
Andrew Babo7 phút đọc
Sản phẩm
Mình đếm những gì Sentry tự host 26.10.0 kéo về và khởi động, rồi đặt cạnh một node được quản lý trong Hetzner project của bạn. Cả hai giữ dữ liệu trên server của bạn; công việc thì khác.
Andrew Babo5 phút đọc
