- Tính năng Code Review ở dạng research preview đã được ra mắt, triển khai đội ngũ đa tác tử cho mỗi PR để phát hiện sâu các lỗi mà con người dễ bỏ sót
- Khi sản lượng code của kỹ sư Anthropic tăng 200% trong một năm qua, review code đã trở thành nút thắt cổ chai, và nhiều PR chỉ được xem lướt thay vì được review kỹ
- Trước khi áp dụng, chỉ 16% PR nhận được bình luận review thực chất, nhưng sau khi áp dụng con số này tăng lên 54%; việc phê duyệt PR vẫn do con người đảm nhiệm
- Với PR quy mô lớn (trên 1.000 dòng), 84% có chứa phát hiện và trung bình báo cáo 7,5 vấn đề, trong khi tỷ lệ false positive dưới 1%
- Chi phí review trung bình khoảng $15~25 cho mỗi PR dựa trên lượng token sử dụng, đồng thời cung cấp các tính năng quản lý chi phí như giới hạn theo tháng cho tổ chức và kiểm soát theo từng repository
Vấn đề nút thắt cổ chai trong review code
- Khi sản lượng code trên mỗi kỹ sư Anthropic tăng 200% trong một năm qua, review code đã nổi lên như nút thắt cổ chai của quy trình phát triển
- Các khách hàng doanh nghiệp cũng than phiền về cùng một vấn đề mỗi tuần: trong trạng thái quá tải, nhiều PR của lập trình viên chỉ được xem lướt thay vì review sâu
- Đây là một lựa chọn kỹ lưỡng hơn và tốn kém hơn so với Claude Code GitHub Action mã nguồn mở hiện có, được phát triển để gắn một reviewer đáng tin cậy cho mọi PR
- Trước khi áp dụng, chỉ 16% PR nhận được bình luận review thực chất, nhưng sau khi áp dụng con số này tăng lên 54%
- Việc phê duyệt PR vẫn do con người đảm nhiệm, và tính năng này đóng vai trò thu hẹp khoảng trống để reviewer có thể bao phủ đầy đủ phần code thực sự được đưa lên production
Cách hoạt động
- Khi một PR được mở, hệ thống sẽ điều phối một đội tác tử để tìm lỗi song song
- Mỗi tác tử sẽ xác minh lỗi để lọc bỏ false positive, rồi xếp hạng theo mức độ nghiêm trọng
- Kết quả được gửi vào PR dưới dạng một bình luận tổng quan tín hiệu cao duy nhất cùng các bình luận inline cho từng lỗi cụ thể
- Quy mô review được tự động điều chỉnh theo kích thước PR: thay đổi lớn và phức tạp sẽ có nhiều tác tử hơn và phân tích sâu hơn, còn thay đổi nhỏ sẽ dùng luồng xử lý nhẹ
- Trong thử nghiệm, thời gian review trung bình vào khoảng 20 phút
Các trường hợp áp dụng thực tế
- Sau nhiều tháng vận hành nội bộ, với PR quy mô lớn (trên 1.000 dòng), 84% có chứa phát hiện và báo cáo trung bình 7,5 vấn đề
- Với PR nhỏ (dưới 50 dòng), 31% có chứa phát hiện và báo cáo trung bình 0,5 vấn đề
- Các kỹ sư nhìn chung đồng ý với các phát hiện, và tỷ lệ bị đánh dấu là false positive dưới 1%
- Trong một trường hợp, thay đổi một dòng trong dịch vụ production là kiểu diff thường có thể được phê duyệt rất nhanh, nhưng Code Review đã gắn cờ ở mức critical
- Thay đổi đó tạo ra một chế độ lỗi có thể làm hỏng cơ chế xác thực của dịch vụ; đây là loại vấn đề rất dễ đọc lướt qua trong diff nhưng lại trở nên hiển nhiên khi được chỉ ra
- Lỗi đã được sửa trước khi merge, và kỹ sư liên quan chia sẻ rằng nếu chỉ một mình thì có lẽ họ đã không phát hiện ra
- Trong middleware mã nguồn mở của TrueNAS, với PR refactor mã hóa ZFS, Code Review đã phát hiện một lỗi có sẵn trong phần code lân cận
- Một vấn đề không khớp kiểu dữ liệu khiến bộ nhớ đệm khóa mã hóa bị xóa âm thầm ở mỗi lần đồng bộ
- Đây là một vấn đề tiềm ẩn trong phần code mà PR chạm tới, thuộc kiểu lỗi mà reviewer là con người chỉ quét qua change set sẽ không dễ phát hiện ngay
Chi phí và kiểm soát
- Được tối ưu cho độ sâu phân tích nên tốn kém hơn các giải pháp nhẹ như Claude Code GitHub Action
- Việc review được tính phí theo lượng token sử dụng, trung bình $15~25 tùy theo kích thước và độ phức tạp của PR
- Các tùy chọn quản trị chi phí và mức sử dụng dành cho quản trị viên:
- Giới hạn theo tháng cho tổ chức: đặt tổng mức chi hàng tháng cho toàn bộ hoạt động review
- Kiểm soát theo từng repository: chỉ bật review cho các repository được chọn
- Bảng điều khiển phân tích: theo dõi số PR đã được review, tỷ lệ chấp nhận và tổng chi phí review
Cách bắt đầu
- Được cung cấp dưới dạng research preview (beta) cho các gói Team và Enterprise
- Quản trị viên có thể bật Code Review trong phần cài đặt Claude Code, cài đặt GitHub App, rồi chọn repository sẽ chạy review
- Sau khi được bật, lập trình viên sẽ có review tự động chạy cho các PR mới mà không cần cấu hình thêm
8 bình luận
Dạo này tốc độ ra mắt sản phẩm của Anthropic đúng là điên thật.
Trong lúc cải thiện các công cụ phát triển, có vẻ họ cũng đã hoàn thiện được vòng quay đà giúp chính hoạt động phát triển nội bộ tăng tốc bằng những công cụ đó.
Rất đậm không khí của một startup ngày nào cũng tung ra thứ gì đó mới.
Chắc đang tạo áp lực kích thích OpenAI rất mạnh.
Có thể thấy họ đang làm việc cực kỳ hào hứng và vui vẻ.
Nếu chỉ giảm được chi phí thì có vẻ sẽ khá tốt.
Tạo mã bằng Claude, rồi dùng Claude để review mã..
Có vẻ gói cá nhân không được hỗ trợ. Không biết sau này cũng sẽ không có nhỉ?
Có vẻ như việc cải thiện đệ quy đã bắt đầu
Các thầy Claude ơi, nói thật là có nhanh quá mức không vậy... hu hu
Claude: vì đâu phải con người....;;;;