Member of Technical Staff, Coding Research
Full-time · Mid-level · Anywhere
Thông tin công việc
- Hình thức: Làm việc từ xa (remote)
- Mức lương: $16,667 - $21,667 / tháng
- Ngành: Product
- Chuyên môn: Machine Learning Evaluation
- Cấp bậc: Mid-level
- Khu vực tuyển: Anywhere
- Ngày đăng: 27/09/2026
Mô tả công việc
Vị trí này chịu trách nhiệm thiết kế và làm chủ các khung đánh giá cho coding agent, từ đặc tả benchmark, phương pháp chấm điểm, rubric đến quy chuẩn chất lượng, đồng thời dẫn dắt các sáng kiến nghiên cứu nhằm đo lường và cải thiện hiệu năng của mô hình lập trình tiên tiến. Bạn sẽ xây dựng dataset, golden example, công cụ và hạ tầng cho thử nghiệm quy mô lớn, phân tích hành vi và các dạng lỗi của mô hình để chuyển hóa thành cải tiến huấn luyện và đánh giá. Ứng viên phù hợp là kỹ sư phần mềm hoặc nhà nghiên cứu có nền tảng Python/C++, 3+ năm kinh nghiệm trong software engineering, machine learning hoặc đánh giá mô hình, quen với LLM, coding agent, reinforcement learning và thoải mái làm việc trong môi trường nghiên cứu biến động, nhiều bất định.