QC Engineer - Onsite P. Yên Hoà, HN

• Xây dựng và thực hiện các kịch bản kiểm thử (test scenarios) và trường hợp kiểm thử (test cases) cho các giải pháp AI Agent / Voice Agent.

• Kiểm chứng chức năng của AI Agent dựa trên các yêu cầu nghiệp vụ và kỹ thuật đã xác định.

• Xác minh xem AI Agent có đưa ra các phản hồi chính xác, phù hợp và nhất quán hay không.

• Kiểm thử hành vi của AI Agent trong các tình huống nghiệp vụ khác nhau, bao gồm:

  + Các tình huống thông thường

  + Các trường hợp biên (edge ​​cases)

  + Dữ liệu đầu vào không hợp lệ hoặc không đầy đủ

  + Các yêu cầu bất ngờ từ người dùng

  + Các cuộc hội thoại đa lượt (multi-turn conversations)

  + Đánh giá chất lượng dữ liệu và phản hồi do AI tạo ra.

  + Xác minh chất lượng, độ chính xác và tính nhất quán của cơ sở tri thức (knowledge base) được AI Agent sử dụng.

  + Xác định, ghi nhận và theo dõi các lỗi hoặc vấn đề chất lượng liên quan đến:

  + Phản hồi của Agent

  + Xử lý ngữ cảnh

  + Truy xuất tri thức

  + Nội dung được tạo ra

  + Logic nghiệp vụ

• Phối hợp chặt chẽ với các kỹ sư AI và đội ngũ phát triển để xác định nguyên nhân gốc rễ và cải thiện chất lượng Agent.

• Xây dựng và duy trì các bộ dữ liệu kiểm thử, bộ dữ liệu đánh giá và kịch bản kiểm thử để kiểm chứng AI Agent.

• Hỗ trợ cải tiến liên tục các tiêu chí đánh giá và tiêu chuẩn chất lượng của AI Agent.

• Có hơn 3 năm kinh nghiệm trong lĩnh vực QA/QC phần mềm, Kỹ thuật kiểm thử (Test Engineering) hoặc lĩnh vực liên quan.

• Có kinh nghiệm về kiểm thử phần mềm và đảm bảo chất lượng.

• Hiểu biết sâu sắc về thiết kế test case, thực hiện kiểm thử, báo cáo lỗi và kiểm thử hồi quy (regression testing).

• Ưu tiên cao ứng viên có kinh nghiệm kiểm thử các hệ thống AI/ML, Generative AI, Chatbot, Conversational AI hoặc AI Agent.

• Hiểu biết về các khái niệm LLM/AI Agent và cách đánh giá các phản hồi do AI tạo ra.

• Có kinh nghiệm đánh giá các yếu tố:

  + Độ chính xác

  + Tính phù hợp

  + Tính nhất quán

  + Tính đầy đủ

  + Hiện tượng ảo giác (hallucination) / phản hồi sai lệch

• Có kinh nghiệm làm việc với dữ liệu kiểm thử và cơ sở tri thức.

• Có khả năng phân tích và nhận diện các vấn đề trong nội dung do AI tạo ra.

• Kỹ năng phân tích và giải quyết vấn đề tốt.

• Kỹ năng giao tiếp và phối hợp làm việc nhóm tốt.

Ưu tiên:

• Có kinh nghiệm kiểm thử AI Agent / Voice Agent.

• Có kinh nghiệm với các khung đánh giá LLM hoặc đánh giá tự động.

• Có kiến ​​thức về RAG, embeddings, cơ sở dữ liệu vector và truy xuất tri thức.

• Có kinh nghiệm kiểm thử API và kiểm thử tự động (automation testing).

• Có kinh nghiệm tạo bộ dữ liệu đánh giá cho các ứng dụng LLM/Generative AI.

• Có kiến ​​thức cơ bản về Python hoặc viết script phục vụ kiểm thử tự động là một lợi thế.

• Phụ cấp onsite 100.000 VND/ngày làm việc.

• Không cần thử việc, nhận làm chính thức hưởng 100% lương và được đóng đầy đủ bảo hiểm theo luật lao động Việt Nam (BHXH, BHYT, BHTN) ngay từ ngày onboard.

• Tham gia các hoạt động của công ty: Teambuilding, du lịch và các hoạt động khác.

• Làm việc với hệ thống lớn và tiên tiến, có cơ hội phát triển kỹ năng công nghệ toàn diện với các bài toán phức tạp, yêu cầu độ chính xác cao.

• Cơ hội thăng tiến dựa trên năng lực tương ứng với tăng bậc và tăng lương tương xứng.

• Cơ hội triển khai các dự án tham vọng ở nhiều quốc gia, tiếp xúc với những công nghệ mới nhất và học hỏi từ những đồng nghiệp giỏi.

• Được tham gia các khoá đào tạo kỹ năng: AWS, Microservice, ngoại ngữ (tiếng Anh, tiếng Nhật)…