AI Software QA Engineer｜AI 軟體品質驗證工程師

Test AI behavior. Automate quality. Ship with confidence.

Anrotec 正在打造新一代 AI Platform 與 AI Tools，結合 AI Agent、RAG、LLM、語音、Vision、Avatar、Edge AI、MCP 與企業工作流程，並持續探索 Agentic AI 與 Physical AI 的實際應用。

負責 Anrotec AI Platform、AI Tools 與 Agents 的品質工程，涵蓋傳統軟體功能、API、整合測試，以及 LLM / RAG / Agent 的非決定性行為驗證。建議具約 5 年以上軟體 QA、SDET 或測試自動化經驗；實際以能力為準。

• 依 MRD / PRD / Functional Specification 建立測試計畫、驗收條件、風險矩陣與 regression suite。
• 設計並執行 Web、Backend、REST API、Database、Docker、cloud / edge 的功能、整合、端對端及回歸測試。
• 建立 Agent tool calling、MCP、RAG retrieval、文件處理及多步 workflow 的可重現測試情境。
• 針對 LLM 輸出評估正確性、grounding、hallucination、格式遵循、拒答與安全邊界，並管理測試資料集。
• 運用 Python / TypeScript、pytest / Playwright 或同類工具與 AI-assisted coding 建置自動化測試、CI 品質閘門及缺陷追蹤。
• 記錄版本、prompt、模型、資料集及環境條件，協助 RD 定位問題並驗證修復；參與 release sign-off。

• 重視 AI-first、hands-on、快速驗證與可驗證交付，不將 AI coding 產出視為免審查程式碼。
• 能與 PM、前後端、DevOps 及其他研發成員協作，將需求轉化為可測試、可部署的產品。

• 建立 AI 產品核心測試案例、可重複執行的 regression suite 與缺陷分級流程。
• 讓 AI 模型、prompt、Agent tools 或資料更新後的品質變化可量測、可追溯。
• 在維持交付速度的同時，提高版本穩定性、測試覆蓋及 release confidence。

全職職位，與 Anrotec 核心產品與研發團隊密切協作。以實際產品交付及品質為核心，不是純研究職位。

• 具軟體測試方法、測試案例設計、缺陷管理及跨團隊溝通能力。
• 具 API 測試、測試自動化及至少一種程式或腳本語言實作經驗。
• 熟悉 Git、CI/CD、Docker、Linux 或雲端測試環境基本操作。
• 理解 AI 輸出具變動性，能區分 deterministic assertion、統計型評估與人工審查。
• 能設計正向、負向、邊界、權限及錯誤恢復情境，產出可追溯測試報告。
• 願意使用 AI coding 工具提升測試產能，但能獨立檢查測試品質與判斷依據。

• LLM evaluation、RAG evaluation、Agent / MCP 測試或 prompt regression 經驗。
• pytest、Playwright、Postman / Newman、GitHub Actions 等工具經驗。
• 具 golden dataset、測試指標、模型版本比較、latency / throughput 或 load testing 經驗。
• 熟悉 prompt injection、資料洩漏、越權 tool execution 等 AI 安全測試情境。
• Ollama、Open WebUI、vector database、Document AI、STT/TTS、Vision 或 Edge AI 測試經驗。

保險類：員工團保、雇主責任險。

娛樂類：不定期的聚餐及下午茶、辦公室飲品及零食類。

員工福利：提供電動升降桌，支援坐站交替的工作方式，提升長時間辦公的舒適度與工作環境彈性。