MobTech qa jobs (salary & requirements)

职责：
负责公司AI产品及大模型应用的全生命周期质量保障工作。不同于传统软件测试，本岗位聚焦于大模型应用、Agent系统、RAG知识库、智能问答及内容生成场景的测试与评测，重点关注模型输出质量、知识检索准确率、业务场景覆盖率、系统稳定性及安全合规性。
通过建立AI测试体系、评测数据集与自动化测试能力，持续提升产品质量与用户体验，保障AI产品高质量上线和稳定运营。岗位职责：

1、负责大模型应用、智能问答系统、AG知识库应用、内容生成等Al项目的功能、接口、场景回归全流程测试，参与需求评审、测试设计、测试执行、上线验收及版本回归测试全过程。
2、负责建立并执行AI专项测试方案，包括 问答准确率验证，回答相关性评估，多轮对话一致性验证，知识时效性验证，模型幻觉检测，重复回答检测，答非所问识别，Prompt鲁棒性测试，持续发现并推动解决模型效果问题。
3、负责RAG全链路测试与效果评估：包括文档解析与切片验证，向量化效果验证，检索召回准确率验证，重排序（Rerank）效果评估，Prompt配置优化验证，*终答案生成质量评估，定位问题来源并协同研发、算法团队持续优化。
4、负责AI应用相关性能测试工作：API接口压测，并发能力验证，响应时延分析，长时间稳定性测试，资源消耗监控，异常场景测试，确保系统满足业务上线要求。
5、开展AI内容安全专项测试，包括：敏感内容输出检测，越权访问测试，Prompt Injection攻击验证，Jailbreak绕过测试，数据泄漏风险验证，合规性测试，提升系统安全性与风险防控能力。
6、建立AI测试资产与质量标准：包括，测试用例库建设，评测数据集建设，自动化测试脚本开发，AI评测体系搭建，测试报告输出，基于Python实现接口测试及自动化回归测试，提高测试效率和覆盖率。
6、负责缺陷跟踪与线上问题分析：模型效果问题定位，检索链路问题排查，Prompt问题分析，数据质量问题分析，系统性能问题分析，推动问题闭环并持续优化产品质量。

任职要求：
1、本科及以上学历，计算机、软件工程、人工智能等相关专业优先；3年以上软件测试经验；具备完整项目测试生命周期经验；熟悉功能测试、接口测试及测试流程管理。
2、熟悉Python开发，能够：编写自动化测试脚本，完成接口自动化测试，实现简单数据处理与分析，构建测试工具和辅助脚本。
3、熟练掌握：Postman，JMeter，Swagger，Fiddler（或同类工具），具备接口测试与性能测试经验。
4、了解以下技术原理：大语言模型（LLM），GenAI应用，Prompt Engineering，Agent系统，RAG架构，Embedding与向量检索，能够理解AI应用工作流程并设计测试方案。