一、项目描述:基于EvalScope二次开发,构建智能体标准化质量评估体系
核心成果:
• 实现意图识别率、任务成功率、工具调用准确率、运行轨迹完整性、性能耗时
五大指标自动化评估 + 根因归因分析 + 报告自动生成
• 暖通节能智能体测试:定位意图识别率仅50%、工具调用参数错误等瓶颈
• 优化后意图识别率50%→90%,响应耗时降低50%
• 形成"评估→诊断→优化→再评估"质量迭代闭环
技术栈:Python / EvalScope / FastAPI / Redis
二、项目描述:设计多Agent协同自动化测试框架
核心成果:
• CaseGenerate→CaseRun→CaseFix三阶段闭环:基于Swagger文档智能生成用例,
AI动态分析失败日志并自修复参数断言,循环重试直至通过
• 集成Pydantic保障结构化输出一致性,ToolCalling封装测试平台API批量编排
• 有效解决传统自动化维护成本高的问题
技术栈:Python / Swagger / Pydantic / LangChain / PostgreSQL
三、项目描述:研发分布式压测平台 + 主导公司级稳定性治理
核心成果:
• 压测平台:Python+Django+Redis+InfluxDB,支持HTTP/Dubbo接口分布式压测,
模拟高并发场景(OTA下单、消息推送),输出性能瓶颈报告
• 稳定性治理:中间件按业务域拆分、故障切换<30秒、Kafka积压根治
• 客户App白屏、投诉归零
技术栈:Python / Django / Redis / InfluxDB / Dubbo / K8S