面向 AI API 开放平台场景设计的聚合网关与交易中台,提供多模型厂商统一接入、用户 API Key 自助管理、QPS/RPM/TPM 限流、Token 用量统计、积分计费、订单支付、权益履约和运营后台配置能力。系统采用 Java 微服务 + VUE双前端架构,Java 后端基于 Spring Boot、openFeign、MyBatis-Plus、MySQL、Redis 实现核心交易与账务能力。
1.设计 Java 微服务中台模块,拆分 core-service、api-service、admin-service、service-rpc、service-biz、service-dao 等模块,通过 gRPC 暴露用户、商品、订单、支付、LLM 账务和运行时配置能力。
2.设计并实现 LLM 计费闭环,请求前通过 ReserveCredits 预冻结积分,请求结束后通过 SettleUsage 按真实 Token usage 结算,请求失败或无 usage 时通过 ReleaseReservation 释放冻结额度。
3.实现请求级幂等控制,以 requestId、reservationId 贯穿预冻结、结算、释放流程,并在数据库层增加唯一约束,避免网关重试或异步结算重复扣费。
4.实现用户 API Key 管理和 Key 级限流能力,支持单 Key 设置 max_qps、max_rpm、max_tpm,网关侧基于 Redis 计数器完成 QPS/RPM 限流,并根据真实 Token 消耗统计 TPM。
电商运营管理系统,是面向电商企业的一站式后台管理平台,我负责
当时开发这套系统,我主要是负责会议需求对接加上服务器运维部署
负责中演票务系统场馆、项目、场次、锁座、创建订单、确认出票、
作为Java架构师主导聚易库ERP系统架构设计与技术决策,该
模型从业与爱好者综合交易平台,为他们搭建一个展示、沟通、交易
在线写信寄信综合平台,融入语音智能输入、AI写信、线上购物、
需求方专属客服,免费梳理匹配
添加客服微信,免费为您安排与该工程师直接沟通
长按二维码添加客服微信
如当前档期不合,也可免费为您推荐相似案例作者