单机键值存储引擎

企业服务 云计算 案例ID:248285
哄哄
2 年经验· 自由职业
微信扫码沟通,客服可协助直接对接工程师;如当前档期不合,也可继续推荐相似案例作者。

案例介绍

kvs- system 是一款基于 Rust 从零实现的高性能日志结构 KV 存储系统,对标 PingCAP Talent Plan 工业级规格。我在项目中担任 Owner,独立完成全部设计与落地,主要交付以下功能模块:
① Bitcask 存储引擎——追加式段日志写路径零随机 I/O、HashMap 内存索引 O(1) 点查、段文件 1 MiB 自动轮转、后台线程压缩(线下构建+原子提交)消除 stale 记录、崩溃后回放段文件秒级恢复索引无需独立 WAL;
② 可插拔线程池——抽象 ThreadPool trait 并实现 Naive / SharedQueue / Rayon 三种后端,共享队列池加 catch_unwind 防 panic 饿死 worker,基准下与工业级 Rayon 吞吐打平;
③ 自定义 TCP 线协议——2 字节 opcode 行帧格式 + Serde Visitor 零拷贝解析,服务端 TCP 流读写拆分、请求分发与两包确定性停机协议;
④ 客户端无锁长连接池——fetch_add 轮询均衡消解千连接握手风暴与 TIME_WAIT 堆积,Builder 模式编排 crossbeam 响应通道与 AtomicU64 完成计数器支撑批量压测;
⑤ 工程化闭环——GitHub Actions 跑 fmt / clippy deny-warnings / test,Criterion 基准覆盖 6 档 worker × 3 组配置(kvs-shared / kvs-rayon / sled-rayon),4 核下读 ~1 MiB/s、写 ~696 KiB/s,Rust 无 GC 保证尾延迟稳定。适合需要高性能单机 KV 存储、网络协议栈、并发编程或 Rust 基础组件开发的需求方。

单机键值存储引擎

企业服务 · 云计算 案例ID:248285
联系该工程师
微信扫码,建群沟通
作者: 哄哄 - 2年经验- 自由职业

案例介绍

kvs- system 是一款基于 Rust 从零实现的高性能日志结构 KV 存储系统,对标 PingCAP Talent Plan 工业级规格。我在项目中担任 Owner,独立完成全部设计与落地,主要交付以下功能模块:
① Bitcask 存储引擎——追加式段日志写路径零随机 I/O、HashMap 内存索引 O(1) 点查、段文件 1 MiB 自动轮转、后台线程压缩(线下构建+原子提交)消除 stale 记录、崩溃后回放段文件秒级恢复索引无需独立 WAL;
② 可插拔线程池——抽象 ThreadPool trait 并实现 Naive / SharedQueue / Rayon 三种后端,共享队列池加 catch_unwind 防 panic 饿死 worker,基准下与工业级 Rayon 吞吐打平;
③ 自定义 TCP 线协议——2 字节 opcode 行帧格式 + Serde Visitor 零拷贝解析,服务端 TCP 流读写拆分、请求分发与两包确定性停机协议;
④ 客户端无锁长连接池——fetch_add 轮询均衡消解千连接握手风暴与 TIME_WAIT 堆积,Builder 模式编排 crossbeam 响应通道与 AtomicU64 完成计数器支撑批量压测;
⑤ 工程化闭环——GitHub Actions 跑 fmt / clippy deny-warnings / test,Criterion 基准覆盖 6 档 worker × 3 组配置(kvs-shared / kvs-rayon / sled-rayon),4 核下读 ~1 MiB/s、写 ~696 KiB/s,Rust 无 GC 保证尾延迟稳定。适合需要高性能单机 KV 存储、网络协议栈、并发编程或 Rust 基础组件开发的需求方。

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在 1 小时内与您联系确认。

1小时精推人才

需求方专属客服,免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
更多案例
微信沟通 客服 看中这位工程师了?客服帮你 1 小时对接沟通 → ×