乀奋斗灬
架构师
深信服 · 10年经验
日薪：
￥500/8h
地点：
长沙 全区
时间：
下班后周六周日可工作日远程可工作日驻场（离职原因）可工作日驻场（自由职业原因）
信用行为
0
接单数
0
评价数
0
收藏数
技术能力
技术层面
1、熟练掌握JAVA、python、shell等开发语言，有10年以上大型项目可开发、运维、架构、管理经验，主导过
两个以上大型项目从0到1开发（springboot、springacloud等）并搭建配套基础设施（git、maven）。
2、熟练掌握大数据组件hadoop、hbase、hive、spark、zookeep、kafka、strom、flink、es等，有10年以上大
型大数据平台开发、运维、架构、管理经验，能够基于业务场景独立设计出大型大数据处理平台。
3、熟悉数据采集技术，主导开发过大型数据采集工程，能通过验证码识别、动态代理、身份伪装、频率控制等
方式突破采集上限。
4、熟悉自然语言处理，能够通过分词、主谓宾等方式提取文章、论坛主体，并分析出中心思想、正负评价、相
关信息推荐。
管理层面
1、有30+的团队管理经验，包括绩效评估沟通、人才梯队建设、员工心理辅导等
2、有项目管理经验，通过缺陷预防、风险识别、关键问题分析、制定研发流程等方式及时消除项目过程中的障
碍，确保项目按时、按质交付。
业务层面
1、有一年半的规划经理经验，通过竞争分析、行业分析、客户分析等分析出客户痛点、产品核心场景以及核心
竞争优势，落地到产品中，并通过拜访客户、分析用户体验等方式分析出产品的差异与不足，最终不断迭代到
产品中形成闭环。
2、参与调研数字化转型方案，分析ipaas、apaas、esb等相关技术，与团队一起输出数字化转型方案，并从市
场侧论证方案可行性后落地实施。
1、熟练掌握JAVA、python、shell等开发语言，有10年以上大型项目可开发、运维、架构、管理经验，主导过
两个以上大型项目从0到1开发（springboot、springacloud等）并搭建配套基础设施（git、maven）。
2、熟练掌握大数据组件hadoop、hbase、hive、spark、zookeep、kafka、strom、flink、es等，有10年以上大
型大数据平台开发、运维、架构、管理经验，能够基于业务场景独立设计出大型大数据处理平台。
3、熟悉数据采集技术，主导开发过大型数据采集工程，能通过验证码识别、动态代理、身份伪装、频率控制等
方式突破采集上限。
4、熟悉自然语言处理，能够通过分词、主谓宾等方式提取文章、论坛主体，并分析出中心思想、正负评价、相
关信息推荐。
管理层面
1、有30+的团队管理经验，包括绩效评估沟通、人才梯队建设、员工心理辅导等
2、有项目管理经验，通过缺陷预防、风险识别、关键问题分析、制定研发流程等方式及时消除项目过程中的障
碍，确保项目按时、按质交付。
业务层面
1、有一年半的规划经理经验，通过竞争分析、行业分析、客户分析等分析出客户痛点、产品核心场景以及核心
竞争优势，落地到产品中，并通过拜访客户、分析用户体验等方式分析出产品的差异与不足，最终不断迭代到
产品中形成闭环。
2、参与调研数字化转型方案，分析ipaas、apaas、esb等相关技术，与团队一起输出数字化转型方案，并从市
场侧论证方案可行性后落地实施。
项目经验
数据基础平台
项目描述： 统一化大数据平台，通过大数据平台的技术支撑以及灵活的大数据工具，为安全行业提供完整
易用的网络安全大数据分析能力
项目职责： 1、负责基础平台用户场景梳理、需求分析、缺陷预防分析、平台边界分析
2、负责整个基础平台的总体设计
3、性能基线制定与实施
4、详细设计方案评审、代码评审、测试用例评审
5、方案选型、技术支撑与技术问题裁决
项目业绩： 1、统一化公司大数据平台，为内部赋能
2、为国家级互网行动提供基础平台，平台稳定运行没有出现因平台导致的问题
3、为 10+个外部客户部署了大数据基础平台，涉及煤矿、教育、互联网等行业，每家集群规
模在 30+
4、平台支持一键部署、动态扩容
批流画布
项目描述： 用户在批流画布中通过简单的托拉拽将源算子、目标算子、处理算子拖入画布中，简单配置后
形成一条工作流，点击运行后将工作流编译成 flink 程序在 hadoop 上运行，在检索中心通过 SPL
语法将入库后的数据检索并展示到界面中，所画即所得，大幅提升研发工作人员效率，降低开
发门槛
项目职责： 1、负责画布用户场景梳理、需求分析、缺陷预防分析、平台边界分析
2、负责整个批流画布的总体设计
3、性能基线制定与实施
4、详细设计方案评审、代码评审、测试用例评审
5、方案选型、技术支撑与技术问题裁决
项目业绩： 1、为公司提供统一化数据清洗、转储、数据处理业务，为内部赋能
2、目前已有最大规模支撑 1500 个客户，单客户每天进入的日志量 700w 条，单节点解析及入
库性能达到 10W+EPS
3、单节点普通关联规则（不含 like 等复杂判断）性能 6W+EPS
4、单节点纯 ES 入库性能 3W+EPS
5、80 个用户同时数据检索时间不超过 2S
6、基于存算分离的云化架构，支持平滑升级，弹性扩展
7、支持批流融合
项目描述： 统一化大数据平台，通过大数据平台的技术支撑以及灵活的大数据工具，为安全行业提供完整
易用的网络安全大数据分析能力
项目职责： 1、负责基础平台用户场景梳理、需求分析、缺陷预防分析、平台边界分析
2、负责整个基础平台的总体设计
3、性能基线制定与实施
4、详细设计方案评审、代码评审、测试用例评审
5、方案选型、技术支撑与技术问题裁决
项目业绩： 1、统一化公司大数据平台，为内部赋能
2、为国家级互网行动提供基础平台，平台稳定运行没有出现因平台导致的问题
3、为 10+个外部客户部署了大数据基础平台，涉及煤矿、教育、互联网等行业，每家集群规
模在 30+
4、平台支持一键部署、动态扩容
批流画布
项目描述： 用户在批流画布中通过简单的托拉拽将源算子、目标算子、处理算子拖入画布中，简单配置后
形成一条工作流，点击运行后将工作流编译成 flink 程序在 hadoop 上运行，在检索中心通过 SPL
语法将入库后的数据检索并展示到界面中，所画即所得，大幅提升研发工作人员效率，降低开
发门槛
项目职责： 1、负责画布用户场景梳理、需求分析、缺陷预防分析、平台边界分析
2、负责整个批流画布的总体设计
3、性能基线制定与实施
4、详细设计方案评审、代码评审、测试用例评审
5、方案选型、技术支撑与技术问题裁决
项目业绩： 1、为公司提供统一化数据清洗、转储、数据处理业务，为内部赋能
2、目前已有最大规模支撑 1500 个客户，单客户每天进入的日志量 700w 条，单节点解析及入
库性能达到 10W+EPS
3、单节点普通关联规则（不含 like 等复杂判断）性能 6W+EPS
4、单节点纯 ES 入库性能 3W+EPS
5、80 个用户同时数据检索时间不超过 2S
6、基于存算分离的云化架构，支持平滑升级，弹性扩展
7、支持批流融合
团队情况
整包服务：
微信公众号开发微信小程序开发DBA开发其他开发
负责人：
架构师
团队成员：
后端工程师
乀奋斗灬
有团队 · 可整包
架构师 · 10年经验 · 深信服
0
累计接单
0
用户评价
0
被收藏
信用行为
0
接单数
0
评价数
0
收藏数
技术能力
技术层面
1、熟练掌握JAVA、python、shell等开发语言，有10年以上大型项目可开发、运维、架构、管理经验，主导过
两个以上大型项目从0到1开发（springboot、springacloud等）并搭建配套基础设施（git、maven）。
2、熟练掌握大数据组件hadoop、hbase、hive、spark、zookeep、kafka、strom、flink、es等，有10年以上大
型大数据平台开发、运维、架构、管理经验，能够基于业务场景独立设计出大型大数据处理平台。
3、熟悉数据采集技术，主导开发过大型数据采集工程，能通过验证码识别、动态代理、身份伪装、频率控制等
方式突破采集上限。
4、熟悉自然语言处理，能够通过分词、主谓宾等方式提取文章、论坛主体，并分析出中心思想、正负评价、相
关信息推荐。
管理层面
1、有30+的团队管理经验，包括绩效评估沟通、人才梯队建设、员工心理辅导等
2、有项目管理经验，通过缺陷预防、风险识别、关键问题分析、制定研发流程等方式及时消除项目过程中的障
碍，确保项目按时、按质交付。
业务层面
1、有一年半的规划经理经验，通过竞争分析、行业分析、客户分析等分析出客户痛点、产品核心场景以及核心
竞争优势，落地到产品中，并通过拜访客户、分析用户体验等方式分析出产品的差异与不足，最终不断迭代到
产品中形成闭环。
2、参与调研数字化转型方案，分析ipaas、apaas、esb等相关技术，与团队一起输出数字化转型方案，并从市
场侧论证方案可行性后落地实施。
1、熟练掌握JAVA、python、shell等开发语言，有10年以上大型项目可开发、运维、架构、管理经验，主导过
两个以上大型项目从0到1开发（springboot、springacloud等）并搭建配套基础设施（git、maven）。
2、熟练掌握大数据组件hadoop、hbase、hive、spark、zookeep、kafka、strom、flink、es等，有10年以上大
型大数据平台开发、运维、架构、管理经验，能够基于业务场景独立设计出大型大数据处理平台。
3、熟悉数据采集技术，主导开发过大型数据采集工程，能通过验证码识别、动态代理、身份伪装、频率控制等
方式突破采集上限。
4、熟悉自然语言处理，能够通过分词、主谓宾等方式提取文章、论坛主体，并分析出中心思想、正负评价、相
关信息推荐。
管理层面
1、有30+的团队管理经验，包括绩效评估沟通、人才梯队建设、员工心理辅导等
2、有项目管理经验，通过缺陷预防、风险识别、关键问题分析、制定研发流程等方式及时消除项目过程中的障
碍，确保项目按时、按质交付。
业务层面
1、有一年半的规划经理经验，通过竞争分析、行业分析、客户分析等分析出客户痛点、产品核心场景以及核心
竞争优势，落地到产品中，并通过拜访客户、分析用户体验等方式分析出产品的差异与不足，最终不断迭代到
产品中形成闭环。
2、参与调研数字化转型方案，分析ipaas、apaas、esb等相关技术，与团队一起输出数字化转型方案，并从市
场侧论证方案可行性后落地实施。
项目经验
数据基础平台
项目描述： 统一化大数据平台，通过大数据平台的技术支撑以及灵活的大数据工具，为安全行业提供完整
易用的网络安全大数据分析能力
项目职责： 1、负责基础平台用户场景梳理、需求分析、缺陷预防分析、平台边界分析
2、负责整个基础平台的总体设计
3、性能基线制定与实施
4、详细设计方案评审、代码评审、测试用例评审
5、方案选型、技术支撑与技术问题裁决
项目业绩： 1、统一化公司大数据平台，为内部赋能
2、为国家级互网行动提供基础平台，平台稳定运行没有出现因平台导致的问题
3、为 10+个外部客户部署了大数据基础平台，涉及煤矿、教育、互联网等行业，每家集群规
模在 30+
4、平台支持一键部署、动态扩容
批流画布
项目描述： 用户在批流画布中通过简单的托拉拽将源算子、目标算子、处理算子拖入画布中，简单配置后
形成一条工作流，点击运行后将工作流编译成 flink 程序在 hadoop 上运行，在检索中心通过 SPL
语法将入库后的数据检索并展示到界面中，所画即所得，大幅提升研发工作人员效率，降低开
发门槛
项目职责： 1、负责画布用户场景梳理、需求分析、缺陷预防分析、平台边界分析
2、负责整个批流画布的总体设计
3、性能基线制定与实施
4、详细设计方案评审、代码评审、测试用例评审
5、方案选型、技术支撑与技术问题裁决
项目业绩： 1、为公司提供统一化数据清洗、转储、数据处理业务，为内部赋能
2、目前已有最大规模支撑 1500 个客户，单客户每天进入的日志量 700w 条，单节点解析及入
库性能达到 10W+EPS
3、单节点普通关联规则（不含 like 等复杂判断）性能 6W+EPS
4、单节点纯 ES 入库性能 3W+EPS
5、80 个用户同时数据检索时间不超过 2S
6、基于存算分离的云化架构，支持平滑升级，弹性扩展
7、支持批流融合
项目描述： 统一化大数据平台，通过大数据平台的技术支撑以及灵活的大数据工具，为安全行业提供完整
易用的网络安全大数据分析能力
项目职责： 1、负责基础平台用户场景梳理、需求分析、缺陷预防分析、平台边界分析
2、负责整个基础平台的总体设计
3、性能基线制定与实施
4、详细设计方案评审、代码评审、测试用例评审
5、方案选型、技术支撑与技术问题裁决
项目业绩： 1、统一化公司大数据平台，为内部赋能
2、为国家级互网行动提供基础平台，平台稳定运行没有出现因平台导致的问题
3、为 10+个外部客户部署了大数据基础平台，涉及煤矿、教育、互联网等行业，每家集群规
模在 30+
4、平台支持一键部署、动态扩容
批流画布
项目描述： 用户在批流画布中通过简单的托拉拽将源算子、目标算子、处理算子拖入画布中，简单配置后
形成一条工作流，点击运行后将工作流编译成 flink 程序在 hadoop 上运行，在检索中心通过 SPL
语法将入库后的数据检索并展示到界面中，所画即所得，大幅提升研发工作人员效率，降低开
发门槛
项目职责： 1、负责画布用户场景梳理、需求分析、缺陷预防分析、平台边界分析
2、负责整个批流画布的总体设计
3、性能基线制定与实施
4、详细设计方案评审、代码评审、测试用例评审
5、方案选型、技术支撑与技术问题裁决
项目业绩： 1、为公司提供统一化数据清洗、转储、数据处理业务，为内部赋能
2、目前已有最大规模支撑 1500 个客户，单客户每天进入的日志量 700w 条，单节点解析及入
库性能达到 10W+EPS
3、单节点普通关联规则（不含 like 等复杂判断）性能 6W+EPS
4、单节点纯 ES 入库性能 3W+EPS
5、80 个用户同时数据检索时间不超过 2S
6、基于存算分离的云化架构，支持平滑升级，弹性扩展
7、支持批流融合
团队情况
服务范围：
团队构成：
负责人(架构师)
|
核心队员：后端工程师
案例展示
舆情分析
1、搭建并设计大型分布式数据采集系统，并实时采集全网数据（新闻、论坛、微博、博客等） 2、自主研发文本密集算法（用于自动提取新闻、博客主题）、文本梯度算法（用于自动提取论 坛评论、博客评论） 3、自主研发验证码识别算法（一般验证码识别准确率达到 90%以上） 4、实现各个
批流画布
用户在批流画布中通过简单的托拉拽将源算子、目标算子、处理算子拖入画布中，简单配置后 形成一条工作流，点击运行后将工作流编译成 flink 程序在 hadoop 上运行，在检索中心通过 SPL 语法将入库后的数据检索并展示到界面中，所画即所得，大幅提升研发工作人员效率，降低开
智能BI
指用现代数据仓库技术、线上分析处理技术、数据挖掘和数据展现技术进行数据分析以实现商业价值 1、OLAP 分析：OLAP 使用户能够即时以交互方式对相关数据子集进行“切片和切块”。同时， OLAP 功能，比如向上钻取、向下钻取、或任意挖掘（跨业务维度）、透视、排序、筛选、以及
立即沟通
