1. 中转服务器设计。程序编写成功能够转发上万端口的流量,保证极低的内存占用和CPU占用。在该项目中,采用了两种转发方式,一种是基于linux内核的转发,将流量在内核层面直接转发给目标服务器;第二种采用应用层转发,利用IO多路复用的方式避免端口过多导致的线程同步问题。
2. 自动化爬虫平台。结合网上各类产品,对媒体类别的网站做了深入研究,优化算法,实现对全网新闻内容的自动化识别和爬取,具有极高的通用性。
3. 数据大屏。结合用户特点,有针对性的开发独有的数据展示模型,包括但不限于: 电磁数据模拟、3D机房分布、协议流量模型等。