半导体元器件大数据平台-RidingRoad外包案例-猿急送

半导体元器件大数据平台

人工智能 · 其他案例ID: 161398

微信扫码，建群沟通

作者： RidingRoad - 6年经验- 深圳市道合顺网络有限公司

案例介绍

功能点：
1. 可以通过参数搜索，快速找到你想要查找的型号；
2. 还可以通过类别搜索，快速查到行业内有多少家在生产这种类别的芯片；
3. 智能推荐所查找器件型号的替换件，首推国产芯片和业内中小芯片设计公司，帮助终端工程师快速解决芯片“选型难，找替代难，找资料难”的问题，为电子行业的中小微企业的快速崛起和成长，提供有力的数据服务和数据支持。

亮点：汇聚了国内外近5000家芯片设计原厂，近6000万条产品型号，3亿多条型号参数。

角色：爬虫工程师 + 后端工程师 + 大数据开发工程师
1. 使用Scrapy爬虫框架进行海量器件数据采集；
2. 运用RE正则进行海量数量的清洗和归一化，使用Hadoop进行海量数据的器件替换件分析和计算，使用MySQL进行数据持久化存储；
3. 通过把海量器件数据写入Elasticsearch提供快速近实时的业务查询；
4. 使用Django和FastAPI等web框架实现业务接口