技术:1.熟悉使用Python语言进行编程,有良好的编程习惯,遵循PEP8编码规范; 2.熟悉使用Linux中vim、ls等基本命令,可在Linux系统设置定时任务,部署SVN版本控制器; 3.熟悉requests模块的的使用,熟悉使用Scrapy爬虫框架; 4.熟悉使用re、x
项目:项目描述:大数据洞察项目是一个对网站、app、电子报纸、论坛、自媒体进行数据采集并清洗数据然后按需求展示的大数据平台项目,包含新闻推荐、新闻快报、本地资讯、热点追踪、数据建工、数据分析等模块。 责任描述: 1.负责实现批量采集app数据爬虫的框架的设计以及网站爬虫框架
案例: 大数据洞察项目
技术:后端开发:熟练运用 Python 结合 Django 框架搭建功能完备、稳定高效的 Web 应用程序。能够依据业务需求设计合理的项目架构,实现复杂的业务逻辑,包括用户认证、权限管理、数据交互等模块,确保系统的安全性与扩展性,所搭建项目在公司内部稳定运行超 1 年。 数据库管
项目:项目描述:作为核心开发者,独立设计构建适配多终端、供 50 人同时使用的数据监控分析系统,实现从数据收集汇总、存入 MySQL 数据库到生成报表全程自动化,提升效率、节省人力。 技术实现: 后端用 Python 与 Django,搭高扩展性架构、规划 API,开发多数据源采集
案例: 数据监控分析系统