熟练掌握 Hadoop、hbase、hive 等大数据处理和分析工具；
熟练掌握 MongoDB、MySQL、SQLServer 等数据库的使用和管理；
熟练掌握 kettle、finereport 等数据处理和报表生成工具；
熟练掌握 pandas、numpy、re等 数据处理python库；
熟练掌握 xpath、beautifulsoup、request、urllib 等爬虫python库；
Python 框架 django，flask，scrapy等

用python处理过搜狗用户搜索数据，进行数据提取，清洗，存储、可视化等操作；python airflow做定时任务调度，通过python写自动化脚本再使用定时任务。