欧阳楼主

一、大数据：
1.熟悉hadoop、HDFS高可用的架构原理，并能独立搭建hadoop集群环境。
2.熟悉Spark的运行模式及流程，熟悉Spark的资源和任务调度流程。
3.熟练使用scala来编写spark程序，使用SparkStreaming和SparkSQL处理数据，Kafka+SparkStreaming实时消息处理。
4.掌握Spark程序的map端、reduce端调优。
5.掌握Storm的核心架构，了解Storm事务处理机制。
6.掌握hive的搭建、使用、调优。
7.熟悉Kafka的架构、消息生产消费机制和文件存储原理。
8.熟悉HBase、Flume、zookeeper架构、掌握Elasticsearch，CDH等技术。
二、机器学习
1.熟练掌握多元线性回归算法、逻辑回归算法，并对数据进行分类、预测。掌握多元线性回归解法。
2掌握对数据的特征提取。
3熟练使用spark mlib进行机器学习；
4.掌握聚类原理、k-means原理、求距离方法
5.掌握基于物品的协同过滤原理，了解神经网络。
6.掌握 python。
二、javaEE：
1.熟悉常用的数据结构和算法。
2.掌握Oracle，mysql数据库。
4.熟悉linux命令.
5.掌握html、jsp前端页面开发。
6.熟悉大型网站高并发架构和负载均衡原理。