yisa 桔子分期
个人
ID:204380
Java后台开发 大数据工程师
10年
1000元/8小时
技术:大数据组件手动安装和工具安装(Ambari和 Cloudera Manager),Hadoop HDFS、YARN、HBase、Hive、Spark、Storm,Zookeeper,Kafka,Alluxio,Presto,Solr,Sqoop,Flume,Impala等主流组件
项目:水厂自主生产的数采仪已经在集团近50个污水厂部署,并且会在未来1至2年内对所有项目进行部署。数采仪将采集的实时数据以秒的频率通过VPN专递到集团数据中心的前置机中,前置机将数据按污水厂维度存储在REDIS中,REDIS中会保存每个厂最新一次的实时数据。
为了对这些数据进行大数据