大数据小太阳

1. 熟练掌握Scala、Java语言 ，Linux常用命令 2. 了解HDFS，YARN，Zookeeper，Spark，Flink，Kafka，HBASE等运行原理 3. MySQL，Hive，HBase，MongoDB，Clickhouse，ElasticSerch的基本使用 4. 掌握Flume，Filebeat，Logstash数据采集工具 5. 熟练使用sparkcore，sparksql编写离线任务  6. 熟练使用sparkstreaming，flinkSQL编写流处理任务 7. 熟练操作Kafka与各个组件的整合使用  8. 了解Prosto,OLAP联机分析处理原理及应用场景 9. 熟练使用Dbus+Wormhole可视化实时同步数据 10. 了解solr并具备简单的权重设计能力