Bi数据系统

•熟悉Hadoop基本运行原理；
•熟悉Java，Scala开发语言；
•基本掌握大数据平台CDH搭建及维护；熟悉Linux系统操作命令；
•熟练使用Spark-RDD、Spark-Sql、Flink 进行离线数据和实时数据分析；
•能够使用Mysql，postgresql等关系型数据库Sql语言；
•能够使用Hive、HBase、kudu、impala等进行数据分析；
•能够使用Elasticsearch，Logstash，kibana进行项目开发；
•熟悉Flume对数据进行采集(Flume sink二次开发经验)；
•能够编写的shell脚本进行任务调度。