1
深刻理解HDFS分布式文件系統存儲結構和高可用原理

2

熟練掌握hadoop?mapreduce計算框架編程，對yarn的資源調度，作業監控有一定認識

3

掌握storm?streaming編程，對定時批量任務處理，分布式rpc有一定認識

4

深刻了解Spark底層運行機制，

4

熟練掌握scala編程，能運用scala進行spark?RDD，spark?streaming編程

5

熟悉flume，kafka等日志收集，分發框架的使用，能夠將他們和storm，spark進行整合進行數據的實時處理

6

能夠熟練運用hive數據倉庫工具，對日志數據進行查詢，統計等數據操作，并且有一定的數據優化經驗

7

能將hive和spark?sql進行整合，進行數據查詢等相關操作

8

熟悉hbase數據庫的使用，及其編程

9

熟悉redis內存數據庫，能搭建redis高可用集群及其編程

10

熟悉ELK技術棧，了解ElasticSearch，Logstash的整合使用

11

掌握Sqoop數據遷移工具的使用，能熟練的將數據從不同的存儲介質進行遷移

12

了解linux系統，熟悉常用的linux的shell命令，能在linux系統下搭建開發環境

13

熟練掌握JavaSE，深刻理解面向對象設計思想，熟練使用IO流操作和集合框架，網絡編程等JavaSE主流技術。

14

能使用反射、注解、動態代理等Java高級技術，對代碼的封裝抽取及其性能優化有點一定的經驗。

15

熟悉Struts，Spring，Hibernate，Servlet，Jsp等WEB編程技術

16

能熟練使用Oracle，MySql主流數據庫技術，擅長SQL語句的編寫

總結

以上是生活随笔為你收集整理的大数据简历 专业技能内容的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。