職位描述
職責描述:
1、基于hadoop生態的大數據存儲平臺搭建和部署;
2、承擔數據抽取、清洗、轉化等數據處理程序開發;
3、參與數據模型設計和評審,保障數據平臺架構穩定;
4、為日常運營活動提供數據支持,并且在一定程度上給予評估和建議。
任職要求:
1、樂于學習和嘗試新技術、新工具,良好的溝通和理解能力;
2、有較強的Linux操作能力,有Shell等腳本編寫經驗;
3、熟悉數倉體系和大數據處理平臺相關子系統功能,如ETL、數據報表、監控、數據質量等;
4、熟悉Java語言,最好有scala、python使用或開發經驗;
5、掌握Hadoop/Spark/Storm生態圈的主流技術及產品,深入了解Hadoop/Spark/Storm生態圈產品的工作原理及應用場景;
6、熟悉MySQL處理機制與應用場景限制,熟悉NoSQL如Redis、HBase等,熟悉消息中間件如Kafka等的實現原理。
企業介紹
世紀互聯數據中心有限公司(21ViaNet Group, Inc,簡稱世紀互聯)是中國目前規模最大的電信中立互聯網基礎設施服務提供商。我們為客戶提供業界領先的服務器及網絡設備托管服務,并通過優質的網絡互聯服務(interconnectivity),幫助企業全面提升其互聯網基礎設施的性能、可用性和安全性。此外,我們的服務范圍還涵蓋管理式網絡服務(managed network services),致力于幫助客戶通過廣泛的數據傳輸網絡和特有的BroadEx?智能路由技術在互聯網上更快捷、更可靠地傳輸數據。
作為一家互聯網基礎設施服務提供商,世紀互聯的基礎設施與國內全部電信運營商、大型非運營商企業和地方互聯網服務提供商(ISPs)運營的網絡均保持互聯互通,這使得世紀互聯旗下每家數據中心都能夠作為客戶數據流中的一個網絡訪問點來發揮作用。與此同時,世紀互聯憑借特有的BroadEx?智能路由技術,可幫助客戶自動選擇出最優化路徑進行數據流引導,確保快速、可靠的數據傳輸。這樣,世紀互聯以網內、網外高水平的互聯性戰略設計,滿足客戶因為網絡互聯性不足而產生的需求,從而提供完整、有效的全方位解決方案。
目前,世紀互聯在國內33個城市運營47家數據中心,這些基礎設施均由高質量的數據中心和龐大的數據傳輸網絡組成。世紀互聯現已擁有超過1,300個客戶,橫跨多個領域,涵蓋互聯網企業、政府機構、大型藍籌股企業及中小企業等。