工作職責:
-輿情數(shù)據(jù)爬蟲產品設計及研發(fā)
-產品輿情數(shù)據(jù)海量數(shù)據(jù)建模、數(shù)據(jù)分析
-用戶反饋分析平臺建設和優(yōu)化,包括但不限于ad-hoc查詢,多維數(shù)據(jù)分析,高效實時數(shù)據(jù)
-用戶反饋數(shù)據(jù)基礎架構的建設及維護,包括但不限于調度系統(tǒng)、元數(shù)據(jù)管理、數(shù)據(jù)監(jiān)控、流式平臺等
職責要求:
-熟悉PHP/python/c/c++中至少一種,熟悉mysql,有1年以上的開發(fā)經驗
-熟悉MapReduce原理,Hive SQL,熟悉常用腳本語言如Java、python等
-熟悉爬蟲框架,有爬蟲經驗者優(yōu)先
-有大型互聯(lián)網公司大數(shù)據(jù)平臺及數(shù)據(jù)開發(fā)經驗者優(yōu)先
-有流式計算,海量數(shù)據(jù)存儲經驗者優(yōu)先