1、負責國內外上市公司、股票、基金、債券等金融相關資料進行收集、整理和分類;
2、根據業務需求和相關演算法模型公式,對原始資料進行加工、清洗工作;
3、協助處理專案反饋的資料問題,保證資料質量和精準度;
4、搭建和完善資料採集平臺,保證平臺的高效和穩定性。
1、負責資料平臺數據整合與資料倉庫模型的建立、維護和優化;
2、參與指標體系與報表的設計、開發與維護;
3、瞭解、監控應用需求及資料來源的變化,並評估對資料倉庫模型的.影響;
4、設計資料模型的etl實現,參與團隊etl流程的優化以及相關技術問題的解決。
5、基於資料分析和資料資源的挖掘,提升資料的商業應用價值。
1、具備大資料或者資料庫工作經驗2年以上;
2、熟悉主流nosql資料庫技術hbase,mongodb圖資料庫等其中兩種;
3、熟悉hadoop生態圈技術;熟悉3個以上大資料開發框架和中介軟體:hive、kafka、flume、spark等;
4、具有java、python除錯、linux、shell程式設計能力;
5、思路清晰、良好的學習能力、善於協作、溝通和具備團隊合作意識,能夠適應出差。