崗位職責：
1、負平臺系統(tǒng)的數(shù)據(jù)接入、數(shù)據(jù)存儲、數(shù)據(jù)計算、數(shù)據(jù)治理、數(shù)據(jù)提供等數(shù)據(jù)基礎服務設計開發(fā);
2、負責平臺系統(tǒng)的數(shù)據(jù)集成、數(shù)據(jù)模型設計、數(shù)據(jù)指標設計、數(shù)據(jù)工作流設計、數(shù)據(jù)產(chǎn)品設計等數(shù)據(jù)應用設計開發(fā);
3、參與完成數(shù)據(jù)倉庫設計，推動完成數(shù)據(jù)模型建模，為各數(shù)據(jù)需求提供完備的數(shù)據(jù)支持;
4、負責持續(xù)對平臺系統(tǒng)進行數(shù)據(jù)性能監(jiān)控和診斷，持續(xù)優(yōu)化平臺系統(tǒng)的數(shù)據(jù)處理性能;
5、負責對平臺系統(tǒng)上Pyhon任務進行設計、開發(fā)、測試、部署、維護。
崗位要求：
1、大學本科及以上學歷，3-5年以上python數(shù)據(jù)工程師工作經(jīng)驗;
2、精通ETL開發(fā)，精通使用ETL工具，如ETL、Kettle等;
3、精通使用Django、Flask等主流的PythonWeb開發(fā)框架;
4、熟悉掌握Python語言，熟悉掌握Pyhon的常用科學計算、數(shù)據(jù)分析、機器學習第三方庫;
5、熟練掌握Hadoop生態(tài)，包括HDFS、MapReduce、HBase、Hive、Spark、Flume、Zookeeper等，能熟練運用Python對Hadoop生態(tài)進行開發(fā);
6、熟練掌握Docker、Ganglia、Zabbix等，能熟練運用Python對Docker、Ganglia、Zabbix等進行開發(fā);
7、掌握算法和統(tǒng)計學知識，并能熟練使用SAS、SPSS等統(tǒng)計分析軟件。