崗位職責(zé)：
1、負(fù)平臺(tái)系統(tǒng)的數(shù)據(jù)接入、數(shù)據(jù)存儲(chǔ)、數(shù)據(jù)計(jì)算、數(shù)據(jù)治理、數(shù)據(jù)提供等數(shù)據(jù)基礎(chǔ)服務(wù)設(shè)計(jì)開(kāi)發(fā);
2、負(fù)責(zé)平臺(tái)系統(tǒng)的數(shù)據(jù)集成、數(shù)據(jù)模型設(shè)計(jì)、數(shù)據(jù)指標(biāo)設(shè)計(jì)、數(shù)據(jù)工作流設(shè)計(jì)、數(shù)據(jù)產(chǎn)品設(shè)計(jì)等數(shù)據(jù)應(yīng)用設(shè)計(jì)開(kāi)發(fā);
3、參與完成數(shù)據(jù)倉(cāng)庫(kù)設(shè)計(jì)，推動(dòng)完成數(shù)據(jù)模型建模，為各數(shù)據(jù)需求提供完備的數(shù)據(jù)支持;
4、負(fù)責(zé)持續(xù)對(duì)平臺(tái)系統(tǒng)進(jìn)行數(shù)據(jù)性能監(jiān)控和診斷，持續(xù)優(yōu)化平臺(tái)系統(tǒng)的數(shù)據(jù)處理性能;
5、負(fù)責(zé)對(duì)平臺(tái)系統(tǒng)上Pyhon任務(wù)進(jìn)行設(shè)計(jì)、開(kāi)發(fā)、測(cè)試、部署、維護(hù)。
崗位要求：
1、大學(xué)本科及以上學(xué)歷，3-5年以上python數(shù)據(jù)工程師工作經(jīng)驗(yàn);
2、精通ETL開(kāi)發(fā)，精通使用ETL工具，如ETL、Kettle等;
3、精通使用Django、Flask等主流的PythonWeb開(kāi)發(fā)框架;
4、熟悉掌握Python語(yǔ)言，熟悉掌握Pyhon的常用科學(xué)計(jì)算、數(shù)據(jù)分析、機(jī)器學(xué)習(xí)第三方庫(kù);
5、熟練掌握Hadoop生態(tài)，包括HDFS、MapReduce、HBase、Hive、Spark、Flume、Zookeeper等，能熟練運(yùn)用Python對(duì)Hadoop生態(tài)進(jìn)行開(kāi)發(fā);
6、熟練掌握Docker、Ganglia、Zabbix等，能熟練運(yùn)用Python對(duì)Docker、Ganglia、Zabbix等進(jìn)行開(kāi)發(fā);
7、掌握算法和統(tǒng)計(jì)學(xué)知識(shí)，并能熟練使用SAS、SPSS等統(tǒng)計(jì)分析軟件。