簡介
職位名稱: "數據工程師"
工作時間:第一個月 8pm - 5am,RTO日 3pm - 12mn,WFH日 4pm - 1am
工作安排:混合型(每週2天RTO)
地點:菲律賓奎松市
核心技能與經驗:
- 3年以上數據工程經驗,專注於數據集成、處理和轉換,使用Python和雲技術。
- 具備Python編程技能,尤其是在API集成和數據庫方面,遵循最佳實踐和測試驅動開發。
- 精通大數據存儲格式(Apache Parquet,ORC),了解優化策略。
- 扎實的SQL技能。
- 有數據建模經驗:
- 關聯、維度和NoSQL建模。
- 具備AWS服務的實操經驗,包括:
- 必需:Glue、IAM、Lambda、DynamoDB、Step Functions、S3、CloudFormation或CDK。
- 加分項:Athena、Kinesis、MSK、MWAA、SQS。
- 熟悉AWS上的IaC(CloudFormation或CDK)。
- 具有使用Apache Airflow或Dagster協調數據管道的經驗。
- 加分項:使用Kinesis或Kafka進行數據流處理;具備Apache Spark經驗;客戶面對及團隊領導經驗。
關鍵能力:
- 能夠獨立工作或團隊合作。
- 注重細節,具強烈的質量意識。
- 具分析能力和批判性思維。
- 良好的組織和時間管理能力。
- 強烈的客戶導向。
- 優秀的溝通技巧,包括書面和口頭交流。
數據建模ETL流程SQLPython數據倉儲大數據技術雲計算數據管道自動化NoSQL數據質量保證