Bỏ qua tới nội dungCVCC tích hợp dữ liệu (Senior Data Engineer)
Ha NoiĐăng
- Data Engineer
- Senior
- 3-5 YoE
- Ha Noi
Skills bắt buộc
- Sql
- Rdbms
- Nosql
- Python
- Spark
- Airflow
- Dbt
- Ibm Datastage
- +9
Mô tả công việc
- Thiết kế và phát triển và tối ưu các ETL/ELT pipelines (batch & streaming)
- Xây dựng, phối hợp vận hành và tối ưu hệ thống dữ liệu trên:
- Data Lake / Data Warehouse / Data Mart
- Thiết kế data model (Star schema, ODS, DWH)
- Tối ưu hiệu năng xử lý dữ liệu (Spark tuning, query optimization)
- Triển khai DataOps:
- CI/CD cho data pipeline
- Monitoring, data quality
- Hỗ trợ xử lý sự cố dữ liệu mức độ phức tạp cao
- Triển khai các luồng tích hợp dữ liệu realtime, near realtime sử dụng các công cụ Streaming data, CDC như Kafka, Flink, IBM Eventstream, Kinesis, ODI…
- Review code, kèm cặp hướng dẫn các Data Engineer khác
- Xử lý dữ liệu lớn từ nhiều nguồn khác nhau on-premise & on-cloud
- Định nghĩa tiêu chuẩn kỹ thuật và best practices các bài toán tích hợp, chuyển giao vận hành dữ liệu
Yêu cầu công việc
- 3-5 năm kinh nghiệm Data Engineering
- Thành thạo:
- SQL nâng cao
- RDBMS & NoSQL
- Python hoặc ngôn ngữ tương đương
- Kinh nghiệm với:
- Đưa AI vào áp dụng, cải tiến hiệu suất công việc
- Spark / Airflow / dbt / ETL tools (ibm datastage,…)
- Xử lý với dữ liệu lớn
- Các công nghệ, công cụ về ETL batch & xử lý dữ liệu realtime, streaming/CDC data
- Kafka, Flink, NIFI, IBM Eventstream, Kinesis (là lợi thế)
- Hiểu rõ:
- Data modeling
- Data Warehouse / Data Lake
- Ưu tiên:
- AWS (S3, Glue, Redshift, Athena)
- DataOps / CI-CD
Ưu tiên các ứng viên
- Kinh nghiệm trong lĩnh vực Data Integration / Data Engineering,
- Kinh nghiệm xây dựng Data Platform end-to-end
- Kinh nghiệm trong ngành tài chính / ngân hàng
Hãy tải CV lên lại để hệ thống có thể chấm điểm. Nguồn: careers Pvcombank
