Data Engineer Java, Kafka, Spark, Flink, Hadoop

Top 3 Reasons To Join Us Môi trường làm việc chuyên nghiệp, trẻ trung Tham gia các chương trình đào tạo không giới hạn Lương hấp dẫn/thưởng tháng 13 và các khoản khác The Job

• Xây dựng và triển khai các pipeline xử lý dữ liệu quy mô lớn từ nhiều nguồn khác nhau.
• Phối hợp với các bộ phận liên quan để thu thập, làm sạch và tích hợp dữ liệu nhằm phục vụ cho các hệ thống trạm dữ liệu trung tâm (data hub), phân tích và báo cáo.
• Thiết kế, triển khai và tối ưu các giải pháp dữ liệu dựa trên nền tảng Big Data (Hadoop) để đảm bảo hiệu suất và độ tin cậy cao.
• Sử dụng các công nghệ như Apache Spark, Kafka và Flink để xử lý dữ liệu theo thời gian thực cũng như xử lý dữ liệu theo lô.
• Phát triển, kiểm thử và bảo trì các quy trình ETL, đảm bảo dữ liệu được cập nhật và phân phối chính xác tới các hệ thống downstream.
• Xây dựng, tối ưu hóa và vận hành các mô hình dữ liệu cho các kiến trúc Data Warehouse, Data Lake, Data Lakehouse.
• Đảm bảo các tiêu chuẩn bảo mật, chất lượng dữ liệu và tuân thủ các quy định về quản lý dữ liệu.

Your Skills and Experience

a) Kỹ năng chuyên môn:

• Kinh nghiệm lập trình và xử lý dữ liệu bằng Apache Spark, với khả năng tối ưu hóa hiệu suất xử lý dữ liệu.
• Thành thạo các công nghệ Big Data như Hadoop, HDFS, MapReduce, YARN.
• Kinh nghiệm làm việc với các framework xử lý dữ liệu phân tán như Spark, Kafka và Flink.
• Quản lý và triển khai các hệ thống truyền tải dữ liệu sử dụng Kafka và Flink.
• Sử dụng thành thạo SQL cho các tác vụ trích xuất, phân tích và xử lý dữ liệu.
• Có kinh nghiệm hoặc hiểu biết về các bài toán Khoa học dữ liệu như Bài toán Phân loại (Classification), Dự báo xu hướng (Trend Prediction/Forecasting) là điểm cộng.

b) Kỹ năng lập trình:

• Thành thạo ít nhất một ngôn ngữ lập trình như Python hoặc Java.
• Kinh nghiệm lập trình SQL và làm việc với các hệ quản trị cơ sở dữ liệu quan hệ và phi quan hệ.

c) Kỹ năng thiết kế và triển khai hệ thống:

• Khả năng thiết kế và triển khai các hệ thống xử lý dữ liệu quy mô lớn, có khả năng mở rộng và chịu lỗi.
• Khả năng thiết kế và xử lý các luồng dữ liệu phục vụ trực tiếp cho các bài toán ML/AI (MLOps), đảm bảo tính sẵn sàng của dữ liệu cho việc huấn luyện và triển khai mô hình.
• Kinh nghiệm làm việc với các công cụ CI/CD và các nền tảng đám mây như AWS, Azure hoặc GCP là một lợi thế.

d) Kỹ năng phân tích và giải quyết vấn đề:

• Khả năng phân tích các yêu cầu về dữ liệu và đưa ra các giải pháp kỹ thuật phù hợp.
• Khả năng giải quyết các vấn đề kỹ thuật phức tạp một cách hiệu quả.

e) Kỹ năng giao tiếp và làm việc nhóm:

• Khả năng giao tiếp rõ ràng và hiệu quả với các thành viên trong đội ngũ và các bên liên quan.
• Khả năng làm việc nhóm tốt và sẵn sàng chia sẻ kiến thức và kinh nghiệm.

f) Kỹ năng khác

• Các chứng chỉ và khóa đào tạo tương ứng là điểm cộng
• Tốt nghiệp Khoa học máy tính, Kỹ sư phần mềm, Hệ thống thống thông tin quản lý hoặc tương đương.
• Kinh nghiệm làm việc với các công cụ quản lý luồng công việc (workflow orchestration) như Airflow hoặc NiFi.
• Kinh nghiệm làm việc với các công cụ giám sát và cảnh báo hệ thống như Prometheus, ELK hoặc Grafana.
• Kiến thức về các phương pháp luận Agile/Scrum.

Why You'll Love Working Here

• Lương hấp dẫn + thưởng tháng lương 13 và các khoản thưởng lễ khác trong năm. (Mức lương tùy thuộc vào năng lực và kinh nghiệm thể hiện khi phỏng vấn)
• Địa điểm làm việc: Tổng công ty Tân Cảng Sài Gòn (Saigon NewPort Corporation), Cổng B Cảng Cát Lái, Phường Cát Lái, TP.HCM
• Ðược hưởng đầy đủ các chế độ phúc lợi xã hội như: BHXH, BHYT, BH thất nghiệp, Lễ tết, Team buiding, Nghỉ mát hàng năm…
• Môi trường làm việc: Chuyên nghiệp, trẻ trung, năng động, sáng tạo, có nhiều cơ hội khẳng định bản thân và thăng tiến trong nghề nghiệp
• Thời gian làm việc: 7h30 - 17h00 các ngày từ thứ 2 đến thứ 6 hàng tuần.
• Ngày nghỉ: Thứ 7, Chủ nhật và các ngày nghỉ lễ khác.
• Quyền lợi về đào tạo: được tham gia các chương trình đào tạo không giới hạn của SNP;

Benefits

• Lương hấp dẫn + thưởng tháng lương 13 và các khoản thưởng lễ khác trong năm. (Mức lương tùy thuộc vào năng lực và kinh nghiệm thể hiện khi phỏng vấn)
• Địa điểm làm việc: Tổng công ty Tân Cảng Sài Gòn (Saigon NewPort Corporation), Cổng B Cảng Cát Lái, Phường Cát Lái, TP.HCM
• Ðược hưởng đầy đủ các chế độ phúc lợi xã hội như: BHXH, BHYT, BH thất nghiệp, Lễ tết, Team buiding, Nghỉ mát hàng năm…
• Môi trường làm việc: Chuyên nghiệp, trẻ trung, năng động, sáng tạo, có nhiều cơ hội khẳng định bản thân và thăng tiến trong nghề nghiệp
• Thời gian làm việc: 7h30 - 17h00 các ngày từ thứ 2 đến thứ 6 hàng tuần.
• Ngày nghỉ: Thứ 7, Chủ nhật và các ngày nghỉ lễ khác.
• Quyền lợi về đào tạo: được tham gia các chương trình đào tạo không giới hạn của SNP;