Kỹ năng


Mô tả công việc

Build software according to the requirements of the Company and the Customer.
Research and bring research results as required
Perform other duties as assigned by the head of department

Yêu cầu công việc

Apache Airflow Skills:
Understanding of Airflow's core concepts like DAGS, Operators, Hooks, and Executors. Ability to write and maintain DAGS.
Experience with the Airflow UI to monitor and troubleshoot workflows.
Knowledge of Airflow plugins and extensions.
Familiarity with deployment and scaling of Airflow in production environments. AWS Glue Skills:
Proficiency with Glue ETL jobs, using both the visual interface and scripting.
Knowledge of Glue Data Catalog as a centralized metadata repository.
Familiarity with Glue Crawlers and how to automate data discovery. Ability to optimize Glue job performance.
Experience with Glue Studio for ETL job design.
Programming and Scripting:
Python is crucial, as it's the primary language for Airflow DAGS and can also be used in Glue scripts.
Familiarity with PySpark, since AWS Glue uses Apache Spark for processing. Cloud & Infrastructure:
Deep understanding of AWS services, especially those related to data storage (e.g., S3) and computation (e.g., EC2, Lambda).
Ability to set up and manage AWS IAM roles and permissions for Glue and related services.
Knowledge of cloud infrastructure best practices for security, cost optimization, and performance.
Databases & Data Warehouses:
Experience with source and target databases that may be integrated with Glue and Airflow. This includes relational databases like RDS, Aurora, and data warehouses like Amazon Redshift.
Data Modeling & ETL Best Practices:
Knowledge of data normalization, denormalization, star schema, and snowflake schema designs.
Best practices for ETL (Extract, Transform, Load) processes to ensure data integrity and performance.
Performance Tuning:
Ability to optimize Airflow and Glue for better performance, including partitioning strategies, parallel processing, and efficient ETL patterns.
Monitoring & Logging:
Familiarity with tools and services for monitoring the health of Airflow and Glue jobs, such as CloudWatch for AWS Glue.
Ability to debug and troubleshoot failed runs or performance bottlenecks.
Version Control & CI/CD:
Experience with version control systems, primarily Git.
Knowledge of CI/CD best practices, and tools like Jenkins or AWS CodePipeline, to automate the deployment of Airflow DAGS and Glue

Thời gian làm việc

Trong tuần: Từ thứ 2 - thứ 6

Trong ngày: Từ 08:30 giờ - 18:00 giờ


Quyền lợi ứng viên

- No need to try a job, get an official job with 100% salary
- Opportunities onsite and working with big customers, advanced technology, self-development...
- The opportunity to work in groups with many leading experts in the field of domestic and international IT.
- Opportunity to implement ambitious projects in many countries, exposure to the latest technologies and learn from good colleagues.
- Working in a young, vibrant, modern and multicultural environment; Communication activities and events on holidays take place regularly.
- Opportunity for advancement based on ability with corresponding increase in rank and salary increase.
- Have the right to participate in soft skills training courses (logical thinking, creative thinking, communication skills, project management skills, negotiation skills…) and Japanese language classes.
- And many other attractive benefits...

Địa chỉ làm việc

Remote

Tiền thưởng

Đăng nhập để xem

Mức lương

30-50 triệu

Thông tin

  • Kinh nghiệm Trên 5 năm
  • Trình độ Không yêu cầu
  • Vị trí Senior
  • Hình thức Full-time
  • Hạn nộp hồ sơ 2023-12-08
  • Số lượng 1 người
  • Phỏng vấn 1 vòng
Hỗ trợ ứng tuyển
Hr Admin

Nguyễn Thanh Thảo

Hr

Đào Thị Thu Phương

Báo cáo lỗi

Sao chép đường dẫn để chia sẻ:


Việc làm cùng kỹ năng

웹 개발자 (Python/NodeJS/PHP)

  • 1-1 triệu
  • Seoul
고객의 웹 프로젝트 개발에 참여. 요구 사항 분석, 시스템 설계, 데이터베이스 설계, 기능 개발에 참여. Agile/Scrum 모델에 따라 작업을 수행하며, 계획 수립, 실행, 관리 및 각 Sprint에 대한 작업 보고. 팀원들에게 교육 지원, 지식 공유, 코드 리뷰 수행. 팀 빌딩에 참여하고, 팀 관리(경험이 있을 경우). 프로젝트에 적용할 새로운 기술을 연구하고 방향을 설정.

Tiền thưởng

Đăng nhập để xem

Middle Fullstack Remote

  • 30-40 triệu
  • Hà Nội
evelop and maintain the frontend using ReactJS, ensuring responsive and high-performance user interfaces. Build backend services and APIs using Golang and Python for scalability and efficiency. Work with databases (SQL/NoSQL), integrate third-party APIs, and ensure the application architecture is modular and maintainable. Collaborate with product managers, UX/UI designers, and other developers to create seamless and effective solutions. Troubleshoot, debug, and optimize existing systems and code. Write clean, maintainable, and well-documented code. Ensure cross-platform and cross-browser compatibility. Participate in code reviews and contribute to the improvement of development processes.

Tiền thưởng

Đăng nhập để xem

Chuyên Viên Quản Trị Hệ Thống Google Workspace

  • 10-20 triệu
  • Hà Nội
resolve đang tìm kiếm một chuyên gia có tay nghề cao về các giải pháp Google Cloud/Workspace, Cơ sở hạ tầng CNTT để gia nhập đội ngũ CNTT năng động của chúng tôi. Trong vai trò này, bạn sẽ chịu trách nhiệm quản trị, tối ưu hóa và hỗ trợ môi trường Google Workspace của chúng tôi. Bạn sẽ đóng một vai trò quan trọng trong việc đảm bảo cung cấp các yêu cầu của khách hàng, lập kế hoạch, triển khai và hỗ trợ triển khai Google Workspace liền mạch, tối ưu hóa quy trình làm việc, khắc phục sự cố và cung cấp chuyên môn kỹ thuật cho khách hàng và đối tác. Trách nhiệm chính Trách nhiệm: Hỗ trợ trước bán hàng: • Cộng tác với các nhóm bán hàng để hiểu nhu cầu của khách hàng và đề xuất các giải pháp Google Workspace phù hợp. • Hỗ trợ các bài thuyết trình kỹ thuật, demo và chứng minh khái niệm cho khách hàng tiềm năng. • Giải quyết các truy vấn và mối quan tâm kỹ thuật từ khách hàng tiềm năng. Triển khai & Phát triển: • Dẫn dắt hoặc hỗ trợ các dự án triển khai và di chuyển Google Cloud/Workspace từ các nền tảng tại chỗ hoặc các nền tảng đám mây khác • Phát triển các cấu hình tùy chỉnh, chính sách bảo mật và kiểm soát truy cập • Cộng tác với các nhóm CNTT để tích hợp Google Cloud/Workspace với các ứng dụng của bên thứ ba Hỗ trợ sau bán hàng & Thành công của khách hàng: • Phát triển và duy trì tài liệu triển khai và di chuyển cũng như các bài viết cơ sở kiến thức. • Đào tạo người dùng cuối và quản trị viên về các công cụ và tính năng của Google Cloud/Workspace. • Đóng vai trò là cố vấn kỹ thuật, thông báo cho khách hàng về các tính năng và phương pháp hay nhất mới của Google Cloud/Workspace. • Hỗ trợ khách hàng về quản lý giấy phép, gia hạn và các cơ hội mở rộng

Tiền thưởng

Đăng nhập để xem