Data Engineer (Hadoop)

A global and one of the world’s largest Insurance Service provide is seeking an experienced Data Engineer (Hadoop) to join its Data Management Team. You must have good experience of working with Python or Java, and large-scale data analytics with understanding of distributed computing systems.Responsibilities:- Collaborate with users and project team on requirements and expectations- Analyze business requirements, create proper data solutions that meets functional and non-functional requirements- Design and implement highly scalable and robust data pipelines in Python/Java for processing of extreme large amount of data- Create and maintain reusable frameworks for data ingestion, validation, normalization, and transformation- Create scripts for test automation, CI/CD, data migrations, data validations- Provide technical support for incident recoveryRequired Skills:- Minimum 4~5 years of working experience as a developer or data engineer- Strong programming skills and software development experience in Java or Python- Deep understanding of distributed systems (Hadoop) and its optimization- Experience in public cloud technologies, preferably Azure- Good knowledge of Oracle database, MS-SQL Server, Linux, networking- Proficient in SQL, shell scripting, git, unit testing, CI/CD tools- Understanding of design principles, coding standards and best practices- Strong learning ability and problem-solving skills- Excellent communication, presentation, and interpersonal skillsWhy should you apply:- Long-term and stable project in a global insurance leader- Hybrid work setup with a collaborative, international team- Excellent exposure to enterprise-scale Azure cloud and data platforms- Career growth opportunities within a diverse and inclusive environmentCompany Details:A US based world’s leading insurance providers, offering a broad range of life, health, and retirement solutions to individuals, families, and businesses. The company is heavily invested in digital transformation, utilizing advanced technologies like cloud computing, data analytics, AI, and cybersecurity to enhance customer experience and streamline operations. As part of its values, it has a strong focus on creating a diverse environment, and in particular on the appointment of women in high-level position.Working Hours: 9:00 - 18:00 (Mon-Fri)Working Style: 4 days’ work in office, and 1 day work from home (more WFH days is possible)Holidays: Saturday, Sunday, National Holidays, Year-end and New Year Holidays, Paid HolidaysServices/Benefits: Transportation expenses up to 20,000 yen per month, plus Paid leave, plus social insurance (health insurance, welfare pension, and work-related accident insurance), Periodic health examination, and Employment insurancePT490612＊＊＊＊＊＊＊＊＊スキルハウスについてすべての転職を価値あるものに20年にわたる日本市場での研鑽と情熱スキルハウスでは、社員一同が求職者の皆様のキャリアを長期的にサポートしていきたい、という熱い情熱を持っています。現在のご要望にあったポジションだけでなく、皆様のキャリアやその後のプランを一緒に作り上げましょう。【日本のIT人材紹介におけるリーディングカンパニー 】スキルハウスは、ITプロフェッショナルに最適な仕事を紹介し、クライアントには最適なIT人材を提供することに特化した、日本有数のIT人材紹介会社です。大手外資系企業をはじめ、スタートアップ企業、グローバル企業など、その数は500社以上。もちろん、職場環境も多岐にわたります。英語、日本語、バイリンガルの職場環境でのポジションをご紹介しています！【事業・サービス内容】- 転職市場を知り尽くしたプロのアドバイス、市場動向とキャリアの展望- あなたのプロフィールと現在の市場に基づき、キャリアの方向性・将来可能性の提案とアドバイス- 履歴書の書き方、面接準備のサポートとアドバイスの提供- 次のキャリアステップのための正しい選択をするため、市場内の役割と企業の紹介と議論- 給与交渉【内定までの流れ】STEP1：エントリー掲載している求人情報またはスカウトよりエントリーをお願いいたします。エントリー後、担当アドバイザーよりメールまたは電話にてご連絡いたします。STEP2：面談あなたの希望する企業や職種などを個別カウンセリングでお伺いします。その上で、あなたに合った求人の選定に移ります。※面談は主にZoomまたは電話で対応いたします。※※面談は日本語の他、英語もお選びいただけます。STEP3：求人紹介あなたに合った求人をご案内します。STEP4：応募書類の準備あなたのご経験が採用ご担当者様に伝わるように、応募書類の作成をサポートいたします。STEP5：選考・面接あなたを企業にご推薦いたします。面接日時の調整もスキルハウスにお任せください。STEP6：内定・入社おめでとうございます！こちらでご応募頂くか、以下にご連絡下さい:ITjobs@skillhouse.co.jpスキルハウス・スタッフィング・ソリューションズ株式会社東京都港区虎ノ門3-8-27巴町アネックス2号館www.skillhouse.co.jp