Cloudera-Entwickler (m/w/d)

Deine AufgabeDies ist eine Senior Cloudera Developer (Data Engineer) Rolle, die 6 bis 10 Jahre Erfahrung erfordert. Diese Position ist in Pune angesiedelt.AufgabenEntwerfen, entwickeln und implementieren von Datenlösungen mit Cloudera-Technologien wie Hadoop, Spark und HiveZusammenarbeit mit Data Engineers zur Optimierung von Datenpipelines und DatenverarbeitungsworkflowsEnge Zusammenarbeit mit Datenanalysten und Data Scientists, um Datenqualität und -integrität sicherzustellenFehlersuche und Lösung von Problemen mit Datenverarbeitungs- und DatenspeichersystemenAuf dem neuesten Stand bleiben über aktuelle Trends und Best Practices in der Cloudera-EntwicklungTeilnahme an Code-Reviews und Feedback an Teammitglieder gebenDurchführung von Extract, Transform und Load (ETL) Prozessen mit SparkIntegration von Spark Streaming mit anderen Technologien wie KafkaBereitstellung und Verwaltung von Spark-Anwendungen auf einem Hadoop-Cluster oder auf GCP DataprocDein ProfilWir suchen einen Senior Cloudera Developer (Data Engineer) mit umfangreicher Erfahrung in Spark, Hadoop-Ökosystem und GCP-Diensten zur Gestaltung und Implementierung von Datenlösungen.Muss-Kriterien6 bis 10 Jahre ErfahrungKompetenz in der Arbeit mit SparkVerständnis der Spark-Architektur und Fehlertoleranz-MechanismenKompetenz in der Verwendung von Spark DataFrames und Spark SQL für die Abfrage strukturierter DatenFähigkeiten bei der Durchführung von Extract Transform and Load (ETL)-Prozessen mit SparkFundierte Kenntnisse in PythonBachelor-Abschluss in Informatik, Informationstechnologie oder einem verwandten BereichNachgewiesene Erfahrung als Cloudera Developer oder in einer ähnlichen RolleSolides Verständnis von Cloudera-Technologien wie Hadoop, Spark und HiveErfahrung mit Datenmodellierung, Data Warehousing und DatenintegrationAusgeprägte Programmierkenntnisse in Java, Scala oder PythonAusgezeichnete ProblemlösungsfähigkeitenHervorragende KommunikationsfähigkeitenFähigkeit, sowohl eigenständig als auch im Team zu arbeitenWünschenswertErfahrung in der Optimierung von Spark-AusführungsplänenErfahrung mit der Integration von Spark Streaming mit anderen Technologien wie KafkaVertrautheit mit dem Hadoop-Ökosystem einschließlich Tools wie HDFS, Hive, Cloudera-StackErfahrung mit der Bereitstellung und Verwaltung von Spark-Anwendungen auf einem Hadoop-Cluster oder auf GCP DataprocErfahrung mit Java-ProgrammierungKenntnisse in DevOps-Tools und -Praktiken (CI/CD, Docker)Praktische Erfahrung mit GCP-Diensten (Dataproc, Cloud Function, Cloud Run, Pub Sub, BigQuery)Über unsT-Systems Information and Communication Technology India Private Limited (T-Systems ICT India Pvt. Ltd.) ist stolzer Empfänger der prestigeträchtigen Great Place To Work® Certification™.Als hundertprozentige Tochtergesellschaft der T-Systems International GmbH ist T-Systems India an den Standorten Pune, Bangalore und Nagpur tätig und verfügt über ein engagiertes Team von über 3500 Mitarbeitern, die Dienstleistungen für Konzernkunden erbringen.T-Systems bietet integrierte End-to-End-IT-Lösungen und treibt die digitale Transformation von Unternehmen in allen Branchen voran, darunter:AutomobilindustrieFertigungLogistik und TransportGesundheitswesenÖffentlicher SektorT-Systems entwickelt vertikale, unternehmensspezifische Softwarelösungen für diese Sektoren.T-Systems International GmbH ist ein Unternehmen für Informationstechnologie und digitale Transformation mit Präsenz in über 20 Ländern und einem Umsatz von mehr als 4 Milliarden Euro. T-Systems ist ein weltweit führender Anbieter von digitalen Dienstleistungen und verfügt über mehr als 20 Jahre Erfahrung in der Transformation und dem Management von IT-Systemen.Als Tochtergesellschaft der Deutschen Telekom und Marktführer in Deutschland bietet T-Systems International sichere, integrierte Informationstechnologie und digitale Lösungen aus einer Hand.