Dieses Jobangebot ist archiviert und steht nicht mehr zur Verfügung.
Vakante Jobangebote finden Sie unter Projekte.
Vakante Jobangebote finden Sie unter Projekte.
Projektbeschreibung
Unser Kunde betreibt eines führendes deutschsprachiges Portal im Bereich Touristik und sucht zum Ausbau seines Standortes in München oder im Raum Konstanz Sie als Big Data Engineer (w/m) in unbefristeter Festanstellung.
Ihre Aufgaben:
*Konzeption, Umsetzung und Pflege von Hadoop-Lösungen für die Ereignis-Rohdatenerfassung
*Unterstützung interner Kunden bei ETL-relevanten strategischen und Ad-hoc-Datenlösungen
*Optimierung der Hadoop-Infrastruktur, um die Geschwindigkeit und Zuverlässigkeit von Lösungen für die Verarbeitung eines täglichen Durchsatzes von Milliarden von Datensätzen zu verbessern
*Enge Zusammenarbeit mit Data Scientists und Data Research Engineers bei der Erstellung persönlicher Advertising Service-Backends
*Ergründung und Entwicklung von innovativen über den Hadoop-Stack hinausgehenden datengesteuerten Ansätzen (Hbase, Hive, Pig, Storm, Impala etc.)
*Aufbereitung und Darstellung analytischer Daten und GröÃen
*Durchführung von Datenextraktion und Datenaggregation, sowie qualitative Prüfung groÃer Datenmengen aus diversen Quellen für die Konzeption und Ãberwachung von Tests und Programmen
*Nutzung der modernsten und relevantesten Technologie für die primäre Berichterstattung sowie für Visualisierungsschnittstellen
Ihr Profil:
*Die Grundlage Ihres Erfolges ist Ihre akademische Ausbildung in Informatik oder einem verwandten Studiengang
*Sie arbeiten seit mindestens zwei Jahren mit Apache Hadoop-Plattformen und -Tools, darunter Hadoop, Hive, Hbase oder Pig
*Sie kennen sich mit objektorientierten Sprachen aus (vorzugsweise Java/Scala)
*Die Skriptsprachen Python, Perl bzw. Shell Scripting beherrschen Sie
*SQL ist Ihnen vertraut
*Sie konnten bereits Erfahrungen mit ETL-Projekten sammeln. Es ist definitiv ein Plus, wenn Sie sich mit Skalierung auskennen, denn wir verarbeiten tagtäglich Milliarden von Ereignis-Rohdaten
*In der Systemverwaltung oder im operativen Betrieb erworbenes Know-how ist von Vorteil für diese Stelle
*Idealerweise verstehen Sie etwas von der Instrumentierung, Erfassung und Rückverfolgung von Daten
Ihre Aufgaben:
*Konzeption, Umsetzung und Pflege von Hadoop-Lösungen für die Ereignis-Rohdatenerfassung
*Unterstützung interner Kunden bei ETL-relevanten strategischen und Ad-hoc-Datenlösungen
*Optimierung der Hadoop-Infrastruktur, um die Geschwindigkeit und Zuverlässigkeit von Lösungen für die Verarbeitung eines täglichen Durchsatzes von Milliarden von Datensätzen zu verbessern
*Enge Zusammenarbeit mit Data Scientists und Data Research Engineers bei der Erstellung persönlicher Advertising Service-Backends
*Ergründung und Entwicklung von innovativen über den Hadoop-Stack hinausgehenden datengesteuerten Ansätzen (Hbase, Hive, Pig, Storm, Impala etc.)
*Aufbereitung und Darstellung analytischer Daten und GröÃen
*Durchführung von Datenextraktion und Datenaggregation, sowie qualitative Prüfung groÃer Datenmengen aus diversen Quellen für die Konzeption und Ãberwachung von Tests und Programmen
*Nutzung der modernsten und relevantesten Technologie für die primäre Berichterstattung sowie für Visualisierungsschnittstellen
Ihr Profil:
*Die Grundlage Ihres Erfolges ist Ihre akademische Ausbildung in Informatik oder einem verwandten Studiengang
*Sie arbeiten seit mindestens zwei Jahren mit Apache Hadoop-Plattformen und -Tools, darunter Hadoop, Hive, Hbase oder Pig
*Sie kennen sich mit objektorientierten Sprachen aus (vorzugsweise Java/Scala)
*Die Skriptsprachen Python, Perl bzw. Shell Scripting beherrschen Sie
*SQL ist Ihnen vertraut
*Sie konnten bereits Erfahrungen mit ETL-Projekten sammeln. Es ist definitiv ein Plus, wenn Sie sich mit Skalierung auskennen, denn wir verarbeiten tagtäglich Milliarden von Ereignis-Rohdaten
*In der Systemverwaltung oder im operativen Betrieb erworbenes Know-how ist von Vorteil für diese Stelle
*Idealerweise verstehen Sie etwas von der Instrumentierung, Erfassung und Rückverfolgung von Daten
Projektdetails
-
Einsatzort:
München, Deutschland
-
Projektbeginn:
asap
-
Projektdauer:
Keine Angabe
- Vertragsart:
-
Berufserfahrung:
Keine Angabe
Geforderte Qualifikationen
-
Kategorie:
IT Entwicklung, Ingenieurwesen/Technik