Big Data Engineering mit Spark, HBase und Solr

Immer mehr Unternehmen wollen das Verhalten ihrer Kunden verstehen und vorhersagen können, damit beispielsweise zum richtigen Zeitpunkt das richtige Angebot unterbreitet werden kann. Dafür müssen große Datenmengen mit Hilfe einer Big-Data-Lösung gesammelt, erfasst und analysiert werden. Immer mehr Unternehmen setzen dabei auf Spark.

Im Vortrag wird eine Big-Data-Lösung vorgestellt, die mehrere hundert Milliarden Kundenaktionen verarbeiten und analysieren kann. Neben Spark werden dabei auch HBase und Solr als Technologien genutzt. Das abgestimmte Zusammenspiel dieser Technologien wird an mehreren Beispielen (Verhaltenssegmentierung, Zeitreihenanalyse, prädiktive Analytik etc.) demonstriert.

Skills
Teilnehmer sollten ein allgemeines Verständnis für die Herausforderungen im Big-Data-Umfeld mitbringen sowie über Grundkenntnisse in Big-Data-Technologien, z.B. Spark, verfügen. Expertenkenntnisse in Spark, HBase oder Solr werden nicht benötigt.

Lernziele
Der Vortrag gibt einen Einblick in die Technologien Spark, HBase und Solr. Dabei werden die Grenzen der einzelnen Technologien aufgezeigt sowie die Herausforderungen demonstriert die sich aus dem Zusammenspiel der verschiedenen Technologien ergeben.

// Referent

// Alexander Albrecht

ist Mitgründer von bakdata, einem unabhängigen IT-Dienstleister für die Planung, Konzeption und Realisierung von maßgeschneiderten Big-Data-Softwarelösungen. Sein Know-how hat er durch zahlreiche Industrie- und Forschungsprojekte erworben. Aktuell realisiert er u.a. eine Big-Data-Lösung für einen der weltweit größten Online-Händler.