Introduksjon til Big Data med Hadoop

22 Nov 2016

2015.11.22 - 2015.11.27 18t «Introduksjon til Big Data med Hadoop» ITFakultetet.no Student (Hadoop)

Tommy deltok i kurs med labøvelser om Hadoop. Url: http://itfakultetet.no/course/info.php?id=6

Kurset tar utgangspunkt i at man ikke har noen erfaring med Hadoop fra før, og starter med installasjon av programvaren med Apache Ambari. Vi gjennomgår HDFS, Yarn, Hive, HBase, Pig Flume, Spark, Sqoop og Ranger., og ser også på Hue og Zeppelin. I løpet av kurset gjennomgår vi praktiske øvelser bl.a. med HDFS, Sqoop, Flume, Hive, HBase, Pig og Zeppelin.

Kursemner:

  • Installasjon og konfigurering av en Hadoop-klynge med Apache Ambari
  • Administrasjon og provisjonering gjennom Ambari
  • Konsepter og begreper innen distribuerte systemer
  • Grunnleggende filoperasjoner med HDFS
  • Dataintegrasjon og migrering med Sqoop og Flume
  • Datavarehus med Hive og HiveQL
  • NoSQL-Database med Hbase
  • Data Wrangling med Pig og Pig Latin
  • Dataanalyse med Spark
  • Brukergrensesnitt med Hue (Hadoop User Experience) og Zeppelin

Teknologi: Hadoop, MapReduce, HDFS, Yarn, Hive, HBase, Pig, Spark, Sqoop, Ranger, Hue og Zeppelin.

Posts