Zum Inhalt springen

Datei:Hadoop and Beyond. An overview of Analytics infrastructure.webm

Seiteninhalte werden in anderen Sprachen nicht unterstützt.
Zur Beschreibungsseite auf Commons
aus Wikipedia, der freien Enzyklopädie

Hadoop_and_Beyond._An_overview_of_Analytics_infrastructure.webm (WebM-Audio-/Video-Datei, VP8/Vorbis, Länge: 23 min 6 s, 640×360 Pixel, 179 kbps insgesamt, Dateigröße: 29,63 MB)

Diese Datei und die Informationen unter dem roten Trennstrich werden aus dem zentralen Medienarchiv Wikimedia Commons eingebunden.

Zur Beschreibungsseite auf Commons


Beschreibung

Beschreibung
English: In this tech talk we will be presenting the analytics infrastructure that we have recently rolled out in production. By now probably everybody knows that wikimedia hosts an instance of hadoop from which we are going to extract pageview data in the near future. But .. how exactly does the data get there? We will go over the path that webrequest log data takes from varnish to kafka (a distributed log buffer) to hadoop and the challenges of deploying this java-based infrastructure in production. We will also talk about how can we query the data with hive, an SQL-like interface. How can you set up this stack on vagrant to play with and, last but not least, how we used hive recently to provide GLAM folks with image view stats: Commons:GLAMwiki Toolset Project/NARA analytics pilot
Datum
Quelle YouTube: https://www.youtube.com/watch?v=tx1pagZOsiM – Archivierte Versionen ansehen/speichern auf archive.org und archive.today
Urheber mw:User:Rfarrand (WMF)

Lizenz

Dieses Video, dieser Screenshot oder dieser Audio-Auszug wurde ursprünglich auf YouTube unter einer CC-Lizenz hochgeladen.
Deren Website schreibt dazu: „Creator haben die Möglichkeit, ihre Videos mit einer Creative-Commons-Lizenz vom Typ CC BY zu versehen.“
An Hochladende: Ein Link (URL) zur Originaldatei und zum Urheber muss, sofern verfügbar, angegeben werden.
w:de:Creative Commons
Namensnennung
Diese Datei ist unter der Creative-Commons-Lizenz „Namensnennung 3.0 nicht portiert“ lizenziert.
Dieses Werk darf von dir
  • verbreitet werden – vervielfältigt, verbreitet und öffentlich zugänglich gemacht werden
  • neu zusammengestellt werden – abgewandelt und bearbeitet werden
Zu den folgenden Bedingungen:
  • Namensnennung – Du musst angemessene Urheber- und Rechteangaben machen, einen Link zur Lizenz beifügen und angeben, ob Änderungen vorgenommen wurden. Diese Angaben dürfen in jeder angemessenen Art und Weise gemacht werden, allerdings nicht so, dass der Eindruck entsteht, der Lizenzgeber unterstütze gerade dich oder deine Nutzung besonders.
Diese Datei, die ursprünglich auf https://www.youtube.com/watch?v=tx1pagZOsiM veröffentlicht wurde, wurde am 18. Juli 2016 vom vertrauenswürdigen Benutzer INeverCry geprüft, welcher bestätigt, dass die Datei am angegebenen Tag unter der genannten Lizenz verfügbar war.

Kurzbeschreibungen

Ergänze eine einzeilige Erklärung, was diese Datei darstellt.

In dieser Datei abgebildete Objekte

Motiv

Dateiversionen

Klicke auf einen Zeitpunkt, um diese Version zu laden.

Version vomVorschaubildMaßeBenutzerKommentar
aktuell01:23, 5. Nov. 201523 min 6 s, 640 × 360 (29,63 MB)LegoktmUser created page with UploadWizard

Keine Seiten verwenden diese Datei.