Destacat »

14 Novembre 2019 – 17:00

Les candidatures poden presentar-se per mitjà de formulari web fins al 8 de gener de 2020.
El 17 de febrer de 2020 l’Auditori de Barcelona (C/Lepant, 150) tornarà a acollir la Nit de les Telecomunicacions i la Informàtica, l’esdeveniment de referència del …

Read the full story »
Col·legi

el Col·legi, informació rellevant sobre el COEINF, activitats, relacions i varis

Formació

formació continuada i orientació professional, convenis de formació amb altres entitats

Opinió

Articles d’opinió, de divulgació o de propostes tecnològiques dels col·legiats, adherits, associats o col·laboradors d’entitats afins al COEINF

Esdeveniments

tots els esdeveniments rellevants del sector TIC

Professió

món laboral, emprenedors, enginyers en informàtica, entrevistes, certificacions, deontologia, carreres professionals, …

Home » Esdeveniments

Barcelona Spark Meetup: Databricks comes to Barcelona

Submitted by on 14 Octubre 2014 – 9:00No Comment
Share Button

Barcelona Spark organitza un meetup amb enginyers arribats d’USA per explicar de primera mà el que es cou sobre Spark a l’empresa Databricks, el 20 de novembre a les 18:30 a la sala d’actes de la FIB, Campus Nord UPC, edifici B6, c\ Jordi Girona 1-3, Barcelona.

Aquest quart meeting comptarà amb Aaron Davidson (Apache Spark committer i Enginyer de Programari en Databricks) i Paco Nathan (Community Evangelism Director at Databricks) que ens parlaran sobre ‘Building a Unified Data Pipeline in Spark’ (conferència en anglès).

Una de les promeses d’Apache Spark és deixar que els usuaris construixen data analytic pipelines unificats que combinen diversos tipus de processament. En aquesta xerrada es farà una demo en viu amb la construcció d’una machine learning pipeline de 3 etapes: la ingestió de dades JSON des de Hive; formació de k-means clustering model; i l’aplicació del model a una transmissió en viu de tweets. Normalment aquest pipeline podria requerir un marc de processament independent per a cada etapa, però podem aprofitar la versatilitat del Spark runtime per a combinar Shark, MLlib i Spark Streaming i fer tot el processament de dades en un sol i curt programa Això ens permet la reutilització de codi i la memòria entre els components, millorant tant el temps de desenvolupament com l’eficiència en temps d’execució. Spark com a plataforma integra a la perfecció amb els components de Hadoop, operant de manera nativa en YARN amb suport a Hadoop InputFormats, de manera que porta el poder construir aquest tipus de pipelines unificats a qualsevol usuari Hadoop existent.

Aquesta xerrada serà una demo totalment en viu, on es construirà l’aplicació durant la sessió, explicarem les llibreries utilitzades en cada pas, i finalment la classificació dels raw tweets primeres en temps real.

Si estas interessat és molt important que facis la teva inscripció el més aviat possible, ja que la capacitat de la sala d’actes és de 80 persones i en cap cas aquesta vegada podrem incrementar l’aforament (cost 2 EUR per sufragar petites despeses).

Més informació i inscripcions Barcelona Spark Meetup.

Etiquetes:

Aquesta web utilitza 'cookies' pròpies i de tercers per oferir-te una millor experiència i servei. Al navegar o utilitzar els nostres serveis, acceptes l'ús que fem de les 'cookies'. De tota manera, pots canviar la configuració de 'cookies' en qualsevol moment ACEPTAR
Aviso de cookies
Check Our FeedVisit Us On TwitterVisit Us On FacebookVisit Us On Linkedin