Tuning Apache Spark : Cours sur les recettes puissantes de traitement des big data

Tuning Apache Spark: Powerful Big Data Processing Recipes Course

Tuning Apache Spark : Cours sur les recettes puissantes de traitement des big data

Tuning Apache Spark : Cours sur les recettes puissantes de traitement des big data

Découvrez les secrets les moins connus du traitement puissant des big data avec Spark et Kafka.

Ce que vous allez apprendre

Tuning Apache Spark : Cours sur les recettes puissantes de traitement des big data

  • Comment acquérir une base solide dans les technologies les plus puissantes et les plus polyvalentes impliquées dans le streaming de données : Apache Spark et Apache Kafka.
  • Former une architecture robuste et propre pour un pipeline de streaming de données.
  • Les moyens de mettre en œuvre les bons outils pour donner vie à votre architecture de streaming de données
  • Comment créer des pipelines de traitement robustes en testant les tâches Apache Spark ?
  • Apprenez comment créer des programmes Spark hautement concurrents en tirant parti de l’immuabilité.
  • Comment résoudre des problèmes répétés en exploitant l’API GraphX
  • Comment résoudre les problèmes de calcul de longue durée en tirant parti de l’évaluation paresseuse dans Spark ?
  • Conseils pour éviter les fuites de mémoire en comprenant la gestion interne de la mémoire d’Apache Spark
  • Dépanner les pipelines en temps réel écrits en Spark Streaming.

Exigences

  • Pour suivre ce cours, vous n’avez pas besoin d’être un expert de Spark. Les clients doivent être familiers avec Java ou Scala.

Description

Aperçu du parcours d’apprentissage vidéo

Un parcours d’apprentissage est un cours spécialement adapté qui rassemble deux ou plusieurs sujets différents pour vous permettre d’atteindre un objectif final. La sélection des ressources d’un parcours d’apprentissage fait l’objet d’une réflexion approfondie, et ce, grâce à une compréhension complète des conditions requises pour atteindre un objectif.

Aujourd’hui, les organisations ont du mal à travailler avec de grands ensembles de données. C’est là que le streaming de données et Spark entrent en jeu.

En commençant par une approche pas à pas, vous vous sentirez à l’aise dans l’utilisation de Spark et apprendrez à mettre en œuvre certaines techniques pratiques et éprouvées pour améliorer des aspects particuliers de la programmation et de l’administration dans Apache Spark. Vous serez en mesure d’effectuer des tâches et de tirer le meilleur parti de vos bases de données beaucoup plus rapidement.

Les solutions simples et pratiques proposées vous permettront de reprendre vos activités en un rien de temps !

À la fin de la formation, vous serez familiarisé avec l’utilisation de Spark dans vos projets quotidiens.

Caractéristiques principales

  • De l’architecture de base à la solution de code complète, ce cours aborde tous les aspects importants de l’architecture et du développement d’un pipeline de streaming de données.
  • Testez les travaux Spark en utilisant les techniques unitaires, d’intégration et de bout en bout pour rendre votre pipeline de données robuste et à l’épreuve des balles.
  • Résolvez plusieurs problèmes pénibles comme les tâches qui tournent lentement et qui affectent les performances de votre application.



Biographies des auteurs

  • Anghel Leonard est actuellement architecte en chef Java. Il est membre des gardiens de Java EE et possède plus de 20 ans d’expérience. Il a passé la majeure partie de sa carrière à architecturer des systèmes distribués. Il est également l’auteur de plusieurs livres, un conférencier, et un grand fan du travail avec les données.
  • Tomasz Lelek est un ingénieur logiciel qui programme principalement en Java et Scala. Il travaille avec les API Spark et ML depuis 5 ans, avec une expérience de production dans le traitement de pétaoctets de données. Récemment, il est intervenu lors de conférences en Pologne, Confitura et JDD (Java Developers Day), ainsi qu’au Krakow Scala User Group. Il a également dirigé une session de codage en direct à la conférence Geecon.

À qui s’adresse ce cours ?

  • Un développeur d’applications, un scientifique des données, un analyste, un statisticien, un ingénieur Big data ou toute personne ayant une certaine expérience de Spark se sentira parfaitement à l’aise pour comprendre les sujets présentés. Ils travaillent généralement avec de grandes quantités de données au quotidien.
  • Le site complet des cours pour développeurs Android Kotlin

Tuning Apache Spark : Powerful Big Data Processing Recipes Course

Télécharger maintenantContenu de : http://www.udemy.com/course/tuning-apache-spark-powerful-big-data-processing-recipes/