Difference between revisions of "VT2018 Kafka"
(Created page with "=Auteur= *Nom : Timothée depriester *Sujet : Kafka =Résumé= Apache Kafka est une plateforme de streaming distribuée. Cette technologie permet de servir de tampon dans un...") |
|||
| Line 20: | Line 20: | ||
=Synthèse= |
=Synthèse= |
||
| + | |||
| + | Kafka est utilisé par des entreprises à très grande échelle avec des niveaux de performance très élevé. Par exemple, des entreprises tels que Linkedin ou Netflix y font transiter plus d'un trillion de messages par jour. |
||
| + | |||
| + | Il permet de centraliser tous les envois de messages à travers un seul système, cela permet une plus grande modularité et c'est primordial pour un système d'information de grande envergure. Kafka est différent de ses concurrents tel que RabbitMQ puisqu'il permet de stocker les messages pour une grande période de temps: que vous manipuliez 50kB ou 50 Tb, les performances seront les mêmes alors que RabbitMQ (ou autres) auront du mal si les données ne sont pas gérées en temps réel. C'est d'ailleurs pour cela que Kafka peut être utilisé comme une base de données. On peut citer par exemple l'offre DBAAS de OVH reposant sur la technologie Kafka. |
||
| + | |||
| + | |||
==Références== |
==Références== |
||
| + | |||
| + | https://cwiki.apache.org/confluence/display/KAFKA/Kafka+papers+and+presentations |
||
| + | https://kafka.apache.org |
||
| + | https://github.com/apache/kafka/blob/2.1/streams/examples/src/main/java/org/apache/kafka/streams/examples/wordcount/WordCountDemo.java |
||
| + | http://confluent.io/product/ |
||
| + | https://hackernoon.com/distributed-log-analytics-using-apache-kafka-kafka-connect-and-fluentd-303330e478af |
||
Revision as of 12:16, 17 December 2018
Auteur
- Nom : Timothée depriester
- Sujet : Kafka
Résumé
Apache Kafka est une plateforme de streaming distribuée. Cette technologie permet de servir de tampon dans un système d'envoi et réception de messages, de sauvegarder ces informations de façon durable et de pouvoir les traiter à la volée.
C'est une technologie à haute performance et permettant une distribution horizontale très élevé.
L'utilisation d'un système tel que Kafka permettra d'avoir un système de message plus cohérent, fiable et évoluable.
Abstract
Apache Kafka is a distributed streaming platform. This technology manage to publish and subscrib to stream of records, to keep this records safe and substainable, and to compute them on the fly.
It's a powerfull technology allowing high horizontal scalability.
Usage of a technology such as Kafka will allow you to keep your system more relaible and adaptable.
Synthèse
Kafka est utilisé par des entreprises à très grande échelle avec des niveaux de performance très élevé. Par exemple, des entreprises tels que Linkedin ou Netflix y font transiter plus d'un trillion de messages par jour.
Il permet de centraliser tous les envois de messages à travers un seul système, cela permet une plus grande modularité et c'est primordial pour un système d'information de grande envergure. Kafka est différent de ses concurrents tel que RabbitMQ puisqu'il permet de stocker les messages pour une grande période de temps: que vous manipuliez 50kB ou 50 Tb, les performances seront les mêmes alors que RabbitMQ (ou autres) auront du mal si les données ne sont pas gérées en temps réel. C'est d'ailleurs pour cela que Kafka peut être utilisé comme une base de données. On peut citer par exemple l'offre DBAAS de OVH reposant sur la technologie Kafka.
Références
https://cwiki.apache.org/confluence/display/KAFKA/Kafka+papers+and+presentations https://kafka.apache.org https://github.com/apache/kafka/blob/2.1/streams/examples/src/main/java/org/apache/kafka/streams/examples/wordcount/WordCountDemo.java http://confluent.io/product/ https://hackernoon.com/distributed-log-analytics-using-apache-kafka-kafka-connect-and-fluentd-303330e478af