VT2015 Graph Databases

Présentation

Enseignants : D. Donsez, GP. Bonneau

Sujet : Graph databases

Synthèse

Introduction

La démocratisation des bases de données en graphe viens en continuation au mouvement NoSQL(NotOnlySQL) qui à prône l'idée que les BD relationnelles ne sont pas le seul moyen de stockage. Aussi on ne peut oublier de souligner, l'explosion des réseaux sociaux qui à tout aussi favorisé leur apparition. Je pense notamment à facebook, twitter, linkedIn qui furent les pionniers vers cette démocratisation avec l'élaboration de "wrappers" de BD relationnelle facilitant l'usage de structures en graphe (eg. TAO, FlockDB). On est en droit de se demander quelle est l'utilité des BD en graphe.

Motivations

Pour faire court, 2 raisons motivent l'utilisation de BD en graphe :

• posséder une structure de donnée qui reflète l'architecture de l'application à coder. C'est typique de l'application à consonance *networking* : facebook, etc...
• une syntaxe de requête plus *graph-friendly*

Les cas d'utilisations des BD en graphe sont multiples :

• centralisation des logs issues d'applications hétérogènes mais dont les interactions sont complexes.
• un gestionnaire de modules, ou bibliothèques (NPM, ...) nécessitant un graphe de dépendances.

Bref, il y a autant de cas d'utilisations qu'il y a de problème de graphe nécessitant une persistance des données dans le temps.

Analyse de marché

On peut répertorier les bases de données sous 3 catégories. Et dans chacune des distinctions sont possibles. L'ordre ressemble a celui-ci :

• les relationnelles : basées sur une structure en tables
  • orientée colonne (eg. Vertica)
  • orientée ligne (eg. MySQL)

• les NotOnlySQL : basées sur différents systèmes
  • clé-valeur (eg. Redis)
  • document (eg. MongoDB)
  • ...

• les structures en graphe : basées sur différents systèmes
  • une structure en graphe (eg. Neo4j, LDAP)
  • *wrapper* d'une BD relationnelle (eg. TAO, FlockDB)

Ce qui différencie une BD relationnelle orientée colonne et à une autre orientée ligne est la façon dont la sérialisation des données est effectuée sur le disque dur. En *orientée-colonne* les colonnes d'une table sont écrites sur disque successivement de manière contiguë. En *orientée-ligne* les lignes sont cette fois-ci écrites successivement.

Comparatif de performance

Pour ce donner une idée de performance, je reprend l'exemple d'un benchmark réalisé par Alekh Jindal, un post doctorant dans le groupe Data base Group du laboratoire MIT CAIL.

<<add benchmark image>>

On peut reconnaître 2 types de BD :

• Neo4j (en graphe)
• les autres (en relationnelle). Plus précisément,
  • Vertica est orientée colonne
  • MySQL est orientée ligne
  • VoltDB est orientée stockage en RAM

Deux bases de données permettent l'évaluation des performances :

• une constituée de 4K noeuds
• une seconde constituée de 81K noeuds

Deux types de requêtes sont élaborées :

• *pageRank* qui consiste en un noeud avec potentiellement des jointures. Les BD relationnelle sont très optimisées la-dessus. D'ailleurs cela se constate par le fait que Neo4j se fait dépassé en terme de performance.
• *shortestPath* qui consiste en un noeud source, et successivement ses noeuds voisins sont visités. Contre toute attente, la encore Neo4j se fait devancer en terme de performance par ses homologues relationnels. En m'intérrogeant sur l'origine de ce manque de performance, je me suis penché sur la structure de Neo4j.

<<add file neo4j structure>> .imagelink_wikilogo a {

 width:135px;
 height:135px;
 display:block;
 text-decoration:none;
 background-image: url("http://upload.wikimedia.org/wikipedia/mediawiki/b/bc/Wiki.png") 

}

Ce que l'on peut clairement observer c'est la structure d'un noeud, contenant une liste chaînée de propriétés de type clé-valeur, et de relation trié par type, puis par catégorie In si l'arc (équivalent à une relation) est incident, Out s'il est sortant. Un noeud contient uniquement une référence vers une liste chaînée de relations. Une relation est elle même une structure contenant un type, une liste chaînée de propriétés ainsi que son noeud de départ (start) et d'arrivée (end). Un graphe est donc stocké sous forme d'une liste chaînée de noeuds contenant chacun toute l'information nécessaire sur les arcs entrants et sortants du noeud. La redondance du terme *liste chaînée* à un impact fondamentale sur les performances de Neo4j. Le principale inconvénient d'une structure en liste chaînée est le coût en temps et en nombre d'accès mémoire I/O. Contrairement au BD relationnelle il n'y a là pas possibilité de cache, à localité spatial du moins, au niveau matériel. Et ce, pour la simple raison que les données ne sont pas contiguës en mémoire mais éparpillées sur le disque. Il y a sans doute possibilité de constituer un cache logique, mais sans possibilité d'égaler les performances d'un cache matériel.

To be continued ...