Réutilisation des résultats de correspondance calculés pour MapReduce: MapReduce Hadoop

Dans le cadre de ce travail, il s'agit d'enrichir un projet existant, appelé Dedoop, de fonctionnalités supplémentaires. Dedoop permet de détecter des similitudes entre des paires d'entités issues de grands volumes de données. Le traitement des données s'effectue à l'aide de méthodes basées sur MapReduce. La recherche de similitudes est un calcul qui nécessite beaucoup de temps de traitement. Si une modification a été apportée à une ou plusieurs entités de l'ensemble d'origine, le calcul doit être relancé. L'objectif de ce travail est d'éviter de répéter l'intégralité des comparaisons et de trouver un moyen, en utilisant les résultats de correspondance déjà calculés, de se limiter uniquement aux sous-ensembles qui nécessitent un nouveau calcul.

Pagina's: 52, Paperback, Editions Notre Savoir