Big Data - Définition “Le Big Data (ou mégadonnées) représente les collections
de données caractérisées par un volume, une vélocité et une variété si grands
que leur transformation en valeur utilisable requiert l’utilisation de
technologies et de méthodes analytiques spécifiques."
Big Data - Définition
● Volume - pas d'échantillonnage, on observe et mesure tout
● Vélocité - les données et les résultats sont souvent disponibles en temps réel
● Variété - puise dans les données textuelles, les photos, audio / vidéo et
complète généralement les pièces manquantes en fusionnant plusieurs sources
Big Data - Disponibilité des données “There was 5 exabytes of information
created between the dawn of civilization through 2003, but that much
information is now created every 2 days, and the pace is increasing.” -- Eric
Schmidt, PDG Google, 2010
Big Data - Pourquoi? ● Augmentation exponentielle de la quantité de données
non structurées ○ Email, chat, blog, web, musique, photo, vidéo, etc. ●
Augmentation de la capacité de stockage et d’analyse ○ L’utilisation de
plusieurs machines en parallèle devient accessible ● Les technologies
existantes ne sont pas conçues pour ingérer ces données ○ Base de données
relationnelles (tabulaires), mainframes, tableurs (Excel), etc. ● De “nouvelles”
technologies et techniques d’analyse sont nécessaires ○ “Google File System” -
Google 2003 ○ “MapReduce: Simplified Data Processing on Large Clusters” -
Google, 2004 ○ Hadoop: circa 2006