Big data

Objectif
Alimenter une base de données de personnes physique de manière régulière contenant suivant le cas des informations différentes. adresse , tel , société etc. et les rassembler suivant certaines règles.
Base orientée télémarketing
original
On conserve les enregistrements d'origine soit 1 ligne datées (date inversée ex:160214)
+ date insertion
+ date origine document (si incertaine dans l’année 160101 si incertaine dans décénnie 100101)
+origines : sociétés traitements
tp1 : traitement préalable 1
On créé un nouvel enregistrement fichier tp1 sur lequel on effectue un traitement dit tp1
+suppression espace tiret point etc... dans n° de telephone
+conserver le 0 1er caractère dans n° de téléphone
+suppression espace tiret point etc... dans prenom
ces traitements peuvent être modifiés et refaits tp2
on conserve les enregistrements suite a ces traitements. dits tp1 tp2 etc...
jrxxx : jeu de règles 1
+Chaque jeu de règles sera identifié par un nom commençant par jr
+Chaque jeu de règles donnera une présentation différente
+Créer un fichier a plat de ces informations avec un nombre de colonnes non défini.
On regroupe les enregistrement tp1 suivant ces règles
jrxxx en créant un enregistrement virtuel consolidant les enregistrements regroupés
xxxxxxxx xxxxxx xxxxxx xxxxx ligne virtuelle
xxxxxx xxxxx ligne réelle
xxxxxx xxxxx ligne réelle
*par ligne réelle bouton d'exclusion du groupe ou confirmation
par ligne virtuelle confirmation globale
l'exclusion annule la consolidation on garde la ligne avec date exclusion et le code de la personne qui exclue
une ligne peut faire partie de plusieurs enregistrements couleur rouge en ce cas
Fonctionnement
chaque appel click to call génère une nouvelle ligne génerée a partir de la ligne virtuelle.
code appelant, date, heure, temps d’appel, todo, tododate, commentaire
confirmation des cellules consolidées
Environnement
Hadoop Hue Big Data