Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans...

34
1

Transcript of Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans...

Page 1: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

1

Page 2: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Le Groupe CARTÉGIE : 30 ans d’expérience

18M €

DE CHIFFRED’AFFAIRES

110COLLABORATEURS

4 SITES450

CLIENTS ETI & GRANDS

COMPTESUNE OFFRE

GLOBALE

Groupe français et indépendant

10 % DU C.A.RÉINVESTISEN RECHERCHECULTURE DE L’INNOVATION

2013LANCEMENT DU PROGRAMME DE CROISSANCE EXTERNE

2017DERNIERE ACQUISITION

3 METIERS

35 EXPERTISESDONT EN MARKETING LOCAL2

Page 3: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Nous mobilisons les expertises data et connaissance client pour faire avancer les entreprises.

Nous créons des synergies nouvelles pour mieux adresser vos cibles.

Nous tirons parti d’une data efficiente pour déployer des dispositifs innovants.

Le Groupe CARTÉGIE :un partenaire global

DATAEXPERTISES

CONNAISSANCECLIENT

ACTIVATIONMARKETING

+

POUR UNE DATA INTELLIGENTE,ACTIVE & CRÉATIVE

+

3

Page 4: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Un virage technologiquePour mieux exploiter, collecter, interroger, faire parler la data

Métier historique de data provider (depuis 1988)

EnrichissementDATA

TraitementDATA

CollecteDATA

Double approche marché BtoB et BtoC

Collecte de data BtoBData Science et NLP

2016-2017Projet CATIE / REGIONRenforcement de l’expertiseData Science & AnalystNatural Language ProcessingElastic Search

Virage technologique

Performance / ROI

NOTRE PROPRE ÉCOSYSTEME TECHNOLOGIQUE

Connaissances technologiques

2014-2015Création du BIG DATA LABHadoopCrawling/scrapingArchitecture Cloud

+ + +

Hybridation des compétences Informatiques / Statistiques

2018Renforcement de l’expertiseNouvelles offresCroisement données relationnelles

Nouveaux indicateurs BtoB

Pertinence / Valeur ajoutée

Base de données relationnelles

4

Page 5: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

POUR UNE DATA INTELLIGENTE, ACTIVE & CRÉATIVE

LA GENESE DU PROJET

Collecte Nouvelles Données B2B

De nouveaux acteurs, marché de la donnée B2B

en pleine mutation (explosion Open Data)

Multiplicationdes informations

sur les entreprises, générées par le boom du

numérique

BIG DATA :un virage obligatoire pour les

acteurs de la donnée

Nécessité d’acquérir expertise et expérience dans le domaine du Big

Data à travers un accompagnement à forte

valeur technologique

Création

5

Page 6: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

SITES E-COMMERCE

6

Page 7: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Objectifs du projet : Disposer d’un fichier complet des sites e-commerce en France

OBJECTIFS

• Augmenter la valeur de l’entrepôt BtoBdu Groupe CARTÉGIE

• Développer de nouvelles offres toujours plus pertinentes en termes de marketing opérationnel pour nos clients

ETAPES

• Acquérir les informations pour alimenter les traitements de classification

• Stocker et mettre en forme ces informations

Parsing / Cloud

• Définir et développer les méthodes appropriées

Machine Learning

7

Page 8: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Disposer de la matière première :Crawling de masse

8

Page 9: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Des règles a priori• Cibler les sites web B2B

• Limiter la profondeur de recherche dans les sites

• Langue française

• Prioriser les pages à contenuspertinents

• Focus sur le texte (corpus, PDF)

9

Page 10: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Internet c’est grand…Où on va?

Où on s’arrête?Le Web français c’est quoi?

10

Page 11: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

• Crawler open source – java•

• Map/Reduce Hadoop

• Nombreux paramètres

• Modifié par le BDL : • Scoring/ranking adhoc• Plugin de détection de langue• CrawlDB orientée métier

11

Page 12: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

12

Page 13: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Résultats

100 NŒUDS / MACHINES SUR AWS (8GO RAM, 2 CPU, 50GO SSD)

3 045 961 246 URL

737 430 062PAGES CRAWLÉES20 ToTELECHARGÉ6,8 ToTEXTE ANALYSÉ

13

Page 14: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Traiter la donnée collectée sur les sites webDétection des sites e-commerce

14

Page 15: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Les moyens1 million de sites web avec SIRET associé + contenu web 3 600 sites e-commerce

« non certains »

algorithmes de Machine Learningafin d’identifier automatiquement les sites e-commerce et non e-commerce sur ces 1 million de sites

Qualification manuelle

400 sites e-commerce

« certains »

A l’issue du crawl et du parsing

15

Page 16: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

TRAININGUtilisation d’algorithmes :• Random Forest• SVM : Support Vector

Machine• GBT : Gradient Boosting

TreeModification de certains paramètres

TRAIN70% des sites classés manuellement pris

aléatoirement

TEST30% des sites classés manuellement pris

aléatoirement

PREDICT

TESTEvaluation de la prédiction /

Solidité du modèle

MODELE

Base de 4000 sites classés

manuellement e-commerce

ou non

CLEANING

• Clean (suppression ponctuation / caractères spéciaux)

• StopWords (suppression des mots vides)

Contenu texte des sites Web

Cycle avec de nombreuses itérations jusqu’à obtention du « meilleur » modèle définitif

16

Page 17: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Base de 1 Million de sites WEB

Base sites WEB identifiés ecommerce

Base sites WEB identifiés non ecommerce

PREDICT

MODELE

17

Page 18: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

18

Page 19: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

19

Page 20: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

20

Page 21: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Nettoyage des données

21

Page 22: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Données brutes extraites par le crawler : texte d’une page et zoom sur les éléments du menu

Nettoyage des données

22

Page 23: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Exemple de l’utilisation de l’algorithme : Données nettoyées

Nettoyage des données

23

Page 24: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Exemple de l’utilisation de l’algorithme : Données vectorisées

label Parsetext

0 Array("a", "b", "c")

1 Array("a", "b", "b", "c", "a")

label Parsetext Vecteur

0 Array("a", "b", "c") (3,[0,1,2],[1.0,1.0,1.0])

1 Array("a", "b", "b", "c", "a") (3,[0,1,2],[2.0,2.0,1.0])

Préparation des données

24

Page 25: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Exemple de l’utilisation de l’algorithme : Données vectorisées

Préparation des données

25

Page 26: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Exemple de l’utilisation de l’algorithme : Données sélectionnées

ID Features Ecommerce SelectedFeatures

7 [0.0, 0.0, 18.0, 1.0] 1.0 [1.0]

8 [0.0, 1.0, 12.0, 0.0] 0.0 [0.0]

9 [1.0, 0.0, 15.0, 0.1] 0.0 [0.1]

Préparation des données

26

Page 27: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Features (fictives):

Préparation des données

27

20 mots suffisent pour effectuer la prédiction!

monsieur voix penser quel arriver maison devant coup beau connaître devenir air mot nuit sentir eau vieux sembler moins tenir

Page 28: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Exemple de l’utilisation de l’algorithme : Données sélectionnées

Préparation des données

28

Page 29: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

29

Page 30: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

SVM Gradient Boosting

Tree

Random Forest

3 algorithmes utilisésdans cet apprentissage supervisé

30

Page 31: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Prédiction (erreur 7%)

Vote majoritaire ou somme = 3

31

Page 32: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

32

Page 33: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

Offre clients • Base des sites e-commerce avec n° siret : 90 000

• Base des sites e-commerce prédite : 165 000

33

Page 34: Le Groupe CARTÉGIE : 30 ans d’expérience · 2019-02-08 · Le Groupe CARTÉGIE : 30 ans d’expérience 18 M € DE CHIFFRE D’AFFAIRES 110 COLLABORATEURS 4 SITES 450 CLIENTS

BORDEAUX (siège social)

3 rue Christian Franceries - Parc Chavailles 2CS 80011 - 33522 BRUGES CEDEX

PARIS (bureaux commerciaux)

24 rue de Mogador75009 PARIS

STRASBOURG (bureaux commerciaux)

13 Rue Jacobi Netter67200 STRASBOURG

NIORT (bureaux commerciaux)

7 rue du Docteur Roux79000 NIORT

Pour nous contacter : 01 44 51 66 99www.groupe-cartegie.com

Merci de votre attention

34