Import massif avec _bulk

Public

débutant qui a compris mapping et refresh (leçons 02 et 03)

Durée

25 à 30 min

Module

2/7

Compétence visée

charger des milliers de documents en une requête, lire la réponse de _bulk sans se faire piéger, et copier un index avec _reindex

En une image

Livrer 504 colis un par un, c'est 504 allers-retours du camion : la route (la connexion HTTP) coûte plus cher que le colis. _bulk, c'est charger le camion : une seule requête qui transporte des centaines d'opérations, chacune écrite sur deux lignes, l'étiquette (« indexer dans cours avec l'id C0001 ») puis le colis (le document). Le chauffeur revient avec un bordereau, items, qui dit colis par colis ce qui s'est passé, et un voyant global, errors, qui s'allume dès qu'un seul colis a été refusé. C'est exactement ce que fait labo.sh importer avec les trois fichiers .ndjson du kit ; et _reindex, c'est le même camion qui charge directement dans un index pour décharger dans un autre.