Documents effacés sans raison

[artesburger]

Bonjour,

J'ai lancé fscrawler et je l'ai laissé tourner pendant plus d'une heure.
J'étais arriver à plus de 20000 docs indexé, et d'un coup je suis tombé à 3000 fichiers.
Quand je regarde sur kibana, j'ai 190000 fichiers deleted.

Savez vous d'ou ça vient ?

[dadoonet]

Cela peut il venir du fait que j'ai changé de réseaux pendant ce temps, et donc fscrawler ne pouvant plus ce connecter au chemin indiquer a effacé des documents ?

Oui. Si remove_deleted est à true (valeur par défaut).

Regarde https://fscrawler.readthedocs.io/en/latest/admin/fs/local-fs.html#ignore-deleted-files