arkspider - Crawler web

J’ai développé un crawler web capable d’explorer des sites web et récupérer les infos demandées a une haute vitesse.
Il est capable de se cloner en x nombre et crawler plusieurs pages web en parallèle. 

Le crawler est flexible et peut-être utilisé a des fins différents, très utile pour le SEO, pour du monitoring et tests fonctionnels des sites web.

Un point très important, c’est qu’il peut être déployé en mode Serverless.
C’est très avantageux d’un point vue technique et surtout financier.