Un pachet PHP pentru indexarea concurentă a site-urilor web

Spatie/crawler este un pachet PHP destinat crawling-ului concurent al site-urilor web, utilizând promisiuni Guzzle. Acesta include callback-uri closures, obiecte de răspuns tipizate, controale de domeniu și suport pentru testare.