Robots.txt : Google publie les sources de nouveaux outils
Le 22 septembre 2020 à 08h39
1 min
Internet
Internet
L'année dernière, à l'occasion des 25 ans de ce fichier important pour les sites et moteurs de recherche, c'était déjà le cas du parser C++ utilisé par l'entreprise.
Il passait alors sous licence Apache 2.0, le Robots Exclusion Protocol (REP) faisant l'objet d'une proposition à l'IETF. Aujourd'hui, on apprend la publication des sources d'un framework de test.
Le parser est également diffusé dans une version Java par Google, des développeurs non affiliés au géant américain ayant pour leur part créé des implémentations en Go et Rust.
Le 22 septembre 2020 à 08h39
Commentaires (0)
Vous devez être abonné pour pouvoir commenter.
Déjà abonné ? Se connecter
Abonnez-vous