Kategóriák: Modulok, Több modul
robots.js 0.9.4
Lehet használni, hogy húzza ki az adatokat a robots.txt fájlt, és táplálja a további alkalmazások vagy statisztikai eszközöket.Kivonat cél URL, oka hozzáférés és állapot adatok. Mi az új ebben a kiadásban: fogantyúk http (s ) kérésére a hibákat. ...
