reppy - ελεύθερο λογισμικό κατεβάσετε για Linux

reppy 0.1.0

reppy ξεκίνησε από μια έλλειψη υποστήριξης memoization σε άλλες robots.txt parsers αντιμετώπισε, και την έλλειψη υποστήριξης για Crawl-καθυστέρηση και Χάρτης στον ενσωματωμένο robotparser. Αντιστοίχιση Αυτό το πακέτο υποστηρίζει το 1996 RFC, καθώς και...