reppy 0.1.0
reppy rast digər robots.txt parsers olan memoization dəstək olmaması, və daxili robotparser in Tarama gecikmə və Sayt xəritəsi dəstək olmaması başlamışdır. Eşleme Bu paket 1996 RFC, eləcə də wildcard eşleme, tarama-gecikmə və haritalarındaki kimi əlavə...
