reppy 0.1.0

reppy התחיל מתוך חוסר התמיכה בmemoization מנתחי robots.txt אחרים נתקלו, וחוסר התמיכה בסריקה-עיכוב וSitemap בrobotparser המובנה. התאמה חבילה זו תומכת 1996 RFC, כמו גם תכונות נוספות מיושמות-נפוצה, כמו התאמה כללי, זחילה-עיכוב, ומפות אתר. ישנן גישות שונות...