הטוב ביותר תוכנה עבור Semetrical
Robotto הוא כלי ניטור robots.txt חופשי.
פשוט ליצור חשבון ולהוסיף תחומים אתה רוצה לעקוב. בכל פעם שקובץ robots.txt מתעדכן, תקבל הודעת דוא"ל עם הפרטים של מה שהשתנה.
Robotto גם מתריע על בעיות פוטנציאליות עם קובץ robots.txt...