בדיקת מפת אתר מול robots.txt

בדקו כתובות במפת אתר מול כללי robots שהודבקו.

במכשיר שלכם · ללא חשבון

בדיקת מפת אתר מול robots.txt מעבד את הקלט שלכם בדפדפן הזה. הקלט והתוצאות אינם נכללים בנתוני האנליטיקה. רשימת הכלים האחרונים שומרת שמות כלים, מספרי ביקורים ומועדי ביקור אחרון. רשימת הכלים השמורים שומרת רק את שמותיהם. שמירת טיוטה היא לבחירתכם ונשארת במכשיר הזה; אפשר למחוק טקסט שמור באמצעות פקדי הטיוטה. טעינת טקסט מכתובת URL היא לבחירתכם ויוצרת קשר עם אותו שרת; כתובת ה־URL וכתובת ה־IP שלכם גלויות לשרת. הפעולה האופציונלית ״שימוש ב־״ שומרת בלשונית הזאת נתונים להעברה לכלי הבא. הכלי הבא מסיר אותם עם פתיחתו ומתעלם מהם אם חלפה יותר מדקה.

״העתקת קישור״ כוללת בכתובת את הקלט שבחרתם לשתף. כל מי שיש לו את הקישור יכול לפתוח שוב את הקלט הזה. קבצים ותוצאות שנוצרו אינם נכללים. כלי סיסמאות ומפתחות משתפים הגדרות בלבד.

עברית

הקלט שלכם

robots.txt של מקור מפת האתר

אפשרויות וקובץ מהמכשיר

מזהה מוצר של הסורק

פתיחת קובץ טקסט מהמכשיר

ההגדרות הנוספות חלות רק על הלשונית הזו.

התוצאה שלכם

עוד

קיצורי מקלדת

על קישורים ואיפוס

הקישורים כוללים את הקלט וההגדרות שלכם. כל מי שמחזיק בקישור יכול לראות אותם, לכן אין לכלול טקסט פרטי. קבצים ותוצאות שנוצרו אינם כלולים; הגרלות אקראיות מתבצעות מחדש.

האיפוס טוען מחדש את הכלי עם ערכי ההתחלה, סוגר קבצים פתוחים ומשחרר את השליטה בהתקנים. טיוטות שנשמרו נשארות במכשיר הזה עד שמוחקים אותן.

איך בודקים מפת אתר מול robots.txt

הדביקו מפת אתר ואת תוכן robots.txt של המקור שלה כדי לראות אילו כתובות ברשימה הסורק שנבחר רשאי לבקש לפי הכללים. הדוח מזהה את הכלל התואם ואת הכתובות הכפולות. קבוצות של סורק מסוים מקבלות עדיפות על פני קבוצת התו הכללי; כשכללים ספציפיים באותה מידה, כלל Allow גובר.

הבא: פירוק כתובת URL

דוגמה

הכלל Disallow: /private/ חוסם את /private/draft עבור קבוצת התו הכללי. הכלל Allow: /private/public$ מתיר בדיוק את הנתיב הזה כשהוא ההתאמה הספציפית ביותר.

לפני השימוש בתוצאה

זו בדיקה מקומית של כללים, ולא סריקה בפועל או קביעה לגבי הוספה לאינדקס. הכלי אינו בודק תגובות HTTP,‏ noindex, תגיות canonical,‏ JavaScript או מגבלות גישה. אם יש אינדקס מפות אתר, יש לפתוח תחילה כל מפת אתר הכלולה בו בנפרד. כל כתובות הקלט חייבות להשתייך לאותו מקור (origin); לא נשלחת בקשה לאף כתובת.

הבא: סידור קוד XML

ציטוט העמוד

סגנון הציטוט

ToolOctopus. “בדיקת מפת אתר מול robots.txt.” עודכן 7 באוקטובר 2026. https://tooloctopus.com/he/בדיקת-מפת-אתר-מול-robots-txt.

אם ההנחיות דורשות זאת, יש להוסיף תאריך גישה.

הציטוטים מעוצבים באמצעות citeproc-js של Frank Bennett וסגנונות Citation Style Language. רישיון וקוד מקור.