שאלה על חסימה של דפי אינטרנט

אם אנחנו רוצים להוריד מאתר אינטרנט ישן את הדפים הלא עדכניים שלו ככה שהגולשים לא יגיעו אליהם, מה צריך לעשות? ראינו בסרטון הזה https://www.seo-simple.co.il/%d7%94%d7%90%d7%9d-%d7%9b%d7%aa%d7%95%d7%91%d7%aa-%d7%97%d7%a1%d7%95%d7%9e%d7%95%d7%aa-%d7%91%d7%a7%d7%95%d7%91%d7%a5-robots-txt-%d7%99%d7%95%d7%a4%d7%99%d7%a2%d7%95-%d7%91%d7%aa%d7%95%d7%a6%d7%90 שיש איזה אפשרות לחסום בקובץ רובוטס, מה זה אומר? אפשר לחסום שם גם דפים יחידים ולא תיקיות? והם אומרים שכדאי גם לעשות את זה בעוד דרך שהם לא מסבירים מהי, מישהו יודע אולי? זה משהו מורכב? ומה ההבדל בעצם בין חסימה של הדפים לבין מחיקה שלהם לגמרי? מה כדאי לנו לעשות במקרה של דפים ישנים כאלה?