Санпропускник для сайта — это robots.txt: файл закрывает от роботов служебные разделы и открывает нужные для продвижения страницы. Карта sitemap.xml дополняет его — подсказывает поисковику, какие адреса стоит обойти в первую очередь при ограниченном краулинговом бюджете.