Нет, дело не в этом. Он в целом ходит понемножку на сайт, сканирует страницы. Всё относительно не совсем плохо. Дело в том, что он именно sitemap.xml не хочет читать. Даже не пытается. а в панели выводит, что "не удалось получить"
я в каком-то сервисе нашел однажды тоже ошибку, что мол nginx не тот заголовок отдает при запросе сайтмапа. Мы много усилий на это потратили - все без толку. Как я написал, помог только переезд