
Человек ищет в Яндексе «прайс на ваш товар с ценой», нажимает на ваш сайт и попадает не на страницу с ценами, а в PDF-файл, который вы выложили два года назад и давно забыли. В файле прошлогодние цифры, старый телефон, нет ни меню, ни кнопки, ни формы заявки. Дальше два исхода: клиент закрывает вкладку или звонит с фразой «у вас же написано дешевле». Оба неприятны, и оба случаются тихо: в отчётах вы этого почти не увидите.
Ниже — какие файлы поиск берёт в индекс, почему они иногда обходят нормальную страницу, как найти свои за вечер и что сделать с каждым: заменить, удалить, перенаправить, закрыть или оставить с пометками. Всё сверено со справкой Яндекса и с тем, что я вижу на сайтах клиентов с 2005 года.
Коротко
- Яндекс индексирует не только страницы, но и файлы: PDF, DOC и DOCX, XLS и XLSX, PPT, RTF, TXT, форматы OpenOffice. Предел по весу — 10 МБ.
- Файл с прайсом может обойти страницу цен, потому что в нём больше нужных слов, он старше и на него когда-то ставили ссылки.
- Старый файл в выдаче — это прошлогодние цены, отсутствие пути к заявке и визиты, которых нет в Метрике.
- Найти свои файлы можно запросом с операторами site: и mime: в Яндексе, в отчёте Вебмастера «Страницы в поиске» и в папке загрузок на хостинге.
- У каждого файла одно из пяти решений: заменить по тому же адресу, удалить с кодом 404 или 410, перенаправить на страницу цен, закрыть заголовком X-Robots-Tag или оставить с датой и ссылкой.
- Цены должны жить на странице сайта, а файл — быть дополнением для скачивания с постоянным адресом и датой актуальности внутри.
Если не хочется разбираться в этом самостоятельно, на SEO-консультации можно вместе пройтись по файлам вашего сайта в поиске и решить, что с каким делать.
Какие файлы Яндекс берёт в поиск
Робот Яндекса индексирует HTML-страницы и документы размером до 10 МБ. В справке перечислены PDF, документы Microsoft Office (DOC, DOCX, XLS, XLSX, PPT, PPTX), форматы OpenOffice (ODT, ODS, ODP, ODG), RTF, TXT и SWF. Если ссылка на такой файл есть на странице, в карте сайта или на чужом сайте, робот его скачает, прочитает текст и может показать в выдаче рядом с обычными страницами.
Для прайсов важна оговорка из той же справки: из PDF индексируется только текстовый слой, а если документ состоит из картинок, робот учитывает первые три страницы. Обычный прайс, сохранённый из Word или Excel, читается целиком, со всеми позициями и цифрами.
| Тип файла | Что обычно в нём лежит | Чем вредит в поиске | Что сделать |
|---|---|---|---|
| Прайс, каталог, буклет, коммерческое предложение | Старые цены и контакты, нет меню и кнопки, визит не виден в Метрике | Заменить по тому же адресу или перенаправить на страницу цен | |
| XLS, XLSX | Оптовый прайс с остатками | Клиент видит прошлые остатки и цены, файл может открыться в браузере криво | Цены перенести на страницу, файл обновлять по постоянному адресу |
| DOC, DOCX | Договор, оферта, анкета, шаблон заявки | Старые условия договора, прежние реквизиты | Удалить устаревшие версии, актуальную закрыть X-Robots-Tag |
| PPT, PPTX | Презентация компании для партнёров | Устаревшие цифры о компании, старое предложение | Удалить или закрыть от индексации |
Почему файл обходит страницу с ценами
Поиск не знает, что файл устарел: он видит документ, который хорошо отвечает на запрос. Обычно сходятся три причины.
В файле больше нужных слов. В прайсе прямо написано «прайс-лист», «цена», «стоимость», перечислены все позиции с единицами измерения и цифрами. А страница «Услуги» на сайте может содержать три абзаца общих слов и фразу «цену уточняйте у менеджера». Для запроса «прайс на монтаж кровли» файл подходит лучше, чем такая страница.
Страница цен пуста для робота. Бывает, что цены на сайте вставлены картинкой, подгружаются скриптом из внешней таблицы или спрятаны за кнопкой «рассчитать». Человек их видит, а робот получает страницу без цифр. Файл в этом споре выигрывает просто потому, что в нём есть текст.
Файл старше и на него ссылаются. Прайс 2023 года успел попасть в справочники, на форумы, в старые новости на самом сайте («обновили прайс, скачайте»). Эти ссылки никуда не делись. Новая страница цен появилась позже, ссылок на неё меньше.
Отдельная история — файлы с годом в названии. Каждый январь загружают новый «prajs-2025.pdf», а старые не удаляют, и в поиске оказываются три-четыре версии сразу.
Чем вредит прошлогодний прайс в выдаче
Проблема не в самом файле, а в тупике, куда попадает клиент.
- Старые цены. Человек приходит с ожиданием прошлогодней цифры. Менеджер называет текущую, и разговор начинается с претензии вместо выбора.
- Нет пути к заявке. В PDF нет меню, корзины, формы, кнопки мессенджера. Если в файле нет даже ссылки на сайт, следующий шаг для клиента — кнопка «назад» и соседний результат в выдаче.
- Старые контакты и реквизиты. Телефон, который вы сменили, адрес прежнего склада, реквизиты закрытого юрлица. Звонок уходит в пустоту, а человек думает, что компании больше нет.
- Визит не виден. В PDF или Excel нет кода счётчика. Метрика видит скачивание, только если человек нажал ссылку на файл на странице сайта: это отчёт «Загрузки файлов». Если он пришёл в файл прямо из поиска, для Метрики этого визита не было.
Как найти свои файлы в поиске
Запросы в Яндексе
В Яндексе работают операторы site: и mime:. Первый ограничивает поиск вашим сайтом, второй — типом файла. Введите в строку поиска:
site:вашсайт.ru mime:pdf— все PDF вашего сайта, которые есть в выдаче;site:вашсайт.ru mime:xlsиsite:вашсайт.ru mime:doc— таблицы и документы;прайс site:вашсайт.ruицена site:вашсайт.ru— что показывается по ценовым словам, страницы и файлы вперемешку.
В справке Яндекса для mime: перечислены pdf, xls, ods, rtf, ppt, odp, swf, odt, odg и doc. Форматов docx и xlsx в списке нет, поэтому последние два запроса без mime: обязательны: они покажут и такие файлы. В иностранной выдаче Google тот же поиск делается запросом site:вашсайт.ru filetype:pdf.
Отчёт «Страницы в поиске» в Вебмастере
Откройте Яндекс Вебмастер, раздел «Индексирование» → «Страницы в поиске», вкладку «Все страницы». Нажмите значок фильтра у адреса и выберите «Содержит»: введите .pdf, затем .xls, .doc. В режиме «Условие» можно задать регулярное выражение, например ~\.(pdf|docx?|xlsx?)$. Список выгружается в XLS или CSV, в нём видны адрес, заголовок и дата последнего визита робота.
На вкладке «Исключённые страницы» видны файлы, которые вы уже удаляли. Если удалённый файл висит там долго, на него, скорее всего, ссылаются другие сайты.
Папка загрузок на хостинге
Поиск показывает только то, что уже нашёл. Чтобы увидеть всё, откройте файловый менеджер хостинга и папки с документами: /wp-content/uploads/ на WordPress (там файлы разложены по годам и месяцам), /upload/ на 1С-Битрикс, а также /files/, /docs/, /price/, которые создают вручную. Всё, что старше года и называется «прайс», «каталог», «КП» или «договор», — кандидаты на решение.
Заодно откройте адрес такой папки в браузере. Если вместо ошибки видите список файлов с заголовком «Index of», на сервере включён просмотр каталогов. Робот может пройти по этому списку так же, как по меню сайта. Отключается это в настройках хостинга или строкой Options -Indexes в .htaccess на Apache.
Что делать с каждым файлом: пять решений
Решение зависит от того, нужен ли файл людям, есть ли на него внешние ссылки и есть ли страница, которая его заменяет.
1. Заменить по тому же адресу
Подходит, когда файл нужен и его надо просто обновить. Загрузите новую версию под тем же именем в ту же папку, поверх старой: через файловый менеджер хостинга или по FTP. Адрес не меняется, ссылки и закладки ведут на актуальные цены. Ускорить визит можно в Вебмастере: «Индексирование» → «Переобход страниц», туда вставляется адрес файла.
Ловушка WordPress: если загрузить файл с тем же именем через библиотеку медиафайлов, система допишет к имени цифру, и получится новый адрес рядом со старым. Заменять нужно либо на хостинге, либо плагином для замены медиафайлов, который сохраняет адрес.
2. Удалить и отдать 404 или 410
Подходит для лишних версий: прайсы прошлых лет, черновики, презентации, которые никому не нужны. Удалите файл с сервера и проверьте, что по его адресу сервер отвечает кодом 404 или 410, а не перекидывает на главную. Яндекс удаляет такие адреса из поиска в течение недели после того, как робот увидит ошибку. Ускорить можно в Вебмастере: «Инструменты» → «Удаление страниц из поиска». Там вводится адрес файла или префикс, например адрес папки, чтобы убрать сразу группу. Подробнее о способах — в статье как удалить страницу из поиска.
3. Перенаправить на страницу цен
Подходит, когда на файл ссылаются другие сайты или клиенты держат его в закладках, а на сайте уже есть нормальная страница с ценами. Настройте 301-редирект с адреса файла на эту страницу. На Apache это одна строка в .htaccess: Redirect 301 /files/prajs-2024.pdf https://вашсайт.ru/ceny/. На nginx — блок location = /files/prajs-2024.pdf { return 301 /ceny/; }. Как это делается в разных системах, описано в статье как сделать 301-редирект.
4. Закрыть заголовком X-Robots-Tag noindex
Подходит для файлов, которые должны открываться по прямой ссылке, но не должны быть в поиске: договор-оферта, реквизиты, инструкция для клиентов, КП для рассылки. В PDF нельзя вставить мета-тег robots, как в страницу, поэтому запрет передаётся в ответе сервера, HTTP-заголовком X-Robots-Tag: noindex. Яндекс этот заголовок поддерживает. На Apache правило для всех документов выглядит так:
<FilesMatch "\.(pdf|docx?|xlsx?)$"> Header set X-Robots-Tag "noindex" </FilesMatch>
Нужен включённый модуль mod_headers. На nginx то же самое делается директивой add_header X-Robots-Tag "noindex"; в блоке location для нужных расширений. Проверить заголовок можно в Вебмастере: «Инструменты» → «Проверка ответа сервера». Подробная настройка — в статье X-Robots-Tag: как закрыть PDF и файлы от индексации.
5. Оставить, но доработать сам файл
Подходит для файлов, которые приводят полезных людей: технический паспорт изделия, сертификат, подробный каталог с характеристиками. Такой документ в поиске может работать на вас, если в нём есть выход на сайт. Добавьте на первую страницу дату актуальности («цены действуют с 1 ноября 2026 года»), ссылку на страницу с текущими ценами и телефон. В Excel то же самое — верхней строкой.
| Способ | Убирает из поиска? | Когда подходит |
|---|---|---|
| Замена по тому же адресу | Нет, обновляет содержимое | Файл нужен, его просто пора обновить |
| Удаление, код 404 или 410 | Да, после визита робота | Старые версии и файлы, которые никому не нужны |
| 301-редирект на страницу цен | Да, в выдаче остаётся страница | На файл ссылаются или его хранят в закладках |
| X-Robots-Tag: noindex | Да, файл открывается по прямой ссылке | Договоры, реквизиты, инструкции, КП |
| Оставить с датой и ссылкой | Нет | Паспорта, сертификаты, каталоги, полезные людям |
Почему одного robots.txt мало
Первое, что приходит в голову, — запретить папку с файлами в robots.txt. Для Яндекса это один из способов удаления: справка называет Disallow наравне с кодами 404, 410 и noindex. Но слабых мест у него три.
Робот перестаёт видеть остальные сигналы. Яндекс прямо пишет: если страница запрещена в robots.txt, директива мета-тега или заголовка не действует, потому что робот не загружает страницу. Значит, связка «Disallow плюс X-Robots-Tag» работает как один Disallow, а 301-редирект с запрещённого адреса робот тоже не увидит. Выбирайте что-то одно, и для файлов, которые нужны людям, лучше заголовок, чем запрет обхода.
В иностранных поисковиках он не удаляет. Документация Google прямо говорит, что robots.txt не служит способом убрать страницу из выдачи: адрес, закрытый от обхода, может остаться в результатах, просто без описания. Если клиенты ищут вас и там, нужен noindex или удаление.
Файл остаётся открытым. Запрет обхода касается роботов. Любой, у кого есть ссылка, файл скачает. А сам robots.txt виден всем: строка «Disallow: /kp-klientam/» рассказывает любопытным, где лежат коммерческие предложения.
Как выкладывать прайс, чтобы он не спорил со страницей
Файл не враг. Оптовику или закупщику удобно скачать прайс и переслать начальнику. Проблема появляется, когда файл заменяет страницу, а не дополняет её. Порядок такой.
- Цены — текстом на странице. Таблица в HTML, а не картинка и не встроенный документ. Над таблицей — дата обновления. Такая страница и отвечает на запрос, и ведёт к заявке. О том, как открытые цены влияют на обращения, я писал в статье показывать цены на сайте или прятать.
- Файл — кнопкой под таблицей. С понятной подписью: «Скачать прайс, PDF, 300 КБ, обновлён 1 ноября 2026 года». Человек видит дату до того, как скачал.
- Постоянный адрес. Один файл, например /files/prajs.pdf, который вы перезаписываете при каждом обновлении. Год пишите не в адресе, а в названии документа и в тексте ссылки. Тогда в поиске всегда одна версия, и она актуальная.
- Дата и выход на сайт внутри файла. На первой странице: «Актуальные цены — на странице такой-то», дата и телефон. Тогда файл сам приведёт человека обратно.
- Старые версии — удалить. Архив прайсов, если он нужен бухгалтерии, держите в рабочих папках, а не на сайте.
Коммерческие предложения и договоры: отдельный риск
С прайсом всё понятно: он публичный, вопрос только в актуальности. С коммерческими предложениями конкретным клиентам хуже. Их часто загружают на сайт, чтобы отправить ссылку по почте, и забывают. Если на файл хоть раз сослались публично, его увидит робот, а если папка открыта для просмотра, он найдёт его и без ссылок. В поиске окажется документ с названием компании клиента, суммой и условиями.
Правило простое: всё, что адресовано одному человеку, не должно лежать в открытой папке сайта. Отправляйте вложением или через облачное хранилище с доступом по ссылке. А если такой файл уже нашёлся в выдаче, удалите его с сервера, проверьте код 404 и отправьте адрес в «Удаление страниц из поиска».
С договорами и офертами проще: оставьте на сайте одну актуальную редакцию, при желании закройте её заголовком noindex, а прошлые удалите.
Чек-лист на один вечер
- Введите в Яндексе
site:вашсайт.ru mime:pdf, затем mime:xls и mime:doc. Выпишите все найденные файлы. - Поищите
прайс site:вашсайт.ruицена site:вашсайт.ru: что стоит первым, страница или файл. - В Вебмастере откройте «Страницы в поиске», отфильтруйте адреса по .pdf, .xls, .doc и выгрузите список.
- Пройдитесь по папкам загрузок на хостинге. Проверьте, не открыт ли просмотр каталогов.
- Для каждого файла выберите одно из пяти решений по таблице выше.
- Удалённые адреса проверьте на код 404 или 410 и отправьте в «Удаление страниц из поиска».
- Убедитесь, что страница с ценами содержит цены текстом и дату обновления.
- Через две недели повторите запросы из первого пункта.
Что я предлагаю
Забытые файлы в выдаче — одна из мелочей, из-за которых сайт недобирает обращения. Я занимаюсь SEO-продвижением сайтов и GEO-продвижением в ответах нейросетей напрямую, без агентств, только белыми методами. В SEO с 2005 года, смотрю на сайт глазами покупателя и робота одновременно.
Посмотреть, с какими сайтами я работал, можно в 130+ кейсах с адресами сайтов и в видео-портфолио. Если хотите понять, что ещё мешает вашему сайту, начните с бесплатного экспресс-аудита сайта.
А какой файл нашёлся в выдаче по вашему сайту и какой год на нём стоит?
Источники
- Наблюдения автора по работе с сайтами, с 2005 года.
- Яндекс Вебмастер, справка: «Какие файлы могут попасть в поиск» — форматы, ограничение 10 МБ, индексация PDF.
- Яндекс Вебмастер, справка: мета-тег robots и HTTP-заголовок X-Robots-Tag — поддержка noindex в заголовке и отношение к запрету в robots.txt.
- Яндекс Вебмастер, справка: как скрыть от обхода страницы, которые не нужны в поиске — способы удаления, срок в течение недели, инструмент «Удаление страниц из поиска».
- Яндекс Вебмастер, справка: «Страницы в поиске» — фильтры по адресу, выгрузка, исключённые страницы.
- Справка Яндекс Поиска: поиск по дате, языку и типу файла (оператор mime:) и поиск по страницам и сайтам (оператор site:).
- Google Search Central: введение в robots.txt — запрет обхода не убирает адрес из выдачи.
Увеличьте позиции и продажи вашего сайта
Профессиональное SEO-продвижение с гарантией результата. Выберите подходящую услугу:
Остались вопросы по продвижению?
Меня зовут Анатолий Кузнецов, я SEO-оптимизатор с 20-летним стажем. Разберу ваш сайт, отвечу на вопросы и подскажу, что улучшить для роста позиций в Яндексе.
Связаться со мной →
Комментарии
Держу оптовую базу стройматериалов, и тут не соглашусь. Прорабы и снабженцы как раз любят скачать прайс в Excel, у них свои таблицы, куда они наши позиции вставляют. Страница с ценами им неудобна: три тысячи позиций, листать замучаешься. Убирать файл из поиска — значит усложнять жизнь самым ценным клиентам.
Убирать файл я и не предлагаю, вопрос в том, какой именно файл видит снабженец. Если на сайте один прайс по постоянному адресу и вы перезаписываете его при каждом обновлении, он может спокойно оставаться в поиске. Плохо, когда рядом висят версии прошлых лет и человек открывает не ту. На три тысячи позиций разумно сделать страницы по категориям с ценами текстом, а общий файл дать кнопкой с датой обновления. Тогда розничный покупатель найдёт нужную категорию, а снабженец скачает весь прайс одним нажатием.
Веду бухгалтерию в компании, которая выкладывает прайс в Excel, и обновляем его каждую неделю, иногда чаще. Каждый раз сохраняю файл с датой в названии, чтобы не путаться. Получается, я сама и плодила эти десятки версий? И как тогда быть, если цены правда меняются так часто?
Да, файл с датой в имени при каждой загрузке на сайт получает новый адрес, и старые версии остаются доступными. Для себя храните версии с датами в рабочей папке, а на сайт загружайте один файл с постоянным именем поверх предыдущего. Дату пишите в первой строке таблицы и в подписи к ссылке на сайте. При еженедельных изменениях робот не всегда успевает перечитать файл, поэтому полезно после замены отправить адрес в переобход в Вебмастере. И главное: если цены меняются так часто, страница с ценами на сайте особенно важна, её обновить проще, чем ждать, пока поиск обновит файл.
Работаю в продажах, и это прямо про меня. Каждую неделю кто-нибудь звонит с распечаткой, где цены позапрошлого года, и требует их. Долго не мог понять, откуда они берут этот файл, пока сам не набрал в поиске название нашей компании и слово «прайс». Первым стоял документ, который выкладывали, видимо, ещё до редизайна сайта.
У меня салон мебели, и на сайте лежат каталоги фабрик в PDF, некоторые весят под сорок мегабайт. В поиске я их ни разу не видела. Это потому что они тяжёлые? И если так, может, и делать ничего не надо?
Скорее всего, да: справка Яндекса называет предел в 10 МБ, документы тяжелее робот не индексирует. Но проверить всё равно стоит запросом с вашим адресом и mime:pdf, потому что у фабрик бывают и лёгкие версии каталогов. Второй момент: такие файлы тяжело открываются с телефона, и покупатель может не дождаться загрузки. Если в каталогах есть цены фабрики, которые у вас другие, лучше дать на странице товара свои цены текстом, а каталог оставить как справку с подписью, что цены в нём не ваши. Тогда и в поиске, и на сайте человек видит ваши условия, а не условия производителя.
Делаю сайты, и всегда закрывал в robots.txt всю папку uploads целиком, проблема решена одной строкой. Зачем возиться с заголовками сервера, если есть Disallow?
На WordPress в uploads лежат и картинки сайта, поэтому такой запрет закрывает от обхода все изображения вместе с прайсами. Это бьёт по поиску по картинкам и по тому, как робот видит страницы. Кроме картинок есть второй момент: Яндекс пишет, что при запрете в robots.txt директивы мета-тега и заголовка не действуют, потому что робот не загружает файл. Значит, если позже понадобится тонкая настройка через X-Robots-Tag, она не сработает, пока стоит Disallow. А в выдаче Google закрытый адрес вообще может остаться без описания, документация прямо об этом предупреждает.
Отвечаю за маркетинг на производстве. У нас в поиске много PDF: паспорта изделий, сертификаты, монтажные схемы. По ним приходят инженеры проектных организаций, и это одни из лучших обращений. Их тоже закрывать?
Нет, это как раз пятый случай из статьи: файлы, которые приводят нужных людей. Их стоит оставить и доработать. Добавьте на первую страницу каждого паспорта ссылку на страницу изделия, контакты отдела продаж и дату редакции документа. Проверьте, что в выдаче нет старых редакций с прежними характеристиками, иначе инженер заложит в проект то, что вы уже не выпускаете. И сделайте на сайте страницу изделия, где тот же паспорт можно скачать, чтобы у инженера был путь от документа к заявке.
У меня автосервис, прайс на работы в PDF. Поменял файл месяц назад, а в поиске всё ещё вижу в описании старые цены. Пока не прочитал про переобход, думал, что Яндекс просто сломался. Отправил адрес вручную, посмотрю, как быстро обновится.
Попробовала запрос с mime:pdf по своему сайту салона красоты и нашла прайс трёхлетней давности, про который вообще забыла. А вот mime:docx у меня ничего не показал, хотя договор в Word на сайте точно лежит. Нашёлся только по запросу со словом «договор».
Не вижу трагедии. Клиент позвонил со старой ценой — отлично, это повод поговорить, объяснить, почему подорожало, и продать. Без файла он бы, может, вообще не позвонил.
Леонид, а если он не позвонил, а просто ушёл? У меня интернет-магазин, и на сайте нашлись коммерческие предложения для конкретных компаний, с их названиями и скидками. Их загружали, чтобы отправить ссылку по почте. Звонить по ним никто не будет, а вот увидеть условия другого клиента может любой.
Для тех, у кого nginx без Apache: правило из .htaccess там работать не будет, заголовок задаётся в конфиге сервера. На виртуальном хостинге доступа к нему часто нет, тогда проще написать в поддержку хостинга, пусть добавят.
У меня прайс на сайте вообще картинкой, JPG. Получается, его поиск не читает, и клиент по запросу с ценой страницу не найдёт? Тогда лучше было бы хотя бы PDF выложить?