Содержание

Почему яндекс не видит мой сайт а поисковик гугл видит

Автор Алексей Разуваев На чтение 4 мин. Просмотров 4k. Опубликовано

Как только информация добавляется на сайт, нам сразу же хочется, чтобы она попала в топ, или же хотя бы в выдачу. Но у поисковых систем своя программа, к сожалению, они так не делают. Для такого результата необходимо обязательно ждать индексации на протяжении нескольких недель (у некоторых выходит более месяца). Каждый имеет свои методы решения той или иной проблемы, именно поэтому я поговорю о том, как же ускорить сроки индексации проверенными способами.

Многие оптимизаторы имеют регулярные проблемы с ускорением индексации в Яндексе. Я расскажу о самых главных способов, которые помогут вам быстро повлиять на индексацию, а также дадут вам гарантию того, что та или иная страница попадет в индекс. Все зависит от самого сайта, специфики, а также от качества написанных текстов.

Обязательно добавьте сайт в Яндекс.Вебмастер

Это даст возможность вашему сайту не только быть во внимании Яндекса, но еще и возможность вам быть в курсе всех полезных функций. К примеру, вы сможете защитить свой контент от воровства с помощью уникального сервиса «Оригинальные тексты» (это так заявляет сам Яндекс). Но я с уверенностью могу сказать, что такого нет. Даже, если будете добавлять свои новые статьи в сервис «Оригинальные статьи», то все равно, ваша страница со статьей будет находится ниже, если более трастовый сайт опубликовал материал у себя. Лучше в аккаунт Вебмасте Яндекс добавить свою карту сайта.

Социальные сети

Они будут пользоваться популярностью, как в Яндексе, так и Гугл. Стоит обязательно взять на заметку, что Яндекс придает намного больше значения таким сетям, именно поэтому он точно не будет лишним. Если вы являетесь владельцем популярного аккаунта, имеющего большое количество подписчиков, то быстроробот Яндекс никогда не останется в стороне.

Это тоже является большим плюсом к соцсетям. Здесь точно все так же, как и с Гугл: добавляете RSS-канал, устраиваете кросспостинг в Twitter и ставите FeedBurner.

Постоянные обновления на сайте

Очень много сложностей и проблем возникает в том случае, когда сайт содержит очень много новых и разных материалов. Если вы будете добавлять контент с определенным интервалом, к примеру, 2 статьи в неделю, то робот будет посещать ваш сайт очень даже вовремя. Но это только в том случае, если вы уже намучались с Яндексом, и являетесь уважаемым трастовым сайтом для Яндекса.

Реклама Яндекс.Директ

Именно это и является самым действенным методом для ускорения индексации. Добавляя в продвижение рекламу от Яндекс.Директ, поисковая система обязательно сканирует контент. Благодаря этому пользователи будут переходить на ваш сайт. Пойдут первые поведенческие факторы. Индексация таких страниц происходит мгновенно, но не всегда можно ставить такие объявления на каждую страницу.

Как правило, срок индексации может сокращаться до 10 дней. Это не очень радует владельцев сайта, но если сравнивать с месячными проверками, то это достаточно быстро.

Посмотрите видео, как ускорить индексацию в Яндексе и Гугле.

[su_youtube_advanced url=»https://youtu.be/KudzfCP6Ki0″ https=»yes»]

Почему Гугл индексирует быстрее Яндекса?

Меня всегда интересовал этот вопрос. Гугл — более мощная поисковая машина. Здесь очень глупо сравнивать Яндекс и Гугл, потому что Яндекс является локальным поисковиком: экономия на железе, меньшие финансовые ресурсы и т. п. ПС Yandex приходит на ваш сайт реже, чем поисковая система Google. Поэтому, если один из поисковиков проиндексировал страницу, значит остается только ждать, что бы и другой проиндексировал.

Нередко встречал то, что мои страницы с Яндекса тоже появлялись в поиске очень быстро, но такое доступно далеко не всем. Гугл же способен каждую страницу за минуту выводить в индекс. Также стоит отметить индексирование, если рассматривать, сколько страниц проиндексировал Гугл, а сколько Яндекс. Поищите редкие запросы, вы очень быстро увидите, что их в Гугле намного больше, чем в Яндексе.

Яндекс браузер не ищет в поисковике

<a rel=»nofollow» href=»https://lookatlink.com/MFVL» target=»_blank»>https://lookatlink.com/MFVL</a>

выбирай google chrome

Ну ещё бы! Это ж русский браузер, как русская машина. Не даны русским такие тонкости видимо… Сколько тут сижу, вечно вижу как в Яндекс Браузере что-то да не работает…

Вам сюда: <a rel=»nofollow» href=»https://yandex.ru/support/browser-classic/support/support.html#report-problem» target=»_blank»>https://yandex.ru/support/browser-classic/support/support.html#report-problem</a>

Почему Ваш новый сайт не виден в поисковых системах.

Многие начинающие веб-мастера ошибочно полагаю, что после создания сайта он автоматически сразу же должен появится в поисковых системах. И очень удивляются, когда, введя в строку поиска адрес своего сайта, получают в ответ от поисковика «по вашему запросу ничего не найдено». Почему же так происходит?

Поисковым системам нужно время, чтобы узнать о новом сайте, проиндексировать его и занести в свои базы. Обычно 2-3 недели. Если Вы делитесь ссылкой на свой сайт в социальных сетях, то индексация происходит быстрее, потому что сейчас поисковые системы в первую очередь просматривают страницы социальных сетей.

Но Вы можете сами сообщить поисковым системам о Вашем новом сайте. Например, добавить сайт в поисковую систему Яндекс (Yandex) Вы можете по ссылке:

http://webmaster.yandex.ru/addurl.xml

Полезно иметь аккаунт на Яндексе. Тогда Вам будут доступны дополнительные инструменты для работы с сайтом в поисковых системах:  количество страниц в поиске, ТИЦ, внешние ссылки, возможность загрузить карту сайта, отслеживать посещаемость сайта (с помощью очень удобного сервиса Яндекс-метрика) и т. д.

Добавить сайт в Google можно по ссылке:

http://www.google.ru/addurl/

 Здесь также Вам потребуется аккаунт в Google. И также будут доступны дополнительные инструменты для работы с сайтом.

Поисковые системы являются источником бесплатных целевых посетителей для Вашего сайта. Ведь, когда люди ищут информацию, они прежде всего обращаются к поисковым системам.

Но добавление сайта в поисковые системы — это только первый шаг на пути к получению траффика из поисковиков. Ведь люди будут вводить не адрес вашего сайта, а свои конкретные поисковые запросы — слова или словосочетания для поиска нужной им информации. И Вам нужно, чтобы под конкретные поисковые запросы Ваш сайт выходил на первой, максимум на второй странице поисковиков.

Как этого добиться? Я сама пока далеко не профессионал в этом вопросе. Но я знаю, у кого можно и нужно этому поучиться.

Узнать подробнее >>>

Google и Яндекс не индексируют сайт: причины, руководство что делать

Форумы вебмастеров пестрят грустными постами по поводу того, что сайт плохо индексируется поисковыми системами. А ведь это основа SEO-продвижения, без которой популяризация интернет-ресурса практически невозможна.

Обидней всего, когда над созданием web-проекта трудился дорогостоящий программист, а на его наполнение контентом ежемесячно тратится внушительная сумма.

Однако Яндекс и Гугл не спешат индексировать отдельные страницы или даже целый сайт. Почему так происходит?

На этот вопрос нет однозначного ответа: существует множество причин.

Важно выявить конкретную проблему (технические ошибки, дубляж страниц, нестабильную работу хостинга или санкции поисковиков) и сделать все для ее решения. Есть хорошая новость — ситуацию можно исправить. Хотите, знать как? Читайте дальше!

Нормы индексации сайтов

В Яндекс

Yandex сканирует и добавляет новые страницы примерно два-четыре раза в месяц. Попасть в поисковую выдачу раньше способны лишь трастовые и часто обновляемые порталы — внушающие доверие сайты индексируются быстроботом Яндекса ежедневно.

В Google

Что касается Гугла, обновления могут занять от одного дня до двух недель. Здесь многое зависит от категории вашего сайта. Например, ресурсы с актуальными новостями и живые форумы роботы проверяют с завидной регулярностью.

Материалы часто обновляемых порталов обычно сканируются в тот же день или на следующий. Индексация блога, в котором каждую неделю появляется новый контент, нередко задерживается на 2–4 дня.

Совсем печально обстоит дело с третьесортными сайтами, а также совсем молодыми веб-проектами, только что появившимися в Сети. Поисковые роботы могут игнорировать их в течение месяца.

Важно! Вышеописанные данные актуальны при добавлении малого количества страниц в индекс. При добавлении большого количества страниц одномоментно, скорость индексации может увеличиться в несколько раз.

Особенно долго будут индексироваться страницы с малой ценностью для посетителей.

Что делать, если новый сайт не индексируется поисковиками?

Под это определение подходит ресурс с возрастом домена до полугода, который не имеет обратных ссылок и ранее не продвигался.

Добавить сайт в панели вебмастеров

Вы только что создали сайт и ждете чуда под названием «быстрая индексация»? Такая стратегия ошибочная, ведь в первое время Гугл и Яндекс не обращают на новый сайт внимание. Помогите своему проекту заинтересовать роботов — сделать это достаточно просто: надо лишь добавить сайт в поисковые системы.

Важно! Использование сервиса Яндекс. Вебмастер и Google Webmaster не только ускорит добавление страниц в индекс, но и позволит эффективнее работать над оптимизацией сайта. Представленные инструменты бесплатно открывают вебмастерам множество возможностей для диагностики, получения рекомендованных для продвижения запросов и привязки сайта к конкретному региону.

Улучшить сайт

Пора заняться внутренней оптимизацией: систематически создавать первоклассный контент, улучшить юзабилити, сделав удобные рубрики, а также позаботиться об адаптивности и перелинковке. После этого следует задуматься о внешнем продвижении. Оно включает в себя работу с социальными факторами и размещение естественных ссылок у надежных доноров.

Если сайт все так же не индексируется Яндексом, необходимо написать в техническую поддержку поисковика. В результате вашего запроса вы получите информацию о наличии бана, фильтра или установите другую объективную причину возникшей проблемы.

Как проверить индексацию сайта?

Используйте в запросе оператор Site

Узнайте количество просканированных и добавленных в индекс страниц путем введения в строку поиска Гугл и Яндекс «site: url вашего сайта». Благодаря дополнительным настройкам легко получить данные о произошедших за конкретный промежуток времени изменения.

Используйте в запросе оператор Site чтобы проверить индексацию сайта в google

К примеру, сегодняшняя проверка российской версии Википедии показала, что за последние 2 недели на этом сайте появилось 143 новых материалов.

Используйте в запросе оператор Site чтобы проверить индексацию сайта в яндекс

Учтите! Разница между показателями разных поисковых систем является поводом для тревоги. Чаще всего это свидетельствует о возможном попадании под фильтр Гугла или Яндекса.

Введите в поисковик url страницы

Этот способ идеален для проверки индексации отдельно выбранной страницы.
Для Google

url:https://ru.wikipedia.org/

Способ проверки индексации отдельно выбранной страницы для Google

Для Яндекс

info:https://ru.wikipedia.org/

способ проверки индексации отдельно выбранной страницы для яндекс

Через панель вебмастеров

Если вы ранее уже зарегистрировались в Яндекс. Вебмастер, то при переходе на данный сервис сразу увидите число загруженных материалов и тех, что находятся в поиске. В идеале их количество должно совпадать или быть похожим на реальное количество страниц сайта.

способ проверки индексации отдельно выбранной страницы для яндекс способ проверки индексации отдельно выбранной страницы для яндекс

Более детальную информацию вы получите при переходе на основную панель, после чего необходимо нажать «Индексирование» и «Страницы в поиске».

Анализируя полученный отчет и ищите страницы, которые не индексируются.

Проверить индексацию сайта через панель вебмастеров

В новом Google вебмастере также есть инструмент для анализа индексации.

В новом Google вебмастере есть инструмент для анализа индексации

С помощью Key Collector проверяем индексацию большого количества страниц

Скачанный и установленный на компьютере многофункциональный инструмент облегчит работу любому оптимизатору. Он позволяет автоматизировать процесс, значит, вам не придется вручную проверять сотни, а то и тысячи документов.

Чтобы воспользоваться этим методом, требуется собрать парсером список всех страниц, а затем добавить перед каждым адресом оператор url для Google или info для Яндекс. Хотите сэкономить время и нервы — воспользуйтесь для этого автозаменой в блокноте. Дальше надо загрузить полученные данные в Key Collector, не забыв о настройке XML для быстрого анализа результатов.

Также, нужно настроить правильно поисковые системы, для корректного парсинга. URL лучше добавлять без смены регистра.
У проиндексированных материалов в графе «Позиция по запросу» будет стоять единица. Сверьте ваш URL со страницей на первом месте. Они должны совпадать.

Это метод не идеален, но имеет право жизнь.

С помощью Key Collector проверяем индексацию большого количества страниц

Как решить проблемы индексации?

Вариант 1: Сайт долго не индексируется, роботы не видят свежие материалы — в индекс попадает мало новых страниц, процесс осуществляется медленно.

Узнайте далее, что может быть причиной столь плачевной ситуации.

Редкое обновление контента

Для SEO-продвижения нужно вовремя подкармливать роботов новой порцией качественного контента, тогда они будут чаще заходить на ваш сайт. Причем на поведение поисковиков положительно влияют даже незначительные улучшения старых статей в виде более удачных иллюстраций, обновлений даты публикации или добавления цитаты эксперта.

А вот если робот приходит и видит, что за период его последнего посещения ничего не изменилось, сайт не будет нормально индексироваться в будущем. Более того, ждите ухудшения позиций в выдаче: ресурс, остановившийся в развитии, опережают конкуренты.

То есть

Если вы публикуете не регулярно — это может быть причиной. Если это не ваша ситуация, то читайте далее.

Плохое качество контента

За последние годы и читатели, и роботы стали более требовательными к размещенной в Рунете информации. Важную роль играет не только техническая, но и смысловая уникальность / полнота статей, картинок, видео.

При этом ключевые слова должны вписываться в текст естественно, а за переспам есть шанс попадания под фильтры поисковиков.

То есть

Если публикуемый контент малополезен или состоит из 100 слов, то вряд ли он попадет в индекс. Необходимо менять подход к написанию контента или качеству страниц.

Заинтересованы в генерации отличного контента?

Email-маркетинг для интернет-магазина деликатесов в США Email-маркетинг для интернет-магазина деликатесов в США

Возьмите на вооружение LSI-копирайтинг, который сейчас в почете у поисковых систем. При качественном оформлении, полном раскрытии темы с использованием ключей и списка дополнительных синонимов, ассоциаций вам не придется беспокоиться о том, что страница не будет индексироваться в поисковых системах.

Наличие дубликатов

Секретом успешной технической оптимизации является отсутствие одинаковых мета-тегов и текстов; полных копий страниц. Если таковые имеются, закройте лишние данные от индекса при помощи meta name=«robots» content=«noindex, nofollow» или пропишите на них 301 редирект.

В противном случае поисковики запутаются в похожих документах и удалят их из выдачи.

Проблемы с краулинговым бюджетом

Существует определенный лимит на количество страниц, индексируемых роботом за единицу времени.

Краулинговый бюджет Google напрямую зависит от PageRank ресурса. Чем выше данный показатель, тем большее число документов будет проиндексировано. Соответственно, для масштабных сайтов крайне важно повышать критерий своей ценности путем регулярных обновлений, увеличения посещаемости и приобретения ссылок. Иначе некоторые страницы могут не индексироваться в Гугле.

То есть

Если сайт молодой, то у него низкий краулинговый бюджет. И если вы хотите проиндексировать большое количество страниц, то эта процедура может занять на порядок больше времени.

Технические нюансы для ускорения сканирования

Добавление sitemap.xml

Эта карта, созданная для поисковых систем, дает роботам возможность быстро найти все страницы, независимо от их числа и уровней вложенности. Кроме того, она повышает доверие к вашему сайту, позволяет указывать дату обновления и расставлять приоритеты.

Алгоритм действий следующий: сгенерируйте sitemap.xml с учетом стратегии продвижения, загрузите карту в корень сайта и добавьте в панели вебмастеров.

Обновление http-заголовков Last-Modified и If-Modified-Since.

Last-Modified сообщает поисковикам о последних изменениях в документе, направляя роботов сразу к обновленным страницам и свежим материалам.

Ответ сервера на запрос If-Modified-Since снижает нагрузку на краулинговый бюджет, к тому же улучшает позиции контента при сортировке по дате.

Проверить этот заголовок можно тут — https://last-modified.com/ru/if-modified-since.html

Вариант 2: Сайт вообще не индексируется в Яндексе и Гугле, страницы выпадают из индекса.

Код ответа сервера

Убедитесь, что страница содержит код сервера 200 ОК — это означает: она действительно существует, доступна к просмотру для пользователей и поисковых систем.

Проверка осуществляется при помощи специальных сервисов.

Например, http://www.bertal.ru/index.php?a1910327/
Если код ответа не 200 ОК, то именно в этом может быть причина не индексации страницы.

Robots.txt

В файле robots.txt недопустимы запреты на индексацию сайта и отдельных страниц, а также работу конкретного поисковика.

Важно! Обязательно проверьте сформированный robots.txt на ошибки. Сделать это можно в Google Вебмастер: нажмите на «Сканирование», а затем на «Инструмент проверки файла robots.txt».

Инструмент проверки файла robots.txt search console

Meta Robots

Часто сайт не индексируется в Гугле, если добавление сведений в базу данных запрещено в мета-тегах. Обязательно удалите в HTML-коде строкии если они есть на важных страницах.

Чтобы проверить откройте код страницы и сделайте поиск строки.

Часто сайт не индексируется в Гугле, если добавление сведений в базу данных запрещено в мета-тегах

Либо используйте плагины для браузера, такие как расширение Seo Meta in 1 Click для Google Chrome.

расширение Seo Meta in 1 Click для Google Chrome

Rel Canonical

Многие неопытные оптимизаторы неверно настраивают атрибут rel=canonical.

Хотите, чтобы страница попала в индекс поисковика? Тогда она не должна ссылаться на другой канонический документ.

Чтобы проверить откройте код страницы и сделайте поиск строки.

Многие неопытные оптимизаторы неверно настраивают атрибут rel=canonical

Либо через тот же плагин

плагин Seo Meta in 1 Click для Google Chrome

Вебмастера

Используйте Google Webmaster Tools для выявления ошибок сканирования, из-за которых роботы не получают ответы на запросы.

Перейдите в раздел «Просмотреть как Googlebot» введите адрес страницы, и нажмите кнопку «Получить и отобразить».

Перейдите в раздел «Просмотреть как Googlebot» введите адрес страницы, и нажмите кнопку «Получить и отобразить»

Когда получите результат, сравните, что видит Google и пользователь. Картинки должны быть одинаковыми. Если нет, то ищите причины блокировки файлов.

Картинки должны быть одинаковыми. Если нет, то ищите причины блокировки файлов

Протестируйте скорость загрузки и время ответа сервера. Убедитесь, что выбранный вами хостинг работает стабильно.

Файл .htaccess

Если сайт не индексируется, он может быть заблокирован в файле .htaccess.

Проверьте .htaccess на наличие таких строк:

RewriteCond %{USER_AGENT} Googlebot
RewriteRule.* — [F]

Либо такой вариант, который будет отдавать роботу Google 404 ошибки.

RewriteCond %{USER_AGENT} Googlebot
RewriteRule.* — [R=404]

Поищите в файле другие варианты блокировок с использованием USER_AGENT или названия поисковых ботов: googlebot, yandex и т. д.

AJAX и JavaScript

Распространены проблемы с языками AJAX и JavaScript. Блог Яндекса для вебмастеров рекомендует создать в структуре ресурса определенную схему, которая сообщит поисковым системам о необходимости индексации.

Санкции

Еще одна серьезная проблема — наложение санкций на страницу или даже весь сайт. Узнайте в техподдержке поисковой системы (только Яндекс), за что именно (ссылки, переспам, неуникальный контент) вас наказали, после чего оперативно исправьте ситуацию.

Как уже говорилось ранее, причиной отсутствия внимания к странице часто является низкокачественный и дублированный контент.

Вряд ли робот будет заинтересован в ваших материалах, если в выдаче уже имеются похожие документы, продвигаемые по тому же семантическому ядру.
Негативно влияет на скорость индексирования незрелый возраст домена, а также забаненный ранее б/у домен. В таком случае стоит написать запрос на пересмотр в Яндекс.

Итоги

Если сайт не индексируется Яндексом или Гуглом, значит, на то есть объективная причина. Ваша цель — выявить и решить проблему. Спустя некоторое время необходимо снова проверить индексацию страницы. Если вы все сделаете правильно, положительные изменения не заставят себя долго ждать!

Если у вас сложный случай, рекомендую обратиться за консультацией к специалистам. Команда Livepage проконсультирует и выполнит SEO-аудит, который решит все проблемы с индексацией в поисковых системах.

Почему Яндекс не индексирует сайт (9 причин) и что делать?

Яндекс не индексирует сайтЯндекс не индексирует сайт

  Почему плохо с индексацией в Яндексе?

Эта заметка посвящена разбору ответов на вопросы по индексации Яндексом страниц сайта. Вопросов весьма много, но все они похожи. Думаю, данная статья и будет ответом на все из них.

Как правило, подобные вопросы приходят от новичков в таком виде: Яндекс не индексирует страницы кроме главной, а с Google всё в порядке — почему, что делать?

Вообще, прежде чем беспокоиться, нужно знать следующее: Яндекс (за редким исключением) всегда всё индексирует медленнее Google.

Так что если вы недавно создали свой первый сайт, отправили его в инструменты вебмастера Yandex и Google и в Гугле всё проиндексировалось быстро, а в Яндексе какие-то задержки — нужно просто подождать. Обычно до месяца, в среднем — 2 недели.

Теперь рассмотрим более тяжёлые случаи. Рассматриваются, прежде всего, «белые и хорошие» веб-ресурсы, не попавшие под фильтры, санкции поисковиков, а недавно созданные, но имеющие проблемы с индексацией Яндексом.

Почему Яндекс не индексирует сайт (в то время как с Google всё Ok)

1) Robots.txt

Не закрыт ли вход на ваш сайт — посмотрите подробный материал про файл Robots.txt. Вероятность того, что вход поисковым роботам закрыт «случайно» близка к нулю, но всё-таки проверить можно.

2) Тег noindex

Тег «noindex» какой-нибудь код «/noindex» используется для того, чтобы какой-нибудь код не попал в индекс Яндекса. На некоторых веб-ресурсах бывает ошибка: где-нибудь в шапке сайта этот noindex открыли, а закрыть забыли :).

:).:). В результате весь код страницы получается «спрятанным» от робота.

3) Язык сайта

Всё-таки Yandex ориентирован больше на Рунет, поэтому могут быть проблемы с индексацией, если язык вашего сайта отличен от языков стран СНГ. Но даже если и так, то следует обратиться в Службу поддержки вебмастеров.

Если и Яндекс, и Google и другие ПС сайт не индексируют

В дополнение к предыдущему. Если замечаете, что есть какие-то проблемы и с другими ПС, то следует кое-что проверить.

4) Мета-тег Robots

Если вдруг на странице есть что-нибудь такое: 

пример записи мета роботс

пример записи мета роботс

то такая страница не будет индексироваться. Смотрите подробнее о мета-теге Robots.

5) Кривая HTML-разметка

Если нарушена вложенность тегов, например, есть что-то такое:

невалидная разметка

невалидная разметка

то у поисковых роботов могут возникнуть проблемы с разбором содержимого страницы. В результате страница или не проиндексируется вовсе, или будет ухудшено её ранжирование.

6) Время загрузки сайта

У всех поисковых роботов есть лимит по обращениям к веб-страницам. Если после нескольких обращений страница не отреагировала, то робот так и не узнает, что же нужно было поместить в свой индекс.

Это не значит, что для успешной индексации необходима загрузка страниц за доли секунды, но хотя бы 4 секунды — уже хорошо. Посмотрите, как проверить скорость загрузки страниц сайта.

На время загрузки сайта влияет также качество хостинга. Если с вашим хостингом не всё в порядке — посмотрите универсальную инструкцию по переезду на новый хостинг.

7) Ошибки сервера с кодом 4xx и 5xx

Прежде всего, это ошибка 500 — внутренняя ошибка сервера. Её возникновение связано, опять же, с качеством хостинга, а также с корректностью серверных скриптов на сайте.

Ну и ошибка 404 (страница не найдена) для существующих на самом деле страниц. Бывает и такое: страница есть, всё с ней нормально, но выдаёт она код 404. Поэтому поисковый робот (думая, что её нет) не индексирует её.

Для справки — посмотрите здесь какой должна быть страница 404.

8 ) Не настроена склейка домена с www и без www

Это не всегда вызывает проблемы, но лучше бы, чтоб ваш веб-ресурс открывался по однозначному адресу — одно из двух

  • http://site.ru
  • http://www.site.ru

Для Яндекса настроить всё это можно в файле Robots.txt или указать главное зеркало в панели вебмастера. Но лучший вариант — правильно настроить 301-й редирект в файле .htaccess. Уже готовый файл .htaccess есть в 3-м уроке этого СЕО-курса.

9) Самое неприятное — домен с «плохой» историей

Возможно, вам удалось подобрать такое доменное имя для своего сайта, которое в прошлом заслужило отрицательный авторитет у поисковых роботов.

Например, это был дорвей или adult-ресурс. Или он очень активно торговал ссылками с автобирж (Sape и др.), за что получил бан в Яндексе/Гугле (ну или что-то помягче, но тоже ничего хорошего).

В общем, если на этом домене был сайт, злоупотреблявший Black-SEO методами, то к вашему ресурсу поисковики будут некоторое время относиться по-особому и долго не будут индексировать по-нормальному.

Так, например, было с web-ru.net. Мне показалось, что это неплохое доменное имя и я сразу купил его, не проверив его историю (как это делается — читайте про историю домена и как её узнать).

Домен был куплен 29 октября 2011, первые публикации начались в ноябре. Но до 27 декабря в индексе была только одна страница. Причём Яндекс как будто дважды проиндексировал главную страницу:

Яндекс не индексирует сайт, кроме главной страницыЯндекс не индексирует сайт, кроме главной страницы

  Yandex ошибся в рассчётах

Если у вас в панели Яндекс.Вебмастер есть подобные глюки — то связано это, скорей всего, с плохой доменной историей.

В моём случае web-ru.net влетел в индекс поисковиков (как Гугла, так и Яндекса) лишь под новый год (2012).

Ранее на данном домене располагался какой-то автомобильный ресурс, очень активно торгующий ссылками с автобирж, имеющий вредоносный код и ещё делающий что-то плохое :).

:).:).

В общем, это наверное всё, из-за чего Яндекс не будет индексировать нормальный, человеческий сайт. Повторюсь, здесь я не упоминаю о фильтрах и разных наказаниях, их может быть много и приобретаются они уже по мере развития ресурса.

Если же с вашим сайтом всё нормально (исходя из 9 описанных выше пунктов), то нужно подождать.

Но никогда не следует стесняться писать в поддержку Яндекса — люди там отзывчивые и отвечают всегда (хотя время ответа может затянуться и на пару недель).

Обращение в поддержку может, например, вывести ресурс из пугающего многих вебмастеров АГС и т.п.

А по поводу индексации просто пишем:

Мне кажется, с моим проектом всё нормально, он новый, недавно созданный, но Яндекс почему-то не индексирует сайт. Что мне делать?

Вот и всё. Отвечают конкретно или же многозначительно намекают ;).

;). ;).Loading…
;).

Почему Яндекс не индексирует сайт: раскрываю секрет

Многие сеошники на различных форумах часто спрашивают, почему Яндекс не индексирует сайт. В данной статье я постараюсь подробно ответить на этот вопрос и напишу возможные причины, почему все-таки Яндексу так сильно не понравился ваш ресурс, что он не хочет его индексировать.

почему яндекс не индексирует страницыпочему яндекс не индексирует страницы

Итак, давайте перейдем сразу к делу.

1. Сайт очень молодой.
Если вы недавно зарегистрировали домен и начали писать статьи, то можете не переживать, все с вашим проектом нормально. Яндекс очень долго индексирует молодые ресурсы, иногда приходиться ждать несколько месяцем, да-да, и такое бывает.

Если ваш сайт очень молодой, то вполне возможно, что Яндекс его еще не нашел в интернете. Но вы можете помочь ему это сделать. Сейчас есть очень много способов, которые позволяют ускорить индексацию блога. О них вы можете прочитать здесь. Если проделаете все то, что там написано, то через неделю ваш сайт точно проиндексируется в Яндексе, а возможно и быстрее.

2. Санкции от поисковых систем.
Если сайт уже не молодой, и он был в индексе, но потом внезапно вылетел, то, скорее всего, Яндексу что-то не понравилось, и он наложил на него санкции. Этих санкций есть очень много, но самая популярная, это фильтр АГС. Некоторые спрашивают: «Почему Яндекс не индексирует сайт кроме главной страницы?». Если в индексе только главная страница, то, скорее всего, сайт находиться под АГС. О том, как проверить блог на АГС и как вывести его оттуда, я писал тут.

Кроме АГС сайт также мог попасть в Бан — это когда с индекса вылетают все страницы.

3. Случайный запрет индексации.
Многие новички по ошибке могут запретить индексировать сайт. Для примера в файле robots.txt за запрет индексации отвечает такая сточка:

[code lang=»js»]User-agent: *
Disallow: /[/code]

Если вы хотите, чтобы ваш ресурс нормально индексировался в поисковых системах, то этой строчки не должно быть в robots.txt.

Кроме этого есть и другие способы, с помощью которых можно случайно запретить поисковикам индексировать сайт. Если у вас ресурс сделан на движке wordpress, то перейдите в «Панель управление» — «Настройки» — «Чтение» и проверьте, чтобы возле надписи «Рекомендовать поисковым машинам не индексировать сайт» не было чекбокса.

почему яндекс не индексирует сайт кроме главной страницыпочему яндекс не индексирует сайт кроме главной страницы

4. Ошибка сервера.
Иногда может быть такое, что поисковый робот заходит на сайт, а ему выдается 505 ошибка. Конечно он сразу же покинет этот сайт, и думаю, еще не скоро на него вернется :smile:.

Если вы заходите на свой блог и часто видите 505 ошибку, то это очень плохо, советую сменить хостинг. Есть также и много других ошибок (500, 404, 302) и т. д. Но думаю, вам не стоит забывать этим голову. Просто, проверьте, ответ сервера, он должен быть 200 ок. Проверить можно на этой странице:

ответ сервераответ сервера

5. Плохая история домена.
Если вы зарегистрировали новый домен и не проверили его историю, то это очень плохо. Может быть такое, что на этом домене был когда-то давно гавносайт и поисковые системы его забанили. Даже если вы теперь создали другой белый и пушистый ресурс, поисковики знаю историю, и поэтому могут его не индексировать. Я недавно писал статью о том, как проверить историю домена. Можете воспользоваться этой инструкцией.

6. Неуникальный контент.
Если на молодой сайт начать опубликовывать неуникальные статьи, то это очень плохо, поисковые системы могут перестать его индексировать или индексировать хуже.

Некоторые вебмастера считаю, что ничего страшного не произойдет, если копипастить статьи на других сайтах, главное чтобы посетителям нравилось. Но я думаю, что это так считаю только те люди, которым лень писать. Ведь, так намного проще, нашел, скопировал, вставил :smile:. За день можно опубликовать 100 статей, а через несколько лет уже будет целая википедия.

В общем, не слушайте никого, кто говорит, что можно копировать чужие статьи. Если вы хотите продвинуть сайт до большой посещаемости и зарабатывать потом на сайте деньги, то нужно писать статьи самостоятельно или заказывать у копирайтера, но обязательно проверять их на уникальность.

Итак, мы разобрали основные причины, почему Яндекс не индексирует страницы сайта. Если вы до сих пор не нашли ответа на свой вопрос, то можно поступить по-другому. Советую задать этот вопрос сотрудникам Яндекса. Это можно сделать здесь. Просто опишите свою ситуацию максимально подробно, и ждите ответа. Через несколько дней они отпишут вам.

На этом все на сегодня. Удачи вам, друзья! Желаю, чтобы ваш сайт быстро проиндексировался :smile:.

Компания Яндекс — Принципы — Поиск Яндекса и контент для взрослых

По данным робота Яндекса, количество сайтов, посвященных «взрослому» контенту, в Рунете составляет 3,27%. Однако продвижение этих сайтов настолько агрессивно, что многие пользователи натыкаются на эротический контент непропорционально часто — даже если не ищут его целенаправленно. Дело в том, что порно-ресурсы — это бизнес. Необязательно в виде прямой продажи доступа к контенту. Сайты «для взрослых» часто распространяют вирусы, которые потом используются для спама и мошенничества. Получить легальную рекламу порно-ресурсы по понятным причинам не могут, и для продвижения используют в основном серые и черные методы. Поэтому, в частности, такие сайты могут появляться в результатах поиска по самым разнообразным запросам. С точки зрения пользователя, который не искал эротики и порнографии, «взрослые» результаты поиска нерелевантны, и, к тому же, могут шокировать.

Мы хотим обеспечить всем нашим пользователям, в том числе и тем, которые не интересуются каким-либо эротическим контентом, релевантные результаты поиска. Под «материалами для взрослых» мы подразумеваем страницы, которые родители не хотели бы показывать своим детям раньше времени. Мы считаем, что если в поисковом запросе явно не выражено намерение найти именно порнографию и ничего другого, то поисковая машина не должна предлагать в результатах поиска ссылки на ресурсы с эротическим содержанием. Например, пользователь, задавший запрос [рассказы] или [ролики], совершенно не обязательно ищет порнографию. А пользователям, которые таки ищут именно ее, нужно уточнить запрос, явно указав свой интерес.

На многих сервисах Яндекса, например, в поиске по картинкам, поисковых подсказках, «прямом эфире», Яндекс.Директе, уже применяются различные технологии фильтрации «взрослого» контента. Теперь Яндекс и в результатах веб-поиска фильтрует сайты с эротическим содержанием по тем запросам, в которых явно не выражен интерес к порнографии. Введение фильтра в результатах поиска никак не скажется на процессе индексации сайтов со взрослой тематикой. Фильтрация никак не отразится и на ранжировании сайтов для взрослых по запросам, где такие результаты уместны. Мы не удаляем сайты с эротическим содержанием из индекса, а стараемся не показывать их по запросам, не подразумевающим потребность в контенте для взрослых. Только лишь если сайт был закрыт (вследствие нарушения закона или по каким-то другим причинам), мы как можно скорее исключаем его из поиска. Режим фильтрации порно включен по умолчанию. Если по каким-то причинам такие ограничения неудобны, можно их отключить, выбрав в настройках поиска режим «без ограничений». В этом режиме Яндекс перестанет отфильтровывать из результатов поиска порно-ресурсы. Кроме того, с 1999 года на Яндексе существует «Семейный поиск». Он отфильтровывает из результатов поиска любые сайты с эротическим содержанием даже по прямым запросам (например, [порно]). «Семейный поиск» удобен для родителей, которые хотят гарантировано оградить своих детей от порно-ресурсов.

Страницы, сайты и картинки фильтруются Яндексом автоматически. Для определения «порнографичности» страницы используются, в первую очередь, тексты и слова, размещенные на этой странице (в том числе — в ссылках). Используются и многие другие факторы. Например, если на сайте много страниц «для взрослых», содержащих соответствующую лексику, то, с большой вероятностью, из результатов поиска будут отфильтрованы и другие страницы с этого сайта, даже те, которые такую лексику не содержат. Также учитывается, используются ли картинки с этого сайта на других сайтах «для взрослых», связан ли сайт большим количеством ссылок с порно-сайтами и т. д.

Фильтры достаточно надежно исключают нежелательный контент из результатов поиска, однако иногда могут не срабатывать или ошибаться. Если вы нашли страницу для взрослых при поиске с включенной фильтрацией, пожалуйста, пришлите нам ее через форму обратной связи. Тогда мы сможем улучшить настройку фильтров. Если вы уверены, что ваш сайт не содержит взрослого контента, но при включении фильтра он пропадает из результатов поиска, напишите нам через сайт Яндекс.Вебмастер, и мы постараемся решить возникшую проблему.

Отправить ответ

avatar
  Подписаться  
Уведомление о