Новые темы на форуме и их индексирование в Яндексе — что мешает?
Ребята, заметили, что новые темы на форумах часто не сразу попадают в индекс Яндекса или вовсе не появляются? Сам с этим столкнулся, пока админил один небольшой ресурс. Причин несколько, и думаю, полезно будет собраться и обсудить на одном месте, что реально помогает.
Во-первых, Яндекс любит видеть активность и свежий контент, но у него есть собственные фильтры. Если тема слабо наполнена смыслом или почти пустая, или сообщения выглядят как спам, индексирование может не произойти. Второе — технические моменты: проверьте, чтобы у форума не было запрета на индексацию в robots.txt или в метатегах. Часто бывает, что из-за ошибок в настройках кэширования или неправильного sitemap новые страницы не видны поисковику.
Еще важно обратить внимание на скорость появления новой темы на сайте сервера. Если хостинг медленный или форум долго обновляет базу данных, Яндекс может либо пропустить страницу, либо отложить индексирование.
Точно, ещё часто забывают про юзабилити самой темы — если мало комментариев или темы скучные, Яндекс их быстро игнорит. Ну и форумный движок иногда мутит с обновлениями, особенно на бюджетных хостах. В общем, просто кучу мелких штук надо проверить, чтобы всё шло нормально.