Доброго времени суток. Для начала, необходимо разобраться, как устроены поисковики и боты-индексаторы.
Первобытные поисковики
В конце XX века ещё не было подходящих технологий для создания ЭВМ, способных самостоятельно индексировать десятки сайтов в секунду. Каждый владелец сайта в Интернете должен был отправить электронное письмо "хозяину" поисковика чтобы добавить такой-то веб-узел в поисковые результаты. В общем, вручную выполнялся следующий алгоритм:
- Получаем электронное письмо от владельца сайта
- Сохраняем основной контент с веб-сайта на своём сервере
Конечно, этого периода не застал "Большой Вопрос.Ru", стартовавший в 2011 году.
Устройство современных поисковых систем
Понятное дело, сегодня уже не люди лазают по Интернету и собирают все данные с каждого сайта дабы залить их на сервера поисковика. С наступлением XII века пришла эра мощнейших электронно-вычислите<wbr />льных машин, способных проделывать вышеуказанные действия без запроса от владельца сайта в десятки раз быстрее. Для этого ещё в начале тысячелетия была изобретена специальная программа - робот-индексатор. Её алгоритм примерно таковой:
- Запускаемся
- Обращаемся к DNS-серверу с просьбой вывести список всех доменов (bolshoyvopros.ru, danila.ru и подобные адреса)
- Заходим на один сайт из полученного списка
- Получаем HTML-код главной страницы сайта
- Загружаем все данные на сервер поисковой системы, указываем адрес
- Переходя по каждой ссылке на странице, выполняем пункт 5
- Когда все найденные страницы этого сайта сохранены на сервере, повторяем пункты 3-6, пока не закончатся сайты
- Выполняем пункт 2 и проходимся по каждому сайту.
- Все найденные изменения загружаем на сервер.
Конечно, как устроен бот-индексатор, например, "Яндекса" Вам никто не скажет - коммерческая тайна.
для компании - огромная - поиск и анализ погрешностей стоит дорого. а тут - пользователи сами да бесплатно, да с радостью (точнее злорадством) сообщают (радуются глупыши, что утерли нос такой компании, а компания хихикает над ними...)
Seo тебе в помощь брат. Система продвижения. Разбирайся.
Повысить популярность, привлечь читателей на сайт может только интересный (или нужный) контент. На какие бы ухищрения не пускались умельцы-программисты, ни один человек не станет находиться на сайте, информация на котором его не интересует.
Поисковые роботы давно научились распознавать случайное "попадание" на сайт от преднамеренного. Секундное или минутное посещение не придаст Вашему сайту никакого веса в "глазах" поисковой машины. Поэтому единственная дорога, способная вывести сайт на путь популярности - способности и талант автора, умеющего найти и вовремя подать нужную или интересную информацию.
Я постоянно пользуюсь исключительно Яндексом! Меня всё в нём устраивает: оформление, виджеты и т. д. Как бы не хвалили Google , лично меня он не зацепил!