Этот браузер не самый удачный. Я его попробовал и был очень доволен, когда снес его из своего компа. По моему опыту основным браузером должен быть Опера, дополнительным FF и, как ни странно, IE. Разумное сочетание этих браузеров позволит вам открыть любой сайт в Инете.
Добрый день! Можно воспользоваться прокси-серверами или другими сервисами например анонимайзеры например Hideme.
Как для чего?! Для того, чтобы любой пользователь этой поисковой системы, мог увидеть, что именно ищут различные люди в Яндексе, прямо сейчас. Непосредственно в момент захода на этот сайт, как сейчас принято говорить, - онлайн!
Читала, что сами представители Яндекса говорят - факторов, влияющих на индексацию теперь - примерно 800. И все их представители Яндекса не разглашают...
Одно только сказали - не учитываются внешние ссылки на сайт теперь.
Вроде как идея у Яндекса такая - сделать поиск для людей (а не поиск для роботов). То есть, индексацию делать все равно, понятно, роботы, но для людей - по новым алгоритмам.
Очень сложно все это, когда не раскрывают всех правил игры(
Я тоже подумала, что не один БВ под раздачу попал... Наверное, и другие сайты...
Проиндексирует обязательно, и абсолютно все страницы, кроме запароленных (например админки и зашифрованных страниц) и не индексируемых (например флешь страниц и некоторых текстовых документов), но если движок самописный, то вы можете не досмотреть и проиндексируются личные данные админки - в случае с известным движком индексирование личной информации из ряда фантастики, хотя были (смс и ммс сообщения мегафона).
Писать файл "Робот" нужно только для особых нужд: для того чтобы не попасть в бан за излишнюю сео-оптимизацию, и для того чтобы в поиске попадал только нужный контент, а не клоны типа архивов рубрик и тп (там где контент идентичен, а его адрес разный - некоторые роботы индексаторы прекращают индексировать целый сайт).
Если вы используете блоговые движки, то лучше не надо заморачиваться если не умеете, так как поисковики обучены правильно индексировать например Вордпрес или ДЛЕ, а так как програмисты не спешат раскрывать верных алгоритмов индексации, в сети полно неправильных описаний создания файлов Роботс, а что бы понять АПИ Яндекса, например, нужно въе...ть стакан водки, заесть перцем и прочитать до конца.