Те кто столкнулся с парсингом большой базы, наверняка, заметили, что Google, показывает пользователю не больше 1000 результатов, даже если пишет, что нашел в своей базе 1 564 800 совпадений. Так в чем же проблема? Как увидеть остальную выдачу?

Тут приходится прибегать к хитростям:
1. Доменные зоны. Каждый сайт имеет свою доменную зону (ru, com, co.uk, info, biz, net……………). Этим можно воспользоваться. ВGoogle есть возможность использовать в выдаче домены которыевключают в себя интересующую нас часть:
inurl:».com» – и мы получим выдачу долько com’овской заны
Интересные мысли уже посещают?
Ну да, способ безусловно хороший, но вот беда: иногда получается так, что процентов 90 у нас и так в зоне .ru, к примеру. Получается, что вся выдача все равно не помещается в отведенную нам тысячу!
И тут в помощь нам приходит способ исключения:
2. Исключение лишних слов. Аналогично с тем как мы использовали inurl:, можно воспользоваться и его исключением -inrul: и исключать из запроса сочетания букв, слов и т.д, например такой запрос:
inurl:»forum» inurl:».com» показывает нам 13 000 000 совпадений, а
inurl:»forum» inurl:».com» -inurl:»www» уже 2 700 000
Далее можем еще поиграть с intext:, так например исключив еще из поиска и -intext:forum мы получим вообще 400 000 результатов.
И теперь играясь с исключением общих слов, типа «главная», «сайт», «main», а так же исключая из URL’а элементарные сочетания: aa, ab, ac, ad…… мы добьемся максимальной выдачи
Дерзайте!





Главное меню













Добрый день!!
Вы не могли бы более конкретно указать где и как это делать!!!
Если речь идет о Google, то какой смысл в твоём вопросе? О.о
И тут в помощь нам приходит способ исключения:
2. Исключение лишних слов. Аналогично с тем как мы использовали inurl:, можно воспользоваться и его исключением -inrul: и исключать из запроса сочетания букв, слов и т.д, например такой запрос:
где мы используем этот inurl
Это нужно идти на сайт googla или как то по другому,просто я совсем зеленный в этом
Это в строке поиска вбивать нужно
Спасибо !! эту часть я понял
а как этим воспользоваться для своего сайта
надо поменять keyword или что то еще
А можно то же самое, с правильными знаками препинания и желательно на этот раз со смыслом?
все очень просто я хочу поднять свой сайт
систему с исключениями я понял , я добился каких то результатов
теперь вопрос в том,как это использовать на практике, то есть куда мне нужно все это прописать или указать , что бы робот находил мою ссылку в этой первой 1000
А я то думаю, где подвох
С таким вопросом советую сюда же на форум обратиться, а парсинг результатов поиска тебе еще определенно не к чему…
Maksim, дело в том, что эта тема не имеет ни какого отношения к тому, что тебе нужно
Maksim, задай тут вопрос http://www.zu1.ru/forum
Я подробно постараюсь объяснить.