Добавлено : 2007-08-16 23:56:24 . Пользователем : BOSS . Все предложения : BOSS . Просмотров - 1144
Граббер 7 популярных поисковиков Google Yahoo Msn Yandex Rambler Webalta Aport .
Скрипт предназначен для извлечения информации с поисковых систем , сбора нужных адресов .
Возможности :
- Выбор нужных поисковых систем для обработки скриптом .
- Выбор количества страниц для просмотра скриптом , количества запросов
- Выбор ключевых слов для поиска по поисковым системам
- Возможность микширования поисковых запросов :
+ с введенными словами в поле формы
+ с Файла любого размера (работает корректно с файлом любого размера)
+ выбор количества страниц для просмотра слов в режиме микширования
- Минус слова - для удаления из результатов поиска , пример слово google.com будут удалены ссылки содержащие google.com
- Плюс слова - для выборки результатов содержащих обязательно данные слова
- Ограничение количества просматриваемых страниц
- Ограничение количество результатов для пля парсинга
- Время скорости соединения сокета с адресом
- Время таймаута если использовать без прокси
- Выбор языка для парсинга
- Выбор доменной зоны для парсинга :
+ 160 доменных зон для реверсивного парсинга
- Включение визуализации
- Включение авто скролла
- Проверка Page Rank :
+ проверка хоста
+ проверка страницы
+ отсеивание с Page Rank ниже нужного
- Проверка ответа по header для выборки только адресов с ответом = 200 (отсев редиректа и мертвых страниц)
- Поиск текста на найденных страницах : (если нужный текст не найден то адрес удаляется из списка)
+ Настройка количества скачиваемых килобайт
- Граббинг данных с найденных страниц , по любому формату :
+ Возможность вытягивания любого текста , например - только между <h1></h1> или <td></td>
+ Настройка количества скачиваемых килобайт
- Возможность работы через прокси :
+ Выбор прокси из файла
+ Выбор прокси с формы
- Возможность сохранения результатов в базу данных :
+ Удаление дубликатов в базе данных
+ Сортировка по Page Rank и имени
- Возможность сохранения результатов в файл
- Возможность установить пароль на доступ к скрипту
Ключевые слова :
Для добавления вашего коментария вы должны авторизоваться , если вы не зарегистрированы то зарегистрируйтесь .