Архивы блога

Управление приложениями Windows в Human Emulator

Сегодня я расскажу как можно управлять любыми приложениями Windows в Human Emulator’е на уровне эмуляции действий пользователя. Управление осуществляется по следующему сценарию : поиск и подключение к нужному нам приложению через его окно, используя различные варианты поиска (по номеру,тексту окна,классу

Опубликовано в Human Emulator, PHP, Обучение Метки: , , ,

Human Emulator — запуск из командной строки

Этой статьей я продолжу цикл статей о тонкостях использования хуман эмулятора для сбора данных. Предыдущие два сборщика запускались в один поток без использования прокси и из под хуман эмулятора. Чтобы запускать мультипоточно Human Emulator нам понадобятся параметры командой строки. Для

Опубликовано в Human Emulator, Общая информация Метки: ,

Сборщик слов с Google.KeywordPlanner

В предыдущей статье я создал сборщик поисковых фраз с Yandex.Wordstat. Для  этого я использовал Human Emulator. Сегодня я создам сборщик ключевых слов, который будет получать информацию с Google Keyword Planner. Этот инструмент доступен для создания Adword-овых компаний и доступ к

Опубликовано в Human Emulator, Обучение, Сбор ключевых слов Метки: , , ,

Сборщик слов с Яндекс.Вордстат

В прошлых статьях я сделал обзор функционала программы Human Emulator. В этой статье мы напишем сборщик, который будет собирать информацию с Яндекс.Вордстат в режиме эмуляции браузера. Для многих сайтов режим эмуляции браузера это практически единственный доступный вариант для их парсинга.

Опубликовано в Human Emulator, Сбор ключевых слов Метки: , , ,

Human Emulator, и базовые системные Операции

Этой статьей я продолжу описание использования XWeb Human Emulator для решения задач сбора данных. Сегодня поговорим о функционале, предоставляемом PHP объектами из категории SYSTEM: clipboard – работа с буфером обмена. Данный объект полезен для обмена информацией через буфер обмена. Например для того

Опубликовано в Human Emulator, Обучение, Общая информация Метки: , ,

Использование Human Emulator для сбора данных

Часто в процессе сбора данных, одного запроса урла через CURL недостаточно, например нужна авторизация с поддержкой флэша, данные появляются на странице через JS или еще либо как-то. Для этого существуют программы, которые позволяют автоматизировать браузер. (Эммуляторы и Автоматизаторы браузера) Т.е

Опубликовано в Human Emulator, Общая информация Метки: , , , ,

Пишем простейший сборщик, использующий Google API на PHP. (Увеличение эффективности Прокси)

В прошлых постах, я создал многопоточный сборщик поисковых результатов Google API на PHP. Из опыта использование получилось что скорость его работы сильно зависела от качества использованных проксей. Сегодня я видоизменил механизм использования проксей в этом сборщике. Для этого был полностью

Опубликовано в PHP, Использование Web API, Обучение Метки: , , , , ,

Пишем простейший сборщик, использующий Google API на PHP. (Классы)

В предыдущем посту я рассказывал как организовать многопоточный сбор поисковых результатов через Google API и обещал показать как происходит оптимизация и сделать нормальную структуру кода. Для этого я перевел все на классы и объекты. Разбил большие функции на более понятные.

Опубликовано в PHP, Использование Web API, Обучение Метки: , , , , ,

Пишем простейший сборщик, использующий Google API на PHP. (Многопоточность)

В прошлый раз я описал как организовать сбор данных на PHP, используя прокси сервера. Скрипт брал слова из файла и запрашивал поисковые результаты по ним через Goggle API. Все это работало через прокси, что существенно повышало скорость работы с Google API.

Опубликовано в PHP, Использование Web API, Обучение Метки: , , , , ,

Пишем простейший сборщик, использующий Google API на PHP. (Прокси)

В прошлом посту я описал, как создать  сборщик, который собирает поисковые результаты Google, используя Google API в цикле с возможностью прерывания и продолжения. Теперь я расскажу как сделать чтобы этот код работал быстрее. Для этого я уберу паузы между запросами и сделаю

Опубликовано в PHP, Использование Web API, Обучение Метки: , , , ,
Ноябрь 2017
Пн Вт Ср Чт Пт Сб Вс
« Фев    
 12345
6789101112
13141516171819
20212223242526
27282930