Инструменты для захвата и конвертирования Интернета

Делаем веб-скребок GrabzIt более доступным

Понедельник, Декабрь 4, 2017
Web Scraping перед улучшениями

Наши веб-скребок однако это очень мощный инструмент, который может быть затруднен для использования техническими пользователями. Как вы можете видеть в этом практическом видео из 2016.

Чтобы обойти эту проблему, мы теперь скрываем необработанные инструкции очистки, если они явно не запрашиваются, а на вкладке Инструкции очистки теперь по умолчанию отображаются инструкции очистки на простом английском языке. Фактически, инструкции по чистке теперь могут быть полностью добавлены и удалены без написания какого-либо кода.

Мы также упростили и сделали наш мастер веб-скребков более intслияния четырех независимых волшебников intо один Новый мастер теперь может выполнять несколько действий, каждое из которых отображается только в том случае, если оно применимо к веб-странице. Он также предназначен, чтобы дать пользователю больше intудобные опции, основанные на очищаемой веб-странице.

Но что вы будете делать, если вы пишете блокнот для нескольких разных типов веб-страниц? Чтобы решить эту проблему, мы создали новый система шаблонов это позволяет вам определить, какие инструкции по очистке должны выполняться для каких веб-страниц и действий, и все эти новые функции доступны без написания инструкций по ручной очистке.

Web Scraping после улучшений

Еще одна распространенная жалобаint было то, что было трудно сказать, работала ли очистка, как ожидалось, или нет, чтобы решить эту проблему, журналы теперь также доступны в режиме реального времени. Таким образом, вы знаете, работает ли очистка до ее окончания, давая вам возможность прервать очистку заранее, если это необходимо.

Все эти изменения привели к гораздо более удобному для пользователя восприятию, как показано в последнем учебном пособии по очистке слева.

Однако мы еще не закончили улучшение юзабилити нашего веб-скребка с этими изменениями, поэтому, если у кого-то есть идеи, как его можно улучшить, пожалуйста, свяжитесь с нами,!

Просмотр последних сообщений в блоге