Инструменты для захвата и конвертирования Интернета

Делаем веб-скребок GrabzIt более доступным

04 декабря 2017
Парсинг веб-страниц до улучшений

Наши веб-скребок Это очень мощный инструмент, однако нетехническим пользователям может быть сложно его использовать. Как вы можете видеть в этом практическом видео 2016 года.

Чтобы решить эту проблему, мы теперь скрываем необработанные инструкции по очистке, если это явно не запрошено, а на вкладке «Инструкции по очистке» теперь по умолчанию отображаются инструкции по очистке на простом английском языке. Фактически, инструкции по очистке теперь можно полностью добавлять и удалять без написания кода.

Мы также упростили и сделали наш мастер веб-скрапера более удобным. intудобен за счет объединения четырех независимых мастеров intо один. Новый мастер теперь может выполнять несколько действий, причем каждое действие отображается только тогда, когда оно применимо к веб-странице. Он также предназначен для того, чтобы дать пользователю больше intудобные параметры в зависимости от считываемой веб-страницы.

Но что делать, если вы пишете парсинг для нескольких разных типов веб-страниц? Чтобы решить эту проблему, мы создали новый система шаблонов это позволяет вам определить, какие инструкции по очистке следует выполнять для каких веб-страниц и действий, и все эти новые функции доступны без написания инструкций по очистке вручную.

Парсинг веб-страниц после улучшений

Еще одна распространенная комплаint заключалось в том, что было трудно определить, работает ли очистка должным образом или нет, чтобы решить эту проблему, результаты и журналы очистки теперь также доступны в режиме реального времени. Таким образом, вы узнаете, работает ли очистка, до ее завершения, что дает вам возможность при необходимости прервать очистку раньше.

Все эти изменения привели к гораздо более удобному для пользователя опыту, как показано в последнем уроке по парсингу слева.

Однако мы еще не закончили улучшать удобство использования нашего веб-парсера с помощью этих изменений, поэтому, если у кого-то есть идеи о том, как его можно улучшить дальше, пожалуйста. Контакты!

Просмотр последних сообщений в блоге