Запуск Crawlee, библиотеки веб-скрейпинга и автоматизации браузера для Node.js

Здравствуйте, мир!

Сегодня, опираясь на многолетний опыт нашей команды, мы запускаем Crawlee, библиотеку веб-скрейпинга и автоматизации браузера для Node.js, которая создана для быстрой разработки и максимальной надежности в производстве.

Основные характеристики

🖼 Поддержка безголовых браузеров с Playwright или Puppeteer

⚡️ Поддержка сырого HTTP-ползания с Cheerio или JSDOM

🎛 Автоматическое распараллеливание и масштабирование краулеров для максимальной производительности

🐾 Избегание блокировки с помощью интеллектуальных сессий, прокси и отпечатков пальцев браузера

🚎 Простое управление и сохранение очередей URL-адресов для просмотра

🗜 Полностью написан на TypeScript для обеспечения безопасности типов и автодополнения кода

📚 Исчерпывающая документация, примеры кода и учебные пособия

💪🏼 Активно поддерживается и развивается компанией Apify — мы используем его сами!

Начало работы

Посетите сайт crawlee.dev или выполните следующую команду:

npx crawlee create my-crawler
Войти в полноэкранный режим Выйти из полноэкранного режима

Понравился Crawlee?

💛 Вы можете поддержать проект на GitHub, Product Hunt или Hacker News.

Оцените статью
devanswers.ru
Добавить комментарий