Apify Scraping

Apify Web Scraping Skill

Навык для использования Apify Actors для парсинга веб-данных.

Когда использовать

• Парсинг социальных сетей (Instagram, TikTok, YouTube, X/Twitter, LinkedIn)
• Сбор данных с e-commerce (Amazon, eBay, AliExpress)
• Парсинг поисковых систем (Google, Bing, Google Maps)
• Сбор контактов и лидов
• Мониторинг цен и отзывов
• Скрапинг любых веб-сайтов

Справочники (references/)

• references/curated-actors.md — curated индекс 130+ Actor'ов с точными ID по платформам (Instagram, Facebook, TikTok, YouTube, X, LinkedIn, Maps, отзывы, недвижимость, SEO, RAG-краулинг, Telegram/Reddit/Snapchat, обогащение контактов). Всегда сверяй ID отсюда перед вызовом.
• references/apify-gotchas.md — модели оплаты (FREE/PPE/FLAT), протокол оценки стоимости, частые грабли (cookies, rate limits, пустые результаты, deprecated Actors), восстановление после ошибок, лимиты по платформам.

⚠️ Namespace важнее всего. Таблицы ниже — упрощённые; часть ID неполные. Реальные namespace'ы: TikTok = clockworks/, YouTube = streamers/, Google Maps = compass/, X/Twitter = apidojo/, LinkedIn = harvestapi/ + apimaestro/. С неверным namespace (apify/tiktok-scraper и т.п.) вызов не найдёт Actor — бери точные ID из curated-actors.md.

Схему входа тяни динамически: apify actors info "ACTOR_ID" --input --json.

Популярные Actors

Социальные сети

VK-аудитории для рекламы: Apify VK-actors НЕ покрывают полный workflow парсинга аудиторий для VK Ads (нотация PS/CS/А/ТУ/НВ, метод А, вечные аудитории). Production-grade парсер для VK Ads — Target Hunter (не Apify). См. скилл vk-ads-pro-ru для VK-аудиторий.

E-commerce

Поисковые системы

Универсальные

Примеры команд

Социальные сети

"Спарси последние 50 постов Instagram @nasa"
"Собери топ-20 TikTok видео по хэштегу #coding"
"Получи информацию о YouTube канале MrBeast"
"Найди твиты про AI за последнюю неделю"

E-commerce

"Найди все iPhone на Amazon до $500"
"Спарси отзывы на товар ASIN B08N5WRWNW"
"Мониторь цены на AliExpress по запросу 'wireless earbuds'"

Поиск и карты

"Топ-50 результатов Google по 'best restaurants NYC'"
"Найди все кофейни в радиусе 5км от координат"
"Собери контакты компаний по запросу в Google Maps"

Контакты и лиды

"Найди email адреса с сайта company.com"
"Собери контакты IT компаний в LinkedIn"

Формат данных

Apify возвращает структурированные данные в JSON:

{
  "results": [
    {
      "url": "https://...",
      "title": "...",
      "description": "...",
      "price": "...",
      "rating": 4.5,
      "reviews": 123
    }
  ]
}

Лимиты и стоимость

• Бесплатный план: $5/месяц в кредитах
• Оплата: Pay-per-use за compute units
• Примерная стоимость:
  • 1000 Instagram постов: ~$1-2
  • 1000 Amazon товаров: ~$2-3
  • 1000 Google результатов: ~$0.5-1

Советы

1. Начинай с малого: Сначала спарси 10-50 записей для проверки
2. Используй фильтры: Сужай запросы для экономии ресурсов
3. Кэшируй результаты: Сохраняй в Redis/SQLite для повторного использования
4. Проверяй лимиты: Некоторые сайты имеют rate limits
5. Комбинируй с N8N: Автоматизируй регулярный парсинг

Интеграция с другими MCP

Apify → Redis (кэш) → PostgreSQL (хранение)
Apify → N8N (автоматизация) → Slack (уведомления)
Apify → Claude (анализ) → Notion (документация)