Ir al contenido

Scraping

Saca el contenido de páginas y webs enteras con Apify y Firecrawl.

Módulo oficial orkan.scrapingVersión 0.1.17 pasosApify y Firecrawl

Es un módulo oficial firmado por Gnevoo. En la nube dedicada viene instalado en tu Orkan.

Las cuentas se conectan en Cuentas conectadas (en el menú), con Conectar una cuenta, o desde el propio paso, con Conectar cuenta de…. Las claves se guardan cifradas y no se vuelven a mostrar. Más detalles en Cuentas conectadas.

Leer datos de páginas web.

Te pedirá: «Token o clave».

¿Dónde la consigo? Busca en la configuración de Apify un apartado llamado «API», «Integraciones» o «Desarrolladores». Allí podrás crear la clave y copiarla.

Leer datos de páginas web.

Te pedirá: «Clave de API».

¿Dónde la consigo? Busca en la configuración de Firecrawl un apartado llamado «API», «Integraciones» o «Desarrolladores». Allí podrás crear la clave y copiarla.

Este módulo no tiene pasos para empezar una automatización: sus pasos van detrás de otro, por ejemplo uno de Básicos de Orkan.

  • Ejecutar un programa de Apify. Ejecuta un programa de Apify que recoge datos de webs y devuelve lo que ha encontrado.
  • Ver cómo va una ejecución de Apify. Consulta si una ejecución de Apify ha terminado y cómo ha ido.
  • Leer resultados de Apify. Lee los datos recogidos por Apify, por ejemplo los de una ejecución anterior.
  • Leer el contenido de una página (Firecrawl). Extrae el contenido de una página web con Firecrawl, en el formato que elijas.
  • Recorrer una web entera con Firecrawl. Empieza a recorrer todas las páginas de una web con Firecrawl y devuelve las que ya ha leído.
  • Ver cómo va el recorrido de Firecrawl. Consulta si el recorrido de una web con Firecrawl ha terminado y devuelve las páginas leídas.
  • Listar las páginas de una web (Firecrawl). Devuelve la lista de direcciones de una web con Firecrawl, una por elemento.