03 · Agente de IA
crawlio.app
Visitar ↗Un crawler nativo de IA que corre en tu Mac, no en la nube de un tercero.
El problema
Los sitios modernos están llenos de JavaScript, frameworks y barreras anti-bot, así que los scrapers tradicionales y las APIs SaaS regresan HTML roto o cobran por página y aun así pierden el markup real. Los equipos que envían funciones con IA necesitan artefactos limpios y conscientes del framework de los que sean dueños — no capturas ni dashboards alquilados con suscripción.
Para quién
Ingenieros de IA e indie hackers que alimentan sitios reales a Claude, ChatGPT, Cursor y Gemini CLI; equipos de SEO y growth auditando competencia; diseñadores extrayendo design systems y tokens; equipos de seguridad archivando sitios en WARC; desarrolladores macOS que prefieren una compra única antes que una API tarifada.
La solución
Crawlio es una app macOS en Swift 6 que clona un sitio entero — HTML, CSS, JS, imágenes y estructura — a una carpeta local que puedes guardar, mover o entregarle a un agente de IA.
Un servidor MCP embebido expone 36 herramientas full-mode y 6 code-mode, así Claude, Cursor, ChatGPT y Gemini CLI manejan el crawler de forma nativa, con fallbacks a WebKit y Chromium para SPAs y páginas protegidas con Cloudflare.
Corre todo en tu Mac — sin nube, sin claves API, sin suscripción — y se distribuye por DMG firmado, Homebrew, wrapper de npm e instalador curl, con planes Free, Core y Pro como licencias de por vida.
Capacidades clave
Extract
Clona el frontend tal y como lo vio el navegador — HTML, CSS, JS, imágenes y estructura — y lo deja disponible offline.
Audit
Corre 19 analizadores de SEO, accesibilidad, seguridad, calidad de contenido, arquitectura de enlaces, hreflang y tracking.
Detección de stack
Identifica más de 64 frameworks, CDNs, analytics y scripts de tracking con una base de huellas y resolución de cadenas implies.
Descubrimiento de APIs
Mapea el backend interceptando tráfico fetch y XHR, y arma especificaciones OpenAPI a partir de los pares request/response reales.
Servidor MCP
36 herramientas full-mode y 6 code-mode expuestas por stdio y HTTP — los agentes de coding manejan Crawlio directo.
Siete formatos de exportación
Carpeta, ZIP, HTML único, WARC, PDF, deploy-ready y JSON extraído — más conversión HTML→Markdown y HTML→JSX/Tailwind.
Local y compra única
Todo corre en tu Mac sin nube ni suscripción — Free, Core y Pro como licencias vitalicias.
Stack