Fastcrawl

Cloud scraping & crawling API for AI agents.

От сообществаРаботаетБез входаГлобальныйБесплатноТолько чтение

Что умеет

  • Scrape: Scrape a URL and return clean, LLM-ready markdown. Renders JavaScript. Set waitFor (ms) for heavy SPAs. Use formats: ['json'] for structured data extraction.
  • Crawl: Crawl a website breadth-first (parallel). Returns a job id; poll GET /api/v1/crawl/{id}/ for the result.
  • Map: Discover URLs on a website (sitemap + page links).

Какие данные видит

Нужен ли аккаунт

Не нужен: сервер работает без входа

Cloud scraping & crawling API for AI agents. Turn any URL into clean, LLM-ready markdown, or crawl, map, search and extract a whole site — JavaScript rendering included. Free tier with 2,000 credits/month, no card. One API key works across REST and MCP.

Как подключить

Как подключить Fastcrawl к Claude

Адрес сервера, который нужно вставить в настройках Claude:

https://fastcrawl--fastcrawl.run.tools

  1. Откройте Claude (сайт claude.ai или приложение для компьютера).
  2. Перейдите в Настройки → Коннекторы (в английском интерфейсе: Settings → Connectors).
  3. Нажмите Добавить пользовательский коннектор (Add custom connector).
  4. Вставьте адрес сервера, скопированный ниже, в поле URL удалённого MCP-сервера и нажмите Добавить.
  5. В чате нажмите + → Коннекторы и включите новый коннектор.

Пользовательские коннекторы доступны на тарифах Free, Pro, Max, Team и Enterprise. На Free можно добавить только один. В Team и Enterprise коннектор сначала добавляет владелец организации в Настройки организации → Коннекторы.

Авторизация

После нажатия Добавить откроется окно входа в сервис. Войдите под своим аккаунтом и подтвердите доступ. Пароль Claude не видит.

Как подключить Fastcrawl к ChatGPT

Адрес сервера, который нужно вставить в настройках ChatGPT:

https://fastcrawl--fastcrawl.run.tools

  1. Откройте ChatGPT в браузере (chatgpt.com). Нужен тариф Plus, Pro, Business, Enterprise или Edu.
  2. Один раз включите режим разработчика: Настройки → Приложения → Дополнительные настройки → Режим разработчика (Settings → Apps → Advanced settings → Developer mode).
  3. Откройте Настройки → Коннекторы и нажмите Создать (Create).
  4. Заполните форму: Название (любое), Описание (одна фраза, что делает сервис), URL MCP-сервера (скопируйте ниже).
  5. В поле Аутентификация выберите OAuth, если сервис требует вход, иначе Нет. Нажмите Создать.
  6. В новом чате откройте + → Приложения/Коннекторы и включите коннектор.

Название раздела у OpenAI менялось (Connectors → Apps/Plugins). Если пункт называется иначе, ищите «режим разработчика» в настройках. В рабочих пространствах Business/Enterprise администратор должен разрешить пользовательские коннекторы.

Авторизация

При первом использовании ChatGPT откроет окно входа в сервис. Войдите и подтвердите доступ.

Как подключить Fastcrawl к Cursor

Адрес сервера, который нужно вставить в настройках Cursor:

https://fastcrawl--fastcrawl.run.tools

Быстрый способ: нажмите кнопку Открыть в Cursor ниже, Cursor сам предложит добавить сервер.

Вручную:

  1. В Cursor откройте Settings → Cursor Settings → MCP и нажмите Add new global MCP server.
  2. Вставьте JSON, скопированный ниже, в открывшийся файл ~/.cursor/mcp.json (для одного проекта: .cursor/mcp.json в корне проекта).
  3. Сохраните файл. Сервер появится в списке MCP; при необходимости пройдите авторизацию по кнопке рядом с ним.

Авторизация

Если сервис требует вход, рядом с сервером в списке MCP появится кнопка авторизации.

Список инструментов сервера (12)

Технические названия из tools/list. Нужны только разработчикам.

scrapeScrape a URL and return clean, LLM-ready markdown. Renders JavaScript. Set waitFor (ms) for heavy SPAs. Use formats: ['json'] for structured data extraction.
crawlCrawl a website breadth-first (parallel). Returns a job id; poll GET /api/v1/crawl/{id}/ for the result.
mapDiscover URLs on a website (sitemap + page links).
searchSearch the web and return ranked results (title, url, snippet).
extractExtract structured JSON from a page using an LLM and a schema.
screenshotCapture a full-page screenshot of a URL as base64 PNG.
pdfRender a URL to PDF (base64).
parseParse a PDF document into clean, LLM-ready markdown.
monitor_createCreate a monitor — scheduled re-scrape of a URL with change detection.
monitor_listList your monitors with last run status.
monitor_runRun a monitor immediately (1 credit on success).
monitor_deleteDelete a monitor (irreversible).