{"$schema":"https://wellknown.network/schemas/agent-record-v1.json","schemaVersion":"1","id":"ag_8n52bc4yxd4e","handle":"mcp-web-scraper","url":"https://wellknown.network/agents/mcp-web-scraper","links":{"self":"https://wellknown.network/agents/mcp-web-scraper/record.json","html":"https://wellknown.network/agents/mcp-web-scraper","markdown":"https://wellknown.network/agents/mcp-web-scraper/record.md","api":"https://wellknown.network/api/v1/agents/mcp-web-scraper","status":"https://wellknown.network/api/v1/agents/mcp-web-scraper/status","claim":"https://wellknown.network/agents/mcp-web-scraper/claim","claimApi":"https://wellknown.network/api/v1/claims","claimDescriptor":"https://wellknown.network/agents/mcp-web-scraper/claim.json","badge":"https://wellknown.network/agents/mcp-web-scraper/badge.svg","openapi":"https://wellknown.network/openapi.json","history":"https://wellknown.network/api/v1/agents/mcp-web-scraper/history","tools":"https://wellknown.network/api/v1/agents/mcp-web-scraper/tools"},"ard":{"identifier":"urn:air::server:mcp-web-scraper","type":"application/mcp-server-card+json"},"kind":"mcp_server","declared":{"name":"mcp-web-scraper","summary":"Autonomous Playwright-based web scraper via MCP protocol","description":"# mcp-web-scraper\n\nPlaywright tabanlı, Javascript render eden sayfaları otonom şekilde tarayan (scrape) ve bunu **Model Context Protocol (MCP)** standartlarıyla AI Asistanlarına sunan gelişmiş bir web scraper sunucusudur. \n\n## 🌟 Özellikler\n- **`scrape_page`**: Herhangi bir URL'den metin içeriklerini, başlığı ve sayfaya dair metadataları okuyun.\n- **`scrape_queue`**: Birden fazla URL'yi arka plan kuyruğuna (job queue) ekleyerek otonom olarak asenkron tarayın.\n- **`watch_page`**: Belirli bir URL'in kaynak içeriği değiştiğinde canlı bildirimler (polling/events) alın.\n- **`take_screenshot`**: Hedef web sayfasının tam ekran görüntüsünü yüksek boyutlu şifrelenmiş (Base64) biçimde yakalayın.\n- **`fill_form`**: CSS Selector'ları kullanarak otomatik ve otonom şekilde web formları doldurun.\n- **`extract_table`**: Hedefteki karmaşık HTML tablolarını kolayca yapılandırılmış JSON verilerine (Array) ayrıştırın.\n- **`get_links`**: Sayfa üzerindeki tüm bağlantıları (links) tek tuşla etiketleyip çekin.\n\n## 🚀 Anti-Bot (İnsan Taklidi / Stealth)\nEskimiş dış kütüphanelere bağlı kalmaksızın, kendi içinde barındırdığı **manuel stealth** protokolleri sayesinde:\n- Cloudflare vb. `webdriver` algılayıcılarını tamamen maskeler.\n- Yapay fare hareketleri ile gerçek insan taklidi yapar.\n- İzole context, özel `user-agent` ve dil (`tr-TR`) ayarları üzerinden işlem sağlar.\n\n## 🛠️ Kurulum\n\nEn kolay kurulum yolu, doğrudan PyPI üzerinden resmi paketi indirmektir. Sisteminizde **Python 3.10+** yüklü olmalıdır.\n\n```bash\n# 1. MCP sunucusunu (ve bağımlılıklarını) global olarak indirin\npip install mcp-web-scraper\n\n# 2. Playwright otomasyonu için gereken Chromium tarayıcısını indirin\nplaywright install chromium\n```\n\n## 🎮 Kullanım (AI Asistanlarına Ekleme)\n\nBu server, standart bir `stdio` altyapısı kullanarak JSON-RPC 2.0 mimarisini destekler. AI istemcileriniz için (örn: Claude Desktop, Cursor, Antigravity) konfigürasyon dosyasına (`claude_desktop_config.json` veya IDE `mcp_config.json`) kullanım yöntem…","publisher":null,"homepage":"https://github.com/iamseyhmus7/mcp-web-scraper","repository":"https://github.com/iamseyhmus7/mcp-web-scraper","version":"0.1.1","license":"MIT","protocols":["mcp"],"tags":["browser-automation","data-extraction","mcp","playwright","web-scraper"],"pricing":null,"endpoints":[{"url":"pypi:mcp-web-scraper","type":"package_pypi","auth":null,"probeable":false}],"skills":null,"tools":null,"extra":null,"attribution":{"kind":"pypi","name":"pypi","license":"pypi","repoUrl":"pypi","summary":"pypi","version":"pypi","description":"pypi","homepageUrl":"pypi"}},"derived":{"capabilities":[{"slug":"data.web-scraping","name":"Web Scraping","confidence":1,"provenance":"derived"},{"slug":"infra.browser-automation","name":"Browser Automation","confidence":1,"provenance":"declared"},{"slug":"documents.extraction","name":"Data Extraction","confidence":0.713,"provenance":"derived"}],"categories":["data","documents","infra"],"language":"tr"},"observed":{"status":"unknown","statusReason":"Distributed as a package to run locally; no network endpoint to check.","lastOkAt":null,"lastProbedAt":null,"statusComputedAt":null,"reliability30d":null,"latestObservations":[],"tools":null,"package":{"name":"mcp-web-scraper","registry":"pypi","observedAt":"2026-10-28T15:25:49.033Z","publishedAt":"2026-03-09T21:13:06.978527Z","latestVersion":"0.1.1"},"toolSurface":null,"endpointFacts":[]},"verification":{"claimed":false,"claimedAt":null,"proofs":[]},"provenance":{"sources":[{"source":"pypi","key":"mcp-web-scraper","url":"https://pypi.org/project/mcp-web-scraper/","firstSeenAt":"2026-09-10T05:22:07.762Z","fetchedAt":"2026-10-28T15:23:53.292Z","normalizedAt":"2026-10-28T15:23:53.292Z"}]},"firstSeenAt":"2026-09-10T05:22:07.762Z","updatedAt":"2026-10-28T15:25:49.033Z"}