SSRF
Hazırlanmış bir yönlendirme, çekicinizi bulut metadata'sına çevirir; bir anda kimlik bilgileriniz hattın üzerindedir.
Web erişim altyapısı
Bir URL vermek kolaydır. Onu güvenle getirmek değil.
webaccess sizin adınıza herhangi bir web adresine gider, tarar, yapılandırılmış içeriğini çıkarır ve ölçer; bunu SSRF'i engelleyerek, robots.txt'e uyarak ve hiçbir işi kaybetmeden yapar. Web hattınızın elleri ve gözleri.
Tek HTTP API · X-API-Key · kendi ağınızda izole çalışır
Kör nokta
Web'e kendiniz erişmek, hatların sessizce çöktüğü yerdir.
Kırılgan
Yalnızca JavaScript'le çalışan bir sayfa boş bir kabuk döner, çıkarıcınız hiçbir şey kaydetmez ve haftalarca fark edilmez.
Nezaketsiz
Gecikme yok, robots yok, geri çekilme yok; hedef sizi dakikalar içinde sınırlar ya da IP'nizi engeller.
Tek istek
Bir kez sorun. Yapılandırılmış kanıtı geri alın.
POST /v1/crawl/start → runId
webaccess kanıt döndürür, yorum değil. O getirir; kararı siz verirsiniz.
crawl
asenkronTüm bir alan adını, nezaketle, sayfa sayfa tarar.
döner: sayfalar, başlık, metin, link
fetch
Tek bir URL'i tüm resmiyle getirir.
döner: html, başlıklar, yönlendirme zinciri
cwv
headlessGerçek performansı tarayıcıda ölçer.
döner: LCP, CLS, TBT, TTFB
robots
Bir sitenin tarama kurallarını ham okur.
döner: robots.txt gövdesi
sitemap
Bir sitenin yayınladığı her adresi listeler.
döner: urls; index & .xml.gz
index
pgvectorTaranan sayfaları arama ve RAG için parçalar.
döner: chunk, embedding
Neden webaccess
Üretim-sağlam erişim. Başında beklediğiniz bir scraper değil.
Güvenli
SSRF korumalı
İç aralıklar ve bulut metadata'sı engellenir; IP, DNS rebinding'i boşa çıkarmak için bağlanma anında yeniden denetlenir.
Nazik
Hız-duyarlı
Host başına aynı anda tek istek, istekler arası yapılandırılabilir gecikme ve kutudan çıkar çıkmaz robots.txt Crawl-delay uyumu.
Dayanıklı
Hiçbir işi kaybetmez
İşler kalıcı bir kuyrukta yaşar. Bir süreç tarama ortasında çökerse başka bir worker devralır. Doğruluk kaynağı PostgreSQL'dir.
Planlar
Küçük başlayın, çekilen sayfaya göre büyütün.
Örnek fiyatlandırma. Planlar aylık taranan sayfa ve isteğe göre ölçeklenir.
Başlangıç
$49/ay
- Ayda 10.000 sayfa
- Tüm uçlar, HTTP + tarayıcı düşüşü
- robots, sitemap & Core Web Vitals
Ölçek
$199/ay
- Ayda 100.000 sayfa
- Embedding'li RAG indeksleme
- İmzalı webhook & öncelikli kuyruk
- E-posta desteği
Kurumsal
Özel
- Ayrılmış altyapı
- Özel SSRF izin listeleri & limitler
- SLA ile ayrılmış destek
Sorular
webaccess tam olarak ne yapar?
Sizin adınıza web sayfalarını çeker, tarar ve ölçer; yapılandırılmış içerik döndürür. Asla LLM çalıştırmaz, skorlamaz ya da karar vermez; bunlar sizin tarafınızda kalır.
Rastgele URL'lere gitmek nasıl güvenli oluyor?
Her bağlantı, iç IP aralıklarına ve bulut metadata uçlarına karşı denetlenir; IP, DNS rebinding'i engellemek için bağlanma anında yeniden doğrulanır.
webaccess JavaScript çalıştırır mı?
Yalnızca gerektiğinde. Önce hızlı HTTP dener; sayfa boş bir SPA kabuğu gibi göründüğünde ancak o zaman gerçek bir headless tarayıcıya düşer.
Çok-kiracılı mı?
Evet. Her istekte kendi clientRef'inizi verirsiniz; doğrulanmış tenant'ınızla birleştirilir, böylece veri izolasyonu otomatiktir.