İçeriğe geç
Storage Marketplace

Veri toplama

Veri toplama botumuz

Sitenizin kayıtlarında storagemarketplacebot görüyorsanız bu sayfa onun ne yaptığını ve nasıl durdurabileceğinizi anlatır.

Kimiz, neden topluyoruz?

Bot Depolama.org tarafından işletilir. Amacı, eşya depolama firmalarının listelerimizdeki bilgilerini (iletişim, adres, hizmetler, yayımlanmış fiyatlar) güncel ve doğru tutmaktır. Bot yalnızca ekibimizin tek tek incelediği ve izin verdiği kaynak sayfaları ziyaret eder; bunlar çoğunlukla firmaların kendi internet siteleridir. Toplanan bilgiler doğrudan yayımlanmaz; ekibimiz kaynağıyla birlikte inceleyip onaylamadan hiçbir bilgi sitede görünmez.

Nasıl davranır?

  • Kendini her istekte açıkça tanıtır: StorageMarketplaceBot/1.0 (+https://depolama.org/bot)
  • Yalnızca herkese açık sayfaları okur. Giriş yapmaz, form göndermez, CAPTCHA veya erişim engellerini aşmaya çalışmaz, çerez kullanmaz.
  • robots.txt kurallarına uyar; dosyayı en fazla 24 saatte bir yeniden okur ve Crawl-delay değerini dikkate alır.
  • Aynı siteye aynı anda tek istek gönderir ve iki istek arasında en az 60 saniye bekler.
  • Bir sayfayı olağan durumda 7 günde bir kontrol eder. Sunucunuz 429 veya Retry-After ile yavaşlamasını isterse bekler.
  • Sayfa başına en fazla 2 MiB HTML indirir; görsel, video veya dosya indirmez.

Nasıl engellenir?

Sitenizin robots.txt dosyasına şunu eklemeniz yeterlidir. Bot bir sonraki okumada sitenizi ziyaret etmeyi bırakır:

User-agent: storagemarketplacebot
Disallow: /

Düzeltme ve iletişim

Firmanızla ilgili bir bilginin düzeltilmesini veya kaldırılmasını, ya da sitenizin hiç ziyaret edilmemesini istiyorsanız bot@depolama.org adresine yazın. Alan adınızı belirtmeniz yeterlidir.

In English

storagemarketplacebot keeps storage-company listings accurate by reading individually approved public pages, mostly the companies' own websites. It identifies itself, never logs in or submits forms, honours robots.txt (including Crawl-delay), sends one request at a time with at least 60 seconds between requests to the same site, and backs off on 429/Retry-After. To block it, add User-agent: storagemarketplacebot / Disallow: / to robots.txt. Contact: bot@depolama.org.