Bot FindFiles.net został zaprojektowany do sprawdzania dostępności publicznie dostępnych plików w internecie. Działa w sposób przejrzysty i zgodny z najlepszymi praktykami, aby minimalizować obciążenie serwerów i maksymalizować wydajność.
Bot FindFiles.net został zaprojektowany z myślą o pełnej przejrzystości, aby budować zaufanie administratorów stron internetowych. Dzięki jednoznacznej identyfikacji w adresie odsyłającym, logi serwerów pozwalają łatwo ustalić źródło zapytań. Umożliwia to administratorom odróżnienie naszego bota od potencjalnie szkodliwych robotów.
Bot sprawdza przede wszystkim dostępność plików wyszukiwanych przez użytkowników za pośrednictwem FindFiles.net, bez ich pobierania ani przechowywania, ściśle ograniczając się do zasobów publicznych. W celu poprawy jakości wyników i zapewnienia bezpieczeństwa możemy jednak pobierać obrazy i wideo do celów klasyfikacji, aby ocenić ich przydatność do wyszukiwania. Dodatkowo możemy pobierać pliki wykonywalne w celu sprawdzenia, czy są bezpieczne w użyciu, zapewniając użytkownikom bezpieczne środowisko.
FindFilesBot obecnie identyfikuje się następującymi danymi crawlera:
bot.findfiles.net
65.21.31.180
2a01:4f9:3080:2b61::2
Kilka agentów FindFiles.net może używać tej samej zweryfikowanej nazwy hosta i adresu IP crawlera. Każdy agent publikuje User-Agent związany z konkretnym celem, aby administratorzy mogli ustalić, dlaczego wykonano żądanie.
| User-Agent | Opis |
|---|---|
FindFilesBot/1.0 (+https://findfiles.net/en/bot) |
Ogólna tożsamość crawlera do wykrywania publicznych plików i sprawdzania ich dostępności. |
FindFiles.net-LinkChecker/1.1 https://findfiles.net/bot |
Sprawdza, czy publiczne adresy URL plików są nadal osiągalne, i zapisuje sygnały dostępności HTTP. |
FindFiles.net-FaviconFetcher/1.0 (+https://findfiles.net/bot) |
Pobiera favikony stron do przypisywania źródeł i kontekstu wizualnego w wynikach wyszukiwania. |
FindFiles.net-VirusScan/1.0 (+https://findfiles.net/bot) |
Pobiera pliki wymagające kontroli bezpieczeństwa, takie jak typy wykonywalne lub ryzykowne, w celu skanowania pod kątem malware. |
FindFiles.net-ImageNSFWClassifier/1.0 (+https://findfiles.net/bot) |
Pobiera obrazy do automatycznej klasyfikacji bezpieczeństwa i filtrowania treści dla dorosłych. |
Właściciele stron mogą zweryfikować FindFilesBot, potwierdzając, że odwrotny DNS wskazuje nazwę hosta crawlera, a ta nazwa hosta rozwiązuje się z powrotem na ten sam adres IP crawlera.
dig +short -x 65.21.31.180
# bot.findfiles.net.
dig +short bot.findfiles.net
# 65.21.31.180Jeśli jesteś administratorem strony internetowej i masz pytania dotyczące bota FindFiles.net, prosimy o kontakt z nami. Dokładamy wszelkich starań, aby nasze działania były pełne szacunku, efektywne pod względem zasobów i zgodne ze standardami sieciowymi.