Über den FindFiles.net Bot

Der FindFiles.net Bot wurde entwickelt, um die Verfügbarkeit öffentlich zugänglicher Dateien im Internet zu überprüfen. Er arbeitet transparent und hält sich an bewährte Verfahren, um die Serverlast zu minimieren und die Effizienz zu maximieren.

Wichtige Funktionen

• Erkennbar in Logs: Der Bot zeigt sich in der Referral-URL, die auf diese Seite verweist: https://www.findfiles.net/bot, um Transparenz für Serveradministratoren sicherzustellen. Er ist nicht dazu gedacht, Referral-Spam zu erzeugen.
• HTTP2-Effizienz: Der Bot verwendet multiplexierte HTTP2-HEAD-Anfragen, um die Verfügbarkeit von Dateien in großen Mengen zu prüfen. Eine einzige Verbindung wird verwendet und nach der Antwort sofort geschlossen.
• Nur öffentliche Dateien: Es werden ausschließlich öffentlich zugängliche Dateien geprüft, wobei Serverberechtigungen respektiert und private Daten vermieden werden.
• Rate-limitierte Anfragen: Der Bot stellt sicher, dass mindestens 10 Sekunden zwischen Anfragen an denselben Server liegen, um die Serverbelastung zu reduzieren.
• Ignoriert HTTP1.1-Server: HTTP1.1-Server werden ausgeschlossen, da sie zusätzliche Serverressourcen erfordern und für Massenanfragen weniger effizient sind.

Warum Transparenz wichtig ist

Der FindFiles.net Bot wurde mit voller Transparenz entwickelt, um Vertrauen bei Website-Administratoren zu schaffen. Durch die klare Identifizierung in der Referral-URL können Serverlogs die Herkunft der Anfragen leicht nachverfolgen. Dies hilft Administratoren, unseren Bot von potenziell schädlichen Crawlern zu unterscheiden.

Vorgesehene Nutzung

Der Bot überprüft in erster Linie die Verfügbarkeit von Dateien, ohne diese herunterzuladen oder zu speichern. Dabei hält er sich strikt an öffentlich zugängliche Ressourcen. Um jedoch die Benutzererfahrung zu verbessern und die Sicherheit zu gewährleisten, können wir Bilder und Videos zur Klassifizierung herunterladen, um ihre Eignung für die Suche zu überprüfen. Darüber hinaus können wir ausführbare Dateien herunterladen, um ihre Sicherheit zu prüfen und eine sichere Nutzung für unsere Nutzer zu gewährleisten.

Fragen oder Anliegen?

Falls Sie Website-Administrator sind und Fragen zum FindFiles.net Bot haben, wenden Sie sich bitte an uns. Wir setzen uns dafür ein, dass unsere Aktivitäten respektvoll, ressourcenschonend und den Webstandards entsprechend durchgeführt werden.