Robots.txt Editor

Beschreibung

Robots.txt ist ein visueller Editor für Robot Exclusion Files und eine Log-Analyzer-Software. Es ermöglicht einem Benutzer, schnell und einfach die robots.txt-Dateien zu erstellen, die erforderlich sind, um Suchmaschinen-Spider anzuweisen, dass Teile einer Website nicht indiziert und von der allgemeinen Web-Öffentlichkeit durchsuchbar gemacht werden sollen, und dann Spider zu identifizieren, die dies nicht tun halten Sie sich an diese Anweisungen. Das Programm bietet dem Benutzer die Möglichkeit, sich auf seinem FTP- oder lokalen Netzwerkserver anzumelden und dann die Dokumente und Verzeichnisse auszuwählen, die nicht durchsuchbar gemacht werden sollen. Mit Hilfe dieses Programms können Sie robots.txt-Dateien nach Industriestandard visuell generieren; Identifizieren Sie böswillige und unerwünschte Spinnen und verbannen Sie sie von Ihrer Website. Suchmaschinen-Crawler auf die entsprechenden Seiten für mehrsprachige Websites leiten; halten Sie Spinnen von sensiblen und privaten Bereichen Ihrer Website fern; Verfolgen Sie Spinnenbesuche und mehr. Kostenlose Programm-Updates und -Upgrades ohne zeitliche Begrenzung; unbegrenzte Anzahl von Websites, mit denen Sie arbeiten können.