Robots.txt 2.0
Je het binnen 5 seconden downloaden.
Over Robots.txt
Robots.txt is een visuele editor voor Robot Exclusion Files en een log analyzer software. Het stelt een gebruiker in staat om snel en gemakkelijk de robots te maken.txt bestanden die nodig zijn om zoekmachine spinnen te instrueren, welke delen van een website niet moeten worden geïndexeerd en doorzoekbaar gemaakt door het grote webpubliek en vervolgens spinnen te identificeren, die zich niet aan die instructies houden. Het programma biedt de gebruiker een manier om in te loggen op zijn FTP of lokale netwerkserver en vervolgens de documenten en mappen te selecteren die niet doorzoekbaar moeten worden gemaakt. Door middel van dit programma u visueel industriestandaard robots.txt bestanden genereren; kwaadaardige en ongewenste spinnen te identificeren en ze van uw site te verbannen; directe zoekmachinecrawlers naar de juiste pagina's voor meertalige sites; gebruik robots.txt bestanden voor deuropening pagina beheer; houden spinnen uit gevoelige en prive-gebieden van uw website; upload de correct geformatteerde robots.txt bestanden rechtstreeks naar uw FTP-server en schakel niet over van Robots.txt Editor; spinbezoeken bijhouden; rapporten voor spider-bezoeken maken in HTML-, Microsoft Excel CSV- en XML-indelingen en meer. Gratis programma's updates en upgrades onbeperkt in de tijd; onbeperkt aantal websites om mee te werken