机器人txt的发电机1.01_Robots txt generator 1.01

如果你想控制机器人或蜘蛛访问您的网站，这个应用程序的解决方案

如果你想控制的机器人或蜘蛛访问你的网站，是解决方案。

这是很常见的，每个站点的站长花了很多的钱支付的带宽，它是不公平的一个重要部分的带宽消耗蜘蛛。随着机器人TXT发电机，您可以停止或控制的神器出山:www.shenqi73.com机器人。

一些机器人或蜘蛛饱和无数的每分钟查询您的服务器吗？

随着机器人TXT发电机，您可以限制多少个请求可以做任何机器人或蜘蛛每小时或每分钟。此外，该方案有300多机器人的数据库，允许你搜索的数据库中的任何机器人，你发现在你的日志的来源和所有者。

针对不同的机器人，你甚至可以指定不同的限制。每例如，您可以让谷歌机器人，但不允许谷歌图像机器人。您可以指定的300个机器人在数据库中对每一个不同的限制级别，或可以指定一些restrition的“一般”的机器人，再加上一些专门针对一些具体的机器人。禁止一些特定的僵尸一样。