懂robots.txt的朋友请进 TDYD 文学城

TDYD2013-07-13 23:55:59

在网站根目录里发现一个文件名为robots.txt的文件, 这是干什么的? 文件就两行内容:

User-agent: *
Disallow: /

可以删处吗? 多谢.

用户名被占用了2013-07-14 00:55:39

please google robots.txt disallowed

横流沧海2013-07-22 17:03:42

就是不欢迎搜索引擎造访

横流沧海2013-07-22 17:04:18

可删

继续阅读

用PC电脑给OBi打电话，OBi电话铃会响，但说话没声音，咋回事？英台 2013-07-13 21:31:47 求帮助：如何突破Trend MicroOfficeScan的封锁？sunning 2013-07-13 18:35:33 iFit SD card code help with pay武当纯阳24代 2013-07-13 22:07:37 evdo還能用嗎小本生意 2013-07-13 05:37:02 智能手机网上银行安全吗？白居很不易 2013-07-13 02:09:08 Page plus 500MB data is real now for $29.95 and $39.95 plan now.longtermInvestor 2013-07-12 21:25:07 TTY，给指点一下langxing 2013-07-11 20:04:42 请教大家,在国内要呆一段时间, 有没有好的付款的VPN可以推荐的？谢谢大家！！小白菜， 2013-07-11 02:47:43 收到了 Lycamobile 的卡装入手机后没有Bar,求高手指点.Amis5 2013-07-10 23:58:14 360是个小棱镜啊slow_quick 2013-07-10 19:39:05

同作者

谁知道如何把原来Vista中的WinMail装在Windows 10 里？有偿TDYD 2019-05-29 02:09:56 已经定了。从明天起，美国开始对中国500亿美元商品征收25%的关税TDYD 2018-06-15 18:00:09 麦疙瘩，川爷今天要把美国核弹数增加10倍！TDYD 2017-10-11 18:26:49 注意很多次了，川爷很多肢体动作有点小里小气的，甚至有点女里女气的。TDYD 2017-09-27 21:12:06 新闻上说，三胖这次玩的可能是多弹头导弹！至少三个蛋TDYD 2017-08-29 16:05:05 今天国际观舰式，明天朝美军演，后天美日肩并肩，世界真热闹。像春秋大家忙会盟！TDYD 2017-04-30 01:51:44 F-1 签证在美读高中11年级, 需要办社安卡(SSC)号吗?TDYD 2013-08-20 03:17:00 懂robots.txt的朋友请进TDYD 2013-07-13 23:55:59 2560x1600的显示卡支持1600x1200的显示器吗?TDYD 2011-01-09 02:13:20 TO: 我稀饭捣乱TDYD 2007-11-11 05:28:25