• [求助] robots文件怎么写?
    发布日期:2019-11-02 01:00   来源:未知   阅读:

由于对这个论坛程序不是很熟悉,所以来求教各位

下面这个是默认就有的,不知道有没有问题?

User-agent: *

Disallow: /api/

Disallow: /data/

Disallow: /source/

Disallow: /install/

Disallow: /template/

Disallow: /config/

Disallow: /uc_client/

Disallow: /uc_server/

Disallow: /static/

Disallow: /admin.php

Disallow: /search.php

Disallow: /member.php

Disallow: /api.php

Disallow: /misc.php

Disallow: /connect.php

Disallow: /forum.php?mod=redirect*

Disallow: /forum.php?mod=post*

Disallow: /home.php?mod=spacecp*

Disallow: /userapp.php?mod=app&*

Disallow: /*?mod=misc*

Disallow: /*?mod=attachment*

Disallow: /*mobile=yes*





话说论坛生成的php动态页面是存放在data里面的?

还有就是css、js、图片等这些文件有没有必要让蜘蛛爬取?

Power by DedeCms