1. 怎么让百度蜘蛛不去爬行网站内的链接
首先说，别说让网络蜘蛛每个时间段都来，就算是让他每天都来都很难，如果你能持续做到后者，那证明你做得很不错了。楼主的站应该是新站吧，通常做得还可以的新站，上线初期网络会有一段时间比较关注，网络蜘蛛来的比较勤快，但是过一段时间之后，频率就会明显降低，这是很正常的现象，而至于排名的波动，也是很正常的，偶尔获得较高的排名并不能代表网站的真实排名。用心做站，坚持原创更新，做好外链，排名会上去的
2. 可以阻止百度蜘蛛爬取网站其中一个内页吗
很简单，你可以在你的网站根目录做一个robots.txt的文件，然后禁止蜘蛛爬行你那个内页，具体的用法你可以搜网络查一下，很简单的。
3. 怎么才能让蜘蛛不抓取整个网站
Robots.txt 是存放在站点根目录下的一个纯文本文件。虽然它的设置很简单，但是作用却很强大。它可以指定搜索引擎蜘蛛只抓取指定的内容，或者是禁止搜索引擎蜘蛛抓取网站的部分或全部内容。
使用方法:
Robots.txt 文件应该放在网站根目录下，并且该文件是可以通过互联网进行访问的。
例如：如果您的网站地址是 http://www..com/那么，该文件必须能够通过 http://www..com/robots.txt 打开并看到里面的内容。
格式：
User-agent:
用于描述搜索引擎蜘蛛的名字，在" Robots.txt "文件中，如果有多条User-agent记录说明有多个搜索引擎蜘蛛会受到该协议的限制，对该文件来说，至少要有一条User-agent记录。如果该项的值设为*，则该协议对任何搜索引擎蜘蛛均有效，在" Robots.txt "文件中，"User-agent:*"这样的记录只能有一条。
Disallow:
用于描述不希望被访问到的一个URL，这个URL可以是一条完整的路径，也可以是部分的，任何以Disallow开头的URL均不会被Robot访问到。
举例：
例一："Disallow:/help"是指/help.html 和/help/index.html都不允许搜索引擎蜘蛛抓取。
例二："Disallow:/help/"是指允许搜索引擎蜘蛛抓取/help.html，而不能抓取/help/index.html。
例三：Disallow记录为空说明该网站的所有页面都允许被搜索引擎抓取，在"/robots.txt"文件中，至少要有一条Disallow记录。如果"/robots.txt"是一个空文件，则对于所有的搜索引擎蜘蛛，该网站都是开放的可以被抓取的。
#:Robots.txt 协议中的注释符。
综合例子 ：
例一：通过"/robots.txt"禁止所有搜索引擎蜘蛛抓取"/bin/cgi/"目录，以及 "/tmp/"目录和 /foo.html 文件，设置方法如下：
User-agent: *
Disallow: /bin/cgi/
Disallow: /tmp/
Disallow: /foo.html
例二：通过"/robots.txt"只允许某个搜索引擎抓取，而禁止其他的搜索引擎抓取。如：只允许名为"slurp"的搜索引擎蜘蛛抓取，而拒绝其他的搜索引擎蜘蛛抓取 "/cgi/" 目录下的内容，设置方法如下：
User-agent: *
Disallow: /cgi/
User-agent: slurp
Disallow:
例三：禁止任何搜索引擎抓取我的网站，设置方法如下：
User-agent: *
Disallow: /
例四：只禁止某个搜索引擎抓取我的网站如：只禁止名为“slurp”的搜索引擎蜘蛛抓取，设置方法如下：
User-agent: slurp
Disallow: /
4. 如何阻止百度baidu爬虫和谷歌蜘蛛抓取网站内容
如果不希望网络或 Google抓取网站内容，就需要在服务器的根目录中放入一个 robots.txt 文件，其内容如下：
User-Agent: *
Disallow: /
这是大部份网络漫游器都会遵守的标准协议，加入这些协议后，它们将不会再漫游您的网络服务器或目录。
Robots协议（也称为爬虫协议、机器人协议等）的全称是“网络爬虫排除标准”（Robots Exclusion Protocol），网站通过Robots协议告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取。
实例分析：淘宝网的 Robots.txt文件
User-agent: Baispider
Disallow: /
User-agent: spider
Disallow: /
很显然淘宝不允许网络的机器人访问其网站下其所有的目录。
5. 如何禁止蜘蛛抓取动态页面
User-agent: *
其中有些命令是禁止抓取一些不必要的内容，以免防止蜘蛛抓取过度分散，网站权重也不会过于分散，这样有利于网络收录，更有利于让部分内容更得以搜索引擎的重视：
User-agent: *
Disallow: /wp-
Allow: /wp-content/uploads/
Disallow: /feed
Disallow: /*/*/feed
Disallow: /trackback
Disallow: /*/*/trackback
Disallow: /index.php/
Disallow: /*.php$
Disallow: /*.css$
Disallow: /date/
6. 如何屏蔽网站蜘蛛的访问
我的网站建好后什么结构与内容都没有确定好之前，我怎么去屏蔽搜索引擎蜘蛛不来访问我的网站，不收录我的网站，这样才不会给我的网站造成损失，其实这样的问题再网络也有很多种回答，可能是由于答案太多太乱的缘故，有很多的人都找不到比较权威的回答，前面我们在文章里讲到一些新手SEO推广建站需注意的问题里面没有讲到关于屏蔽蜘蛛的这一项，现在为大家介绍一下，总体的给大家归纳一下吧！在这里给大家介绍两种方法，如下：一、创建robots.txt文件，并将文件放置在网站根目录。 文件的内容如下： 1、禁止所有搜索引擎访问网站的任何部分 User-agent: * Disallow: / 大家知道为什么要创建一个robots.txt的文件吗，也许有很多的都知道建立这个文件就可以屏蔽蜘蛛的访问，不让搜索引擎抓取到自己的网站。在这里我想告诉你的是，不管任何的搜索引擎他来到了你的网站。首先访问的就是你的robots.txt日志文件，当你在robots.txt里设置权限不让搜索引擎访问，那么蜘蛛也会遵守互联网的协议进行返回，这就是为什么我们要建立robots.txt文析的原因。 二、在模版的header.php的文件时添加一段代码，因为蜘蛛来到你的网站是由上到下访问的，所以刚开始访问到的肯定是从header<顶部>开始抓取。所以如果我们在顶部里设置好屏蔽蜘蛛的访问代码后，蜘蛛也会跟第一条一样遵守协议返回。屏蔽蜘蛛访问代码如下：<meta name=”Robots” content=”noindex,nofollow”> 通过以上两种方法的话，我们基本上可以屏蔽搜索引擎蜘蛛访问到我们的网站，这样我们就可以去安心的做好网站的结构与内容之后再开放蜘蛛的访问。
7. 百度蜘蛛总是爬行网站的图片怎么办
网络的所有爬行都尽量不要屏蔽，一定不要阻止蜘蛛抓取图片，更新文章有规律就好，比如你上午更新，那么你就尽量一直在这个时间段，最好是原创。至于你说的那个情况，正常工作就好，不用去管它，太正常了，无论你做的好于不好，都太正常了。
8. 怎样预防百度蜘蛛不来网站，解决蜘蛛不访问网站
那是要看你的网站是否有原创内容，是否有大量不同ip每天访问的，你可以去网上下载“超强点击猫”这款软件，通过超强点击猫的自动换ip刷流量功能，能大大提高你的网站真实ip流量！而且超强点击猫这款软件还能做各类群发广告功能，如qq批量群发等，帮助你的网站做广告营销！
9. 如何屏蔽百度蜘蛛爬网站的某些网页呢。
可以使用robots协议。
参考信息：网页链接
10. 网站被攻击，百度蜘蛛访问全都都是死链怎么解决
1、找到漏洞，补漏洞。
2、垃圾页面的URl是否有规律性或者跟正常文章的URL不一样，如果不一样，或者有一定的规律性，直接robots屏蔽掉。
3、之前我们网站被注入了几万条的垃圾页面，处理方法也是同上，另外，网络站长工具中每天检查蜘蛛抓取异常，出现404页面第一时间提交即可。