1. 2个域名绑定一个网站，如何禁止其中一个域名被收录

我是在做cdn时候也遇到这个问题 是关于开启cdn不能使用后台管理的场景 。
20190501 - 你那问题解决了吗？要不加我下 我来看看就当交个朋友。

2. 如何屏蔽搜索引擎对某个域名的收录

如果楼主不想关掉那个域名的话又不能做301那就没有比较好的办法了,用rotobs文件屏蔽是不可以的,这样会导致两个域名都不收录.楼主可以试下URL转发,这个方法对搜索引擎应该是不友好的,请楼主斟酌.

3. 禁止某二级域名的抓取,robots如何写

首先抄，你要明白robots文件怎么写！一般允许抓取的话是
allow：/www/xxx/
如果是不允许的话就是:disallow:/www/xxxx/
你如果想禁用你的二级网站的话，只需要禁用二级网站所在的文件夹就好了！例如，你的二级网站所在的文件夹是/erji/
那么，你就可以在robots加入：
disallow:/www/erji/ 就可以了！

4. 关于robots中，屏蔽二级域名的写法

robots中，屏蔽二级域名的写法：
User-Agent:
*Disallow: /
robots.txt一般指robots协议，（也称为爬专虫协议、机器属人协议等）的全称是“网络爬虫排除标准”（Robots Exclusion Protocol），网站通过Robots协议告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取。robots.txt文件是一个文本文件，使用任何一个常见的文本编辑器，就可以创建和编辑它。

5. robots文件里面禁止抓取二级域名，怎么写

1、Robots是控制当前目录下文件的抓取的，和域名无关。

2、想实现如题效果，可直接在该二级域名对应的网站目录下添加robots，禁止所有Disallow: *。

6. 特定网页禁止收录的方法

特定网页禁止收录的方法：
例：特定网页网址为abc.com/xyz/123.html
在robots.txt文件中输入:Disallow: /xyz/123
Robots协议（也称为爬虫协议、机器人协议等）的全称是“网络爬虫排除标准”（Robots Exclusion Protocol），网站通过Robots协议告诉搜索引擎哪些页面可以抓取，哪些页面不能抓取。
文件写法：
User-agent: * 这里的*代表的所有的搜索引擎种类，*是一个通配符
Disallow: /admin/ 这里定义是禁止爬寻admin目录下面的目录
Disallow: /require/ 这里定义是禁止爬寻require目录下面的目录
Disallow: /ABC/ 这里定义是禁止爬寻ABC目录下面的目录

7. robots.txt禁止搜索引擎收录,会影响网站吗

没有多大影响，可以短时间屏蔽，网站调整结束后，可以解屏蔽，就可以恢复收录。

8. 如何设置让网站禁止被爬虫收录

1、网站建设好了，当然是希望网页被搜索引擎收录的越多越好，但有时候我们也会碰到网站不需要被搜索引擎收录的情况。要启用一个新的域名做镜像网站，主要用于PPC 的推广，这个时候就要想办法屏蔽搜索引擎蜘蛛抓取和索引我们镜像网站的所有网页。因为如果镜像网站也被搜索引擎收录的话，很有可能会影响官网在搜索引擎的权重。

2、屏蔽主流搜索引擎爬虫（蜘蛛）抓取/索引/收录网页的几种思路。是整站屏蔽，而且是尽可能的屏蔽掉所有主流搜索引擎的爬虫。

3、通过 robots.txt 文件屏蔽，可以说 robots.txt 文件是最重要的一种渠道（能和搜索引擎建立直接对话）。通过 meta tag 屏蔽，在所有的网页头部文件添加，添加如下语句：<meta name="robots" content="noindex, nofollow">。通过服务器（如：Linux/nginx ）配置文件设置，直接过滤 spider/robots 的IP 段。