第一种指令方式是robots meta tag，也就是robots meta 标签，在Google的官方文档中会以「漫游器中继标签」称之；另一种则是透过网络服务器创建的x-robots-tag HTTP标头。在两种方式中可以使用一样的指令，例如「noindex」或「nofollow」等常见的指令，只是在沟通方式以及应用层面上略有不同。该特别注意的一点是：robots meta指令要生效，前提是网址必须受到检索，如果robots.txt禁止某个网页被搜索引擎的爬虫程序检索，则该
网页速度，代表网页内容读取的速度，是一种衡量网页表现的指针，但单看这个名词本身并不具有一个明确的定义。 一般来说，常见的描述方式有网页加载时间(page load time)与TTFB(time to first byte)等，网页加载时间指的是完整读取网页并显示于浏览器所花费的时间，而TTFB则是从用户端送出请求起，到用户端浏览器收到第一个字节为止所经过的时间。 然而，Google等搜索引擎并没有明确指出在网页速度这个因素，各自采用了什么计算标准。网页速度与网站速度这两个名
