很多时候我们做外贸网站做外贸代运营的时候都会建立一个news的栏目,使用news的目的就是为了增加一个网站动态信息的更新,这样可以给网站不断的增加内容,在内容增加的过程中布置关键词keyword,这样优化很好。
因为不同的公司外贸网站定位不同,news的类目也会有所不同,比如有的是news里面放一个“PRODUCTS INFORMATION”版块,有的加一个“KNOWLEDGE”版块。
无论是增加哪个版块,在内容布局上news作为一级类目,是首先被Google抓取的,抓取后就会提取里面的文章,进行深层次抓取。
但,为了避免过多的重复抓取,比如“PRODUCTS INFORMATION”还有“KNOWLEDGE”,这里面的文章在“news”中已经抓取了,如果这里Google抓取到“PRODUCTS INFORMATION”和“KNOWLEDGE”页面,会把里面的列表文章重复抓取。
为了更好的优化,我们可以借鉴Google给的noindex标签进行编辑,这样告知Google搜索引擎不再去抓取二级类目列表页。
noindex标签的写法如下:
<meta name=”robots” content=”noindex, follow” />
就是在页面开头的部分增加一段这样的代码告知Google搜素引擎,这样Google在抓取的时候就会识别出来,给该页面跳过不抓取,也不收录。
如上图所示,使用了noindex的标签页面,一定不要放到网站站点地图中,否则Google Search Console就会报错。