robots.txt屏蔽抓取index.html
User-agent: * Disallow: /index.htm
我这样写是不是就能避免蜘蛛爬这个“index.htm”这个首页?
我的index.htm是现在默认的首页,想屏蔽蜘蛛抓取。让蜘蛛爬另一个文档,主要是规避备案巡查
我的网站和我备案的不一样,服务器那边要求改,我就整了个htm文档来规避下。
写法没有问题。但正常的不建议屏蔽锕首页地址,,“index.htm”这个后缀地址是需要处理掉的。
当然,如果只是应付备案短暂需求,,就只能这样处理。
后续备案处理后,尽快处理后缀“index.htm”。同时robots修改回去。
如果网站存在很多的动态链接,很可能是被人刷
这个时候可以在robots.txt中进行屏蔽。
nofollow是否会分权
会的。例如A网页的链接跑去B网页,如果不加nofollow的话,会把A网页的权重传递给B网页了。
文章
文章不能够单纯的复制粘贴要进行组合和修改,尽量是伪原创。
网站的前三个月,尽量避免低质量的文章质量。
做关键词的一个技巧
首页对于难度比较大的关键词,就放到首页。
难度比较小的关键词就放到其他的页面。
如果首页的排名词靠后,那么就需要给首页做集权。这个时候就要给首页没有必要的链接加上nofollow链接。
转码链接 指的是 地址栏上有个中文,但是中文在浏览器上显示的是转码链接。
网站只收录主页,内容页一直都不收录的原因有哪一些
首先,要确保网站页面是否可以被搜索引擎正常抓取到,检查robots设置(是否有屏蔽抓取情况)
其次,通过百度抓取诊断去抓取下内页,多抓取一些,测试是否可以正常抓取。
最后,网站是否有url结构问题,(层次控制在3层左右,尽量伪静态不要有动态链接)
以上三点都没有问题,,自我分析网站内容是否质量没有问题
确保,可以被抓取,url结构,内容质量没有问题,,建议保持更新,同时做好链接的提交工作,另外也可以使用搜外友链的蜘蛛池 来帮助链接被搜索引擎更好的抓取到。增加收录概率。
网站更换主机是否会影响现有排名?更换IP会影响吗
如果不是频繁的进行更换,是没有影响的。另外更换后,及时在百度资源平台,使用抓取诊断,看下IP是否正确,如果不对,需要报错更改下
如何挖掘竞争对手的关键词,怎么知道竞争对手做了哪些关键词
是的,通过在站长工具的综合查询里,可以查询到对方站点的词库,里面可以看到有哪些关键词。