我们在优化网站的时候，有很多不利于蜘蛛抓取的设置。具体有哪些设置？让我给你介绍一下。让我们来看看。
登录设置
有些网站会设置注册账号的服务，登录后才能看到网站的内容。这种设置对蜘蛛并不友好，蜘蛛无法注册登录，自然抓不到。
动态URL
所谓动态URL就是“？”在链接中。同时以aspx、asp、jsp、perl、php、cgi为后缀的URL都是动态URL。动态URL不稳定，不如静态URL稳定。搜索引擎一般对动态网址的信任度不够，所以很多动态网址是收录不了的。
使用cookie
cookie用于识别用户的身份。如果不打开cookies，就无法访问，会让蜘蛛无法访问，从而影响抓取。
网站跳转
有些网站打开后会自动跳转到其他页面。跳转会增加网站的加载时间。不建议大家这么做。跳301就行了，可以集中权重，不建议其他类型的调整。
闪存文件
有些网站设计一些Flash文件，给浏览用户带来很好的视觉效果。不幸的是，搜索引擎看不到也看不到任何东西。所以为了体现网站优化更好的效果，不推荐这种Flash作为首页图片。
作者： | 来源：[db:出处] | 发布于：2022-02-19 22:49:54