如何禁止部分网页被收录,设置方法是什么
Admin 2022-11-23 群英技术资讯 511 次浏览
通常做网站的目标就是让搜索引擎收录,扩大推广面,但是如果你的网站涉及个人隐私或者机密性非公开的网页,而需要禁止搜索引擎收录抓取的话,那么禁止网站部分网页不被收录的方法有哪些?
1) noindex 标签
利用“noindex”禁止搜索引擎抓取页面,在不希望被收录的网页中使用以下指令:
<meta name="robots" content="noindex">
利用这个方法可以有效的解决不想要被收录页面。也是比较推荐的方式,可以解决大多数的问题,操作容易,就是需要单页面设定,如果页面数量多会有执行困难,需要后台开发单页面代码插入功能。
2) robots.txt 协议
robots.txt 文件位于网站根目录,能够向搜索引擎爬虫表明你不希望被收录的网站内容路径。在大多数的情况下都可以解决不想被收录的问题,不过 robots.txt 本身还是有一些限制的,比如它不是强制的指令,因此不是每个搜索引擎都会完全遵守 robots.txt 内的协议。
3) 服务器设定解决
直接在服务器上把目录或文件设定成密码存取,例如使用Apache网页服务器时,可以编辑 .htaccess 文件使目录受密码保护。如此一来就可以保证搜索引擎不会抓取,这是最根本且绝对有效的方式,不过这样设定也代表了用户无法查看网页,可能会不符合网站设计的目的,因此这个方法通常只适合应用在敏感的资料上
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:mmqy2019@163.com进行举报,并提供相关证据,查实之后,将立刻删除涉嫌侵权内容。
猜你喜欢
怎么样做网站优化?网站优化就是对网页的程序、内容、版块、布局等多方面的优化调整,使其适合搜索引擎检索,满足搜索引擎排名的指标,从而在搜索引擎检索中获得的排名提升,增强搜索引擎营销的效果。
优化是可以让网站本身发挥出自己优势的一种营销方式,当然想要发挥出优势,我们需要进一步地去了解它,今天就带大家了解下如何才能让关键词的排名顺利的达到首页,一起来看看吧! SEO优化中关键词到首页技巧有哪些?
不论是在用户点击网站的过程中亦或者说是在网站SEO优化中,网站的访问速度都是至关重要的,非常的关键,对于用户或者搜索引擎蜘蛛来说网站的访问速度慢,会导致用户流失以及蜘蛛不再抓取
现在很多企业和站长都开始发展电商网站,而做电商网站最关心的就是流量,这直接关系到网站的收益问题,因此电商网站做优化也是很有必要的。电商网站的特点就是图片多,文字少,而且更新快,因此做好网站过期页面和内链结构优化很重要。
网站外链的利与弊:优秀的外链能有效增加网站的曝光率,对排名具有较高的促进作用,被百度给予了较高的权重;过多的无效链接和垃圾链接可能导致自己的网站被严重降权。
成为群英会员,开启智能安全云计算之旅
立即注册Copyright © QY Network Company Ltd. All Rights Reserved. 2003-2020 群英 版权所有
增值电信经营许可证 : B1.B2-20140078 粤ICP备09006778号 域名注册商资质 粤 D3.1-20240008