如何禁止部分网页被收录,设置方法是什么
Admin 2022-11-23 群英技术资讯 761 次浏览
通常做网站的目标就是让搜索引擎收录,扩大推广面,但是如果你的网站涉及个人隐私或者机密性非公开的网页,而需要禁止搜索引擎收录抓取的话,那么禁止网站部分网页不被收录的方法有哪些?
1) noindex 标签
利用“noindex”禁止搜索引擎抓取页面,在不希望被收录的网页中使用以下指令:
<meta name="robots" content="noindex">
利用这个方法可以有效的解决不想要被收录页面。也是比较推荐的方式,可以解决大多数的问题,操作容易,就是需要单页面设定,如果页面数量多会有执行困难,需要后台开发单页面代码插入功能。
2) robots.txt 协议
robots.txt 文件位于网站根目录,能够向搜索引擎爬虫表明你不希望被收录的网站内容路径。在大多数的情况下都可以解决不想被收录的问题,不过 robots.txt 本身还是有一些限制的,比如它不是强制的指令,因此不是每个搜索引擎都会完全遵守 robots.txt 内的协议。
3) 服务器设定解决
直接在服务器上把目录或文件设定成密码存取,例如使用Apache网页服务器时,可以编辑 .htaccess 文件使目录受密码保护。如此一来就可以保证搜索引擎不会抓取,这是最根本且绝对有效的方式,不过这样设定也代表了用户无法查看网页,可能会不符合网站设计的目的,因此这个方法通常只适合应用在敏感的资料上
免责声明:本站发布的内容(图片、视频和文字)以原创、转载和分享为主,文章观点不代表本网站立场,如果涉及侵权请联系站长邮箱:mmqy2019@163.com进行举报,并提供相关证据,查实之后,将立刻删除涉嫌侵权内容。
猜你喜欢
收录的内容的有效性和排名等同样是分析的重点,这些都是衡量网站内容收录的效果,对于网站最终的排名和引流效应产生最为直接的影响。正是如此,本文研究的重点就是探究如何更加精细的分析网站内容的收录情况
SEO的六个环节或步骤:1、关键词分析;2、网站架构分析,包括剔除网站架构不良设计、实现树状目录结构、网站导航与链接优化;3、网站目录和页面优化;4、内容发布和链接布置;5、与搜索引擎对话;6、网站流量分析。
在变化莫测及高速发展的互联网平台中,用户使用关键词搜索自己想要的相关资讯,为企业寻找了一条打开市场的便捷道路,如果想要吸引精准流量,提高网站排名,需要利用优化关键
获得高权重的友情链接;在博客里写一些高质量的文章,通过别人转载获取外链;论坛上留外链;网站投稿;问答平台上获取;网摘;信息分类网站留链接;购买外链。
当下内容优化的重要性已经远远的大于了网站外链优化,那么网站怎样做优化?本文将提供网站优化有价值的内容来源于用心的积累和分析供大家了解,希望对大家有所帮助和启发
成为群英会员,开启智能安全云计算之旅
立即注册Copyright © QY Network Company Ltd. All Rights Reserved. 2003-2020 群英 版权所有
增值电信经营许可证 : B1.B2-20140078 粤ICP备09006778号 域名注册商资质 粤 D3.1-20240008