热门标签 | HotTags
当前位置:  开发笔记 > 后端 > 正文

html禁止百度抓取,禁止百度收录方法是什么?

小编:我们都知道robots.txt文件中的协议是用来告诉搜索引擎哪些页面可以抓取,哪些页面不能抓取的。如为了禁止百度收录网站的某些特地的页面ÿ

小编:我们都知道robots.txt文件中的协议是用来告诉搜索引擎哪些页面可以抓取,哪些页面不能抓取的。如为了禁止百度收录网站的某些特地的页面,除robots.txt外,我们还可以用Meta robots标签来

1ab1ed6da9c6037fa3d584e03be39d43.png

我们都知道robots.txt文件中的协议是用来告诉搜索引擎哪些页面可以抓取,哪些页面不能抓取的。如为了禁止百度收录网站的某些特地的页面,除robots.txt外,我们还可以用Meta robots标签来定义。

Meta robots标签是页面head部分标签的一种,也是一种用于禁止搜索引擎索引页面内容的指令。robots Meta放置在HTML网页代码的

之内。现目前百度仅支持nofollow和noarchive:

1、Nofollow:不要追踪此网页上的链接或不wq 要追踪此特定链接

2、Noarchive:禁止搜索引擎在搜索结果中显示网页快照

Nofollow标签的用法及作用:

f91112816b2ccac3d672ee01c6839f3f.png

Noarchive标签的用法及作用:

此项达到的效果是当用户在搜索引擎中点击“百度快照”链接时,打开的并非百度备份/缓存的网页【http://cache.baiducontent.com/c?m=】而是直接到达原页面【http://www.abc.com/toefl/70.html】

2503a220e8b5626a59a4e1ea69c67a00.png

注:除【不追踪某一条特定链接】外,其余元标记均置入网页的

部分

通过以上设定可以有效的控制内部链接权重,集中网站的权重,并促进更多有价值的页面被搜索引收录,让更有价值的页面在搜索引擎中具有更强的竞争力。

当前网址:http://www.renrenseo.com/seo/dayi/94.html



推荐阅读
  • 本文将介绍如何编写一些有趣的VBScript脚本,这些脚本可以在朋友之间进行无害的恶作剧。通过简单的代码示例,帮助您了解VBScript的基本语法和功能。 ... [详细]
  • PHP 5.2.5 安装与配置指南
    本文详细介绍了 PHP 5.2.5 的安装和配置步骤,帮助开发者解决常见的环境配置问题,特别是上传图片时遇到的错误。通过本教程,您可以顺利搭建并优化 PHP 运行环境。 ... [详细]
  • 1.如何在运行状态查看源代码?查看函数的源代码,我们通常会使用IDE来完成。比如在PyCharm中,你可以Ctrl+鼠标点击进入函数的源代码。那如果没有IDE呢?当我们想使用一个函 ... [详细]
  • 本文详细介绍了Java编程语言中的核心概念和常见面试问题,包括集合类、数据结构、线程处理、Java虚拟机(JVM)、HTTP协议以及Git操作等方面的内容。通过深入分析每个主题,帮助读者更好地理解Java的关键特性和最佳实践。 ... [详细]
  • 360SRC安全应急响应:从漏洞提交到修复的全过程
    本文详细介绍了360SRC平台处理一起关键安全事件的过程,涵盖从漏洞提交、验证、排查到最终修复的各个环节。通过这一案例,展示了360在安全应急响应方面的专业能力和严谨态度。 ... [详细]
  • 本文详细介绍了如何构建一个高效的UI管理系统,集中处理UI页面的打开、关闭、层级管理和页面跳转等问题。通过UIManager统一管理外部切换逻辑,实现功能逻辑分散化和代码复用,支持多人协作开发。 ... [详细]
  • Hadoop入门与核心组件详解
    本文详细介绍了Hadoop的基础知识及其核心组件,包括HDFS、MapReduce和YARN。通过本文,读者可以全面了解Hadoop的生态系统及应用场景。 ... [详细]
  • 优化ListView性能
    本文深入探讨了如何通过多种技术手段优化ListView的性能,包括视图复用、ViewHolder模式、分批加载数据、图片优化及内存管理等。这些方法能够显著提升应用的响应速度和用户体验。 ... [详细]
  • 本文详细介绍了如何解决Uploadify插件在Internet Explorer(IE)9和10版本中遇到的点击失效及JQuery运行时错误问题。通过修改相关JavaScript代码,确保上传功能在不同浏览器环境中的一致性和稳定性。 ... [详细]
  • 1:有如下一段程序:packagea.b.c;publicclassTest{privatestaticinti0;publicintgetNext(){return ... [详细]
  • Python自动化处理:从Word文档提取内容并生成带水印的PDF
    本文介绍如何利用Python实现从特定网站下载Word文档,去除水印并添加自定义水印,最终将文档转换为PDF格式。该方法适用于批量处理和自动化需求。 ... [详细]
  • 如何在PHPCMS V9中实现多站点功能并配置独立域名与动态URL
    本文介绍如何在PHPCMS V9中创建和管理多个站点,包括配置独立域名、设置动态URL,并确保各子站能够正常运行。我们将详细讲解从新建站点到最终配置路由的每一步骤。 ... [详细]
  • 百度服务再次遭遇技术问题,疑似DNS解析故障
    近日晚间,百度多项在线服务出现加载异常,包括移动端搜索在内的多个功能受到影响。初步迹象表明,问题可能与DNS服务器解析有关。 ... [详细]
  • 根据最新发布的《互联网人才趋势报告》,尽管大量IT从业者已转向Python开发,但随着人工智能和大数据领域的迅猛发展,仍存在巨大的人才缺口。本文将详细介绍如何使用Python编写一个简单的爬虫程序,并提供完整的代码示例。 ... [详细]
  • 本题通过将每个矩形视为一个节点,根据其相对位置构建拓扑图,并利用深度优先搜索(DFS)或状态压缩动态规划(DP)求解最小涂色次数。本文详细解析了该问题的建模思路与算法实现。 ... [详细]
author-avatar
手机用户2502938985
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有