• 通过日志查询到蜘蛛抓取量并不少,但收录却很少 301


    https://zhuanlan.zhihu.com/p/20275322

    http://ziyuan.baidu.com/crawltools/index

    http://ziyuan.baidu.com/robots/index

    Robots

    使用说明
    • 1. robots.txt可以告诉百度您网站的哪些页面可以被抓取,哪些页面不可以被抓取。
    • 2. 您可以通过Robots工具来创建、校验、更新您的robots.txt文件,或查看您网站robots.txt文件在百度生效的情况。
    • 3. Robots工具目前支持48k的文件内容检测,请保证您的robots.txt文件不要过大,目录最长不超过250个字符。

     

    抓取频次

     因您未登录,只可以浏览部分内容,查看更多,请 

    使用说明

    • 抓取频次是搜索引擎在单位时间内(天级)对网站服务器抓取的总次数,如果搜索引擎对站点的抓取频次过高,很有可能造成服务器不稳定,Baiduspider会根据网站内容更新频率和服务器压力等因素自动调整抓取频次

    注意事项

    • Baiduspider会根据网站服务器压力自动进行抓取频次调整
    • 建议您慎重调节抓取频次上限值,如果抓取频次过小则会影响Baiduspider对网站的收录

    功能示例

    • Baiduspider无法正常抓取,就是抓取异常,对于大量内容无法正常抓取的网站,搜索引擎会认为网站存在用户体验上的缺陷,并降低对网站的评价,在抓取、索引、权重上都会受到一定程度的负面影响,最终影响到网站从百度获取的流量

    使用说明

    • HTTPS协议的站点信息更加安全,同时可降低网站被劫持的风险,如网站同时存在HTTP和HTTPS站点,可使用本工具进行认证,便于百度搜索识别网站HTTP与HTTPS之间的对应关系,识别成功后,搜索端将及时展示网站HTTPS资源

    注意事项

    • 使用HTTPS认证,需要保证全站所有链接都支持HTTPS访问
    • 每个站点每天最多可使用3次认证功能

    官网保护

     因您未登录,只可以浏览部分内容,查看更多,请 

    使用说明

    • 若网站的官网未被百度收录或收录后明确寻址需求下官网展现位置靠后,站长可以使用官网保护工具将明确寻址需求词及其对应官网链接提交给百度,百度审核通过并生效后,站长还可以将展现的其他冒充官网结果的网站进行举报,百度会再次进行审核,通过后会对伪官网进行打压

    注意事项

    • 官网保护与官网标不是同一产品,审核通过后不保证官网标的展现
    • 外链数据是未经过百度搜索计算过滤的原始信息,仅供参考,请勿用于非正当用途
    • 外链数量的多少,并不能决定您网站在百度的搜索排名,具体资料查看,请点击此处

    使用说明

    • 当一个站点的域名或者目录发生变化时,如果想让百度快速收录变化之后的新链接、用以替换之前的旧链接,那么您就需要使用百度搜索资源平台的网站改版工具来提交您的改版关系,加速百度对已收录链接的新旧替换

    注意事项

    • 改版规则中的新旧链接一定要使用301的方式进行跳转
    • 建议您尽量使用站点改版和规则改版,会有比较短的处理周期,也缩短后续您反馈问题的追查用时间
    • 百度搜索资源平台对改版规则的校验时间范围为0.5——2小时,改版生效时间范围为12——48小时,整体来看,您从提交改版规则到线上生效,最短12.5小时,最长50小时
    • 该工具针对的是网站链接的改变,网站内容改版不适用于该工具
    • 您提交的三类改版形式,不能有交叉或者包含关系,即不能有一条链接同时属于多个改版形式
    • 改版跳转关系请长期保持,直到新站流量完全稳定

    使用说明

    • 由网站自身原因(改版、暂停服务等)、客观原因(服务器故障、政策影响等)造成的网站较长一段时间都无法正常访问,百度搜索引擎会认为该站属于关闭状态。站长可以通过闭站保护工具进行提交申请,申请通过后,百度搜索引擎会暂时保留索引、暂停抓取站点、暂停其在搜索结果中的展现。待网站恢复正常后,站长可通过闭站保护工具申请恢复,申请审核通过后,百度搜索引擎会恢复对站点的抓取和展现,站点的评价得分不会受到影响

    注意事项

    • 站长关闭站点后应立即申请闭站保护,若申请不及时,站点很可能被判为死链,影响后续的收录和展现
    • 支持两种闭站方法,全站HTTP状态码设置为404或者切断电源关闭服务器,不支持使用DNS方法闭站,noip不会通过闭站申请校验
    • 申请闭站保护,若通过审核将在一天内生效;申请取消闭站保护,若通过审核将在2天以内生效
    • 闭站保护期最长为180天,超过180天将自动取消闭站保护
    • 使用闭站工具只能保留您网站的索引量,但不保证网站的排名不变
    • 闭站保护期间,为了满足用户的寻址需求,首页会被豁免,不予屏蔽
  • 相关阅读:
    在dubbo的一端,看Netty处理数据包,揭网络传输原理
    解惑:什么叫模型?
    拜托!不要再问我是否了解多线程了好吗
    微软职位内部推荐-Senior SW Engineer for Application Ecosystem
    微软职位内部推荐-Senior Software Engineer
    微软职位内部推荐-Senior Software Engineer_Azure
    微软职位内部推荐-Software Engineer II
    微软职位内部推荐-Senior Software Engineer
    微软职位内部推荐-Software Engineer II
    微软职位内部推荐-Senior Software Engineer
  • 原文地址:https://www.cnblogs.com/rsapaper/p/8272721.html
Copyright © 2020-2023  润新知