当前位置：SEO自学网
> 第14页
百度Spider工程师给HTTPS站点的技术建议
5月25日，百度站长平台发出《百度开放收录HTTPS站点公告》，表示“全面支持HTTPS页面直接收录；另外从相关性的角度，百度搜索引擎认为权值相同的站点，采用HTTPS协议的页面更加安全，排名上会优先对待。”包括今天在与工程师的沟通会上，我们得知链接提交工具的Sitemap工具已也支持站长提交HTTPS数据。那么针对HTTPS，大家肯定还有一些疑问，于是我们专门请教了处理HTTPS数据的工程师：1、HTTP站点转为HTTPS后，对站点原本的评价权重得分是否有影响？答：无影响，后续会有正向收益，认
站长常见HTTP状态码及解决方案
HTTP状态码是用以表示网页服务器HTTP响应状态的3位数字代码。各位站长在平时维护网站过程中，可能会在站长工具后台抓取异常里面或者服务器日志里看到各种各样的响应状态码，有些甚至会影响网站的SEO效果，下面百度工程师为大家整理了一些常见的HTTP状态码及处理解决的方法：301：（永久移动）请求的网页已被永久移动到新位置。服务器返回此响应（作为对GET或HEAD请求的响应）时，会自动将请求者转到新位置。使用环境及影响：当站点迁移，域名变更、网站改版时，建议使用301返回码，除了能减少网站改版带来的
站点切换HTTPS不会对流量产生负面影响
随着互联网不断发展，网站产生交易量、保留用户数据量大幅增加，信息安全成为非常重要的事情，同时百度已经全面实现了HTTPS，越来越多的站点也开始考虑HTTPS化。最近院长不断接到站点的询问：我们网站也想上全量HTTPS，但担心对线上流量产生负面影响，我们该怎么做才能消取这种影响呢？为此站长平台工程师中伟请教了多位不同领域的Baiduspider工程师后，终于搞清楚了几个问题：问：对于HTTP和HTTPS，Baiduspider会不会区别对待？答：不会区别对待。说得再全整专业一些：Baiduspid
网站误封Robots该如何处理
robots文件是搜索生态中很重要的一个环节，同时也是一个很细节的环节。很多站长同学在网站运营过程中，很容易忽视robots文件的存在，进行错误覆盖或者全部封禁robots，造成不必要损失！那么如果误操作封禁了robots怎么办？今天我们请到了厦门258网站运营负责人——郑军伟，为我们分享网站robots误封禁后该如何操作？【案例背景】网站开发2.0版本，技术选择了在线开发，为了避免搜索引擎抓取开发版本，要求技术人员设置了Robots封禁处理。2.0版本开发周期1个月，1个月后网站版本迭代，直接
百度搜索资源平台-平台工具为站长解忧——数据抓取篇
站长每天上百度搜索资源平台，工具应该是最大吸引力之一，但站长并不一定了解平台每一个工具的功能，了解每一个工具能解决什么问题。为了帮助站长更好的了解使用平台工具，站长学堂特意制作了站长需求与平台工具对照页，第一期主题为数据抓取，后续还有网站变化分析、数据提交、移动工具等内容，希望各位持续关注。同时欢迎站长将我们的内容进行转发，让更多的站长朋友了解。请扫下方二维码，立即开启平台工具的世界：来源：百度搜索资源平台 百度搜索学堂
Robots文件是否支持中文目录
有同学问百度站长学堂一个关于robots的问题：我们有个站点的目录结构使用的是中文，这样式儿的：www.a.com/冒险岛/123.html，那在制作robots文件和sitemap文件的时候，可以直接使用中文吗？百度能获取到吗？在实际操作中我们发现，sitemap中有文件是可以生效的，但robots封禁貌似没有反应，所以想确认一下：robots文件是否支持中文?工程师解答：Baiduspider目前（2016年10月）在robots里是不支持中文的。同学追问：那我们进行UrlEncode编码会
禁止搜索引擎收录的方法
1. 什么是robots.txt文件?搜索引擎使用spider程序自动访问互联网上的网页并获取网页信息。spider在访问一个网站时，会首先会检查该网站的根域下是否有一个叫做 robots.txt的纯文本文件，这个文件用于指定spider在您网站上的抓取范围。您可以在您的网站中创建一个robots.txt，在文件中声明 该网站中不想被搜索引擎收录的部分或者指定搜索引擎只收录特定的部分。请注意，仅当您的网站包含不希望被搜索引擎收录的内容时，才需要使用robots.txt文件。如果您希望搜索引擎收录
巧用Robots避免蜘蛛黑洞
对于百度搜索引擎来说，蜘蛛黑洞特指网站通过极低的成本制造出大量参数过多，及内容雷同但具体参数不同的动态URL ，就像一个无限循环的“黑洞”将spider困住，Baiduspider浪费了大量资源抓取的却是无效网页。比如很多网站都有筛选功能，通过筛选功能产生的网页经常会被搜索引擎大量抓取，而这其中很大一部分检索价值不高，如“500-1000之间价格的租房”，首先网站（包括现实中）上基本没有相关资源，其次站内用户和搜索引擎用户都没有这种检索习惯。这种网页被搜索引擎大量抓取，只能是占用网站宝贵的抓取配
【院长帮帮忙】资讯页不收录，原来是抢发惹的祸（第四期）
里约奥运会结束了，资讯站点的小编们终于可以松口气了，可有些SEOer却高兴不起来：编辑辛苦抢先制作的原创稿件，百度却不！收！录！院长奥运会期间接到了四五起这样的反馈，经追查，原来是站点的抢发行为不够友好，导致spider抓取失败。结论：1，页面制作完成后再放到spider可以发现的地方，这样才能达到最好的抓取效果。2，页面未对外公开之前，千万不要通过工具推送给百度呀。接到站长反馈后，院长联系了spider工程师，工程师在后台查询了这些未收录的链接，发现均显示为“死链”，然而这些所谓的死链现在访问
页面无用时间信息导致网页不被抓取
在第一期【院长帮帮忙】栏目露面的站点是编织汇（www.bianzhihui.com），该站点通过反馈中心反馈页面内容迟迟不被抓取，经百度工程师追查，原来是因为页面上的无用时间信息——没有想到是不是？同学们快来看看这个案例吧。也想让院长帮助追查吗？快来看看这里！站点求助：现象编织汇网站内容发布后几个礼拜都未曾收录。案例如下：http://www.bianzhihui.com/t/6717（教程详细页面举例）http://www.bianzhihui.com/u/12306 （用户页面举例）http
善用抓取诊断工具：站点IP变更
在与站长朋友私下交流中，站长表示：最怕改版，最怕换IP，每次都是万不得已身不由己。改版还好些，有改版工具可以使用。换了IP都不知道怎么通知百度。其实，登录百度搜索资源平台，使用抓取诊断工具，换IP真的不是愁事。抓取诊断工具会检查站点与百度的连接是否畅通，若站长发现IP信息还是老旧的，可以通过“报错”通知百度搜索引擎更新IP，如下图所示：重要提示：由于spider精力有限，如遇报错后网站IP依旧没有变化，站长可进行多次尝试，直至达到预期。那么，除了用来通知百度搜索引擎站点更换了IP，抓取诊断工具还
【官方说法】百度蜘蛛抓取流量暴增的原因
Spider对网站抓取数量突增往往给站点带来很大烦恼，纷纷找平台想要Baiduspider IP白名单，但实际上BaiduSpider IP会随时变化，所以并不敢公布出来，担心站长设置不及时影响抓取效果。百度是怎么计算分配抓取流量的呢？站点抓取流量暴增的原因有哪些呢？总体来说，Baiduspider会根据站点规模、历史上网站每天新产出的链接数量、已抓取网页的综合质量打分等等，来综合计算抓取流量，同时兼顾站长在抓取频次工具里设置的、网站可承受的最大抓取值。从目前追查过的抓取流量突增的case中，原
百度不收录原因分析——spider抓取篇
目前百度spider抓取新链接的途径有两个，一是主动出击发现抓取，二就是从搜索资源平台的链接提交工具中获取数据，其中通过主动推送功能“收”上来的数据最受百度spider的欢迎。对于站长来说，如果链接很长时间不被收录，建议尝试使用主动推送功能，尤其是新网站，主动推送首页数据，有利于内页数据的抓取。那么同学们要问了，为什么我提交了数据还是迟迟在线上看不到展现呢？那涉及的因素可就多了，在spider抓取这个环节，影响线上展现的因素有：1、网站封禁。你别笑，真的有同学一边封禁着百度蜘蛛，一边向百度狂交数
轻松两步，教你快速识别百度蜘蛛（User-Agent）
经常听到开发者问，百度蜘蛛是什么？最近百度蜘蛛来的太频繁服务器抓爆了！最近百度蜘蛛都不来了怎么办？还有很多站点想得到百度蜘蛛的IP段，想把IP加入白名单，但IP地址范围动态变化不固定，我们无法对外公布。那么如何才能识别正确的百度蜘蛛呢？今日干货带你轻松两步正确识别百度蜘蛛：一、查看UA信息如果UA信息不对，可以直接判断为非百度搜索的蜘蛛。目前UA分为移动、PC、和小程序三个应用场景，这三个渠道UA分别如下：移动UA：Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn
【院长帮帮忙】流量断崖式下跌，如何自查恢复？（第七期）
院长近期收到一个VIP站点反馈，站点下的所有收录都没有了，站点流量断崖式下跌，先来看看这扎心的图：PC端流量变化：移动流量变化：院长解答：出现这种情况，首先要站长观察流量下滑期间站点是否有异常，并自查以下步骤：1. 网站自查发现自己出现过服务器异常，服务器错误导致页面失效，需尽快恢复站点服务器；这里推荐使用站长平台“抓取异常工具”&“抓取诊断工具”，可整体统计站点近期抓取问题，模拟蜘蛛抓取行为，判断网站异常。2. 及时进行流量查询，可使用流量与关键词工具，如果出现流量断崖式下降趋势，立刻
站点流量异常追查文档-相关因素之外链爆增
站点流量异常原因之相关因素：外链爆增搜索资源平台在接到很多案例中，有很大一部分是因为外链异常而流量受到较大影响的，在此先给大家说一下外链工具（该工具已下线）显示数据来源及规则：外链工具（该工具已下线）是统计站点在一段时间内，链接到您网站的URL、被链接网页URL、锚文本等内容，站长可以通过这些数据识别和判断哪些是符合预期的外链投票、哪些是不符合预期的。那么如果发生外链爆增时绝大部分站点是不符合预期的增长，这里我们从三种情况出发来剖析和解决此类问题。1、首页、频道页、重点页面被恶意投票A、此类事件
站点流量异常追查文档-特征页分析
站点流量异常原因之特征页分析1、分析流程图流程图会按照三步来让站点确认到底是正常下跌还是异常下跌，在此站长第一步首先要找到特征页面2、查找特征页面首先说什么叫特征页面，即流量下滑比较多的页面，这类页面又是结构化页面，内容不同页面所抢的关键词不同，但页面框架结构是统一的。比如关键词“北京旅游、上海旅游、天津旅游”对应A类页面，那么在此类关键词消失后，这个A类页面也没有流量，于是A类页面就是我们说的特征页面，要看看A类页面发生过哪些变化。首先找出昔日的流量对比，过去一段时间与现状的差距。其次回忆一下
站点流量异常追查文档-运维篇
站点流量异常原因之运维篇1、CDN一些网站会使用CDN加速服务，最近每周搜索资源平台都会接到一两个跟CDN加速问题有关的案例。CDN这里存在一个问题：不同的CDN服务商在全国分布的节点数不同，站点在使用CDN服务时，同一地区CDN给蜘蛛返回的IP地址要和给用户的一致。那么现实情况是，部分CDN服务商出于成本考虑与资源使用率的问题，会在不告知用户的情况下变更IP地址以节约成本，这样就导致蜘蛛在去抓的时候，会遇到新IP和老IP的问题，在站点没有告知更换IP的情况下，蜘蛛会认为站点目前存在问题，首先是
站点流量异常追查文档-先普及一个概念：什么是流量异常
什么是流量异常来自百度搜索的流量突然间降了50%以上，且是持续性的，即已经连续四至五天流量没有明显涨幅变化。如下图所示：如果出现上述现象，建议大家从运维角度、页面特征，以及相关因素来判断原因。来源：百度搜索资源平台 百度搜索学堂
站点流量异常追查文档-目录
先普及一个概念：什么是流量异常一，运维篇1、CDN2、robots3、UA/IP4、安全问题/管理不善A、域名泛解析B、网站被黑C、网页被挂马D、UGC站点被SPAMMER群发二，特征页分析1、分析流程图2、查找特征页面3、分析异常特征A、排名无，流量无B、部分排名无，流量损失较大三，相关因素——外链爆增1、首页、频道页、重要页面被恶意投票2、用户创建页面、垃圾个人页、内容页被恶意投票3、拼接搜索结果页漏洞4、如何预防产生拼接搜索结果页来源：百度搜索资源平台 百度搜索学堂
站点流量异常追查文档
最新更新章节：2019-01-06百度搜索资源平台几乎每天都会接到站长关于流量的询问，很多站长发现站点流量发生很大变化后，第一反应就是认为自己被误判降权了，情绪激动者不经审核立即开始在公开媒体声讨百度为自己造势。但经过百度站长平台追查，大部分站点都不是真的被惩罚了，或者说并不是因为站点主观原因被惩罚。所以，为了解开站长关于站点流量大幅下滑的谜团，更好地帮助站长查找原因，我们推出了《站点流量异常追查文档》，希望能给站长一些启示。来源：百度搜索资源平台 百度搜索学堂
移动站点流量异常排查官方文档-移动站点流量异常追查
什么是移动端流量异常？移动端流量异常可以通过平台两个渠道数据判断：1、 搜索资源平台流量与关键词的工具2、 移动适配中的移动适配状态曲线图这两个地方如果出现流量突然间下降50%以上，且持续性降低，四五天后流量没有明显涨幅的。如下图所示：移动端的排查流程如果出现上述现象，建议大家按照下面流程图进行排查《索引量下降常见原因及解决方案》《站点流量异常追查文档》纯移动站、代码适配，自适应与跳转适配有些不同，所以根据搜索资源平台的索引量工具来判断，索引量下跌并流量下跌，可以先从索引
移动站点流量异常排查官方文档
最新更新章节：2019-03-04网站流量是站点生存的根本，特别是现阶段移动端的流量已经到了比较大的量级。移动端网站有流量了，每天就会有很多的用户，网站才有赢利的可能。移动端网站没有流量，就等同于枯竭的水库。然而很多时候网站的流量会出现波动，甚至出现流量异常。面对流量异常站长们应该如何排查，站长平台资深专家们向大家介绍了移动端流量异常的解决方案。来源：百度搜索资源平台 百度搜索学堂
【官方说法】网站流量异常，如何正确反馈？
网站流量异常一直是站长们最头疼的问题，而每次在反馈中心提交问题，经常得到回复请详细描述您的问题，怎么详细描述问题呢？为此，学堂君特邀反馈中心值班员，来给大家详解如何正确提交反馈。在反馈中心后台，值班员最常看到的反馈往往是：“我的网站流量下降了，收录下降了，请百度人员检查一下。”这样的反馈最让人头大，没有任何数据支持，没有提供url追查，而且一个站点下会有多个二级域，这么简单的描述不仅无法让问题快速解决，还增加了值班员的工作量。以下秘籍，请各位站长们记好，只有正确的提交方式，才能得到最快的响应处理
巧用站长平台工具做SEO数据分析
在大中型网站SEO服务项目的运作过程中，对数据的精细化分析以及由此推导而来的优化改进方向是提升效果的法宝，它能帮我们发现当前SEO策略的盲点，甚至突破网站SEO效果的阶段性瓶颈。今天我们有幸请到SEO专家—郝聪为大家分享如何使用站长平台工具进行SEO数据分析！首先说几个抛砖引玉的问题：1、是否有些内容可以作为流程加入到我们的日常工作中（例如：热点新闻的即时抓取反馈到编辑，编辑发布相关内容）；2、各页面类型的收录情况（特别是重复页面的收录）；3、各页面类型的流量情况，通过GA正则细分流量数据（包括