百度站长学院前几天公布了一个案例,里面提到一些细节,特别值得站长重视。
它这个页面对爬虫爬取做的优化,直接将图片二进制内容放到了html中导致页面长度过长,大小164K,导致内容不被百度收录。
百度:网页长度大于128k会影响甚至不收录
网站如果针爬虫做优化,那么网页的长度最要在128K以内,不要过长。不然爬虫抓取内容后,页面内容过长被截断,已抓取部分无法识别到主体内容,最终导致页面被认定为空短而不收录。
言下之意,这可能是百度技术缺陷导致,如果网页在128K以上,爬虫无法抓取就无法收录。如果各位站长的网站内容过长,尽量删除一部分不太重要的信息,以保证内容收录。
百度工程师建议:
1、不建议站点使用js生成主体内容,如js渲染出错,很可能导致页面内容读取错误,页面无法抓取
2、 如站点针对爬虫爬取做优化,建议页面长度在128k之内,不要过长
3、针对爬虫爬取做优化,请将主题内容放于前方,避免抓取截断造成的内容抓取不全
内容出处:,
声明:本网站所收集的部分公开资料来源于互联网,转载的目的在于传递更多信息及用于网络分享,并不代表本站赞同其观点和对其真实性负责,也不构成任何其他建议。如果您发现网站上有侵犯您的知识产权的作品,请与我们取得联系,我们会及时修改或删除。文章链接:http://www.yixao.com/baidu/2256.html
相关推荐
-
百度推出“清风算法”,严惩网页标题作弊
百度推出“清风算法”,严惩网页标题作弊,大神门怎么看待此事呢? 百度站长平台今日发布一则消息称,为保证用户搜索体验、促进搜索生态的良性发展,百度搜索将于9月底推出清风算法,旨在严惩…
-
百度贴吧正式推出低门槛电子杂志
电子杂志从2003年起兴起,在2006年达到高峰,全行业吸收了1亿美元的风险投资,但在最近两年,主流企业却纷纷倒闭或者走到了破产的边缘。 可以说,电子杂志是最为典型的“全行业”失败案例。 电子杂志的失败在于内容庞杂,用户使用时间成本太高。而且,是个封闭的系统,不利于人们检索到。
-
百度4月份整顿3.8亿SEO作弊站点,值得注意的细节有哪些?
2021年4月份,百度整顿了3.8亿个作弊站点! 其中主要涉及如下方面: ①快速排名技术 ②恶意采集 ③网站劫持 ④欺骗下载 ⑤视频作弊,小说作弊等 这是百度搜索资源平台,今天发布…
-
百度新平台“福尔摩斯”:客户分析工具
昨天,各IT网站都发出过一则短新闻:百度公司正准备在近期推出一项代号为“福尔摩斯”的系统平台,目的在于为商业用户提供更多的增值服务。 购买该增值服务的商业用户将可以从百度得到一些用户使用数据,比如究竟是哪些IP地址,在什么时间,通过何种渠道访问或查询过与自身有关的信息,并据此制定出更具针对性的投放计划。
-
百度老总李彦宏做客《咏乐汇》与美女共舞
彦宏在今年果然很高调,很娱乐了,我在很早之前就预测李彦宏今年要开始亲民,并开始学习通过娱乐的手段向大众进行展示改变。李彦宏在央视《咏乐汇》 的做客节目估计将在近期播出,今天看到了2张内部图片。
-
企业网站优化技巧分析
经常遇到这样的网站,把他的页面关闭后还弹出个对话框问你要不要收藏这个网站,用户收不收藏你的网站在于他是否喜欢你的网站,如果用户喜欢就自己收藏了,还要你提醒人家?不觉得这样很烦人吗?
-
百度应用开放平台邀请网站参加测试
互联网产业最具影响力的年度盛会———百度世界2010,将于9月2日拉开帷幕。在2009年的百度世界上,百度CEO李彦宏提出“框计算”技术理念,引发业界追捧。时隔一年,“框计算”将有那些新举措,已成当前行业关注的焦点。据可靠消息:百度正在搭建“应用开放平台”,部分知名网站和开发者已受邀接受测试。业界猜测,“应用开放平台”或许成为今年百度世界大会的重头戏。
-
搜索页面实现邮箱登陆 百度框计算成果获赞赏
网易旗下邮箱开放外域登录,实现了在百度搜索页面直接登录。框计算“框天下”的理念得到初步诠释,惠及网易3亿免费邮箱用户。 如此一来,网易用户登录邮箱时不用再事先登录网易首页和邮箱登录页,只需在百度搜索框中搜索邮箱名称,即可在搜索结果页面找到登录入口,从而实现邮箱登录。
-
百度算法重大更新:取消阅读、展开全文按钮,禁止内容折叠
前不久,行业内还在讲增加阅读全文按钮如何如何好,昨天百度就更新了最新一篇公告,禁止页面主体内容折叠,所以,这个“功能”很快就无效了,今天我们就来讲讲关于“阅读全文”这个话题。 再聊…
-
搜索引擎的未来发展趋向
作为谷歌的研究部主任,诺维格总是站在管理世界信息的最前沿。他完全胜任这一工作,并经常把许多时光都用来思考计算机的智能,以及如何更为有效地把它实现。诺维格作为一个计算机人工智能专家,曾在大学里讲过学,在美国企业界和美国国家航空航天局从事过研究工作,还与他人合作撰写了颇具影响力的教科书《人工智能:一种现代方法》。诺维格于2001年加入谷歌,并担任搜索质量部门的主任;4年后,他担任了现职。