马海祥博客是一个专注于分享SEO优化、网站制作、网络营销和运营思维的自媒体博客!
马海祥博客 > SEO优化 > SEO思维 > 网页中死链接背后的灰色产业与利益

网页中死链接背后的灰色产业与利益

时间:2021-02-12   文章来源:马海祥博客   访问次数:

在网页新闻中,超链接时常作为一种补充资料出现,用户能够点击超链接阅读媒体所引用的资料原文。

但随着信息数据的不断堆积,网络上的许多超链接其实已经失效了,比如有时候点击一个十几年前的文章链接,会反馈一个类似于“页面已消失”的提示。

大部分用户并不会特别关注一个超链接是否还有效,但在网络上,有一些人却像盗墓者一般搜寻着这些沉睡已久的超链接并用其牟利。

超链接怎么了?谁在利用那些已经“死去”的超链接?

网页中死链接背后的灰色产业与利益-马海祥博客

本文我们将聚焦于那些已经无效的超链接,汇编并分析国外媒体所经历的无效超链接被篡改的困扰,试图揭示当下新闻归档存在的问题以及无效超链接背后巨大的灰色利益。

1、超链接之“死”

根据哈佛大学法学院一个团队对于《纽约时报》的调查,他们发现在该报553,693篇文章中的一百七十多万个深度链接(Deeplink)已经有25%完全无法使用。当用户点击这些深度链接,曾经的页面已经变成一片空白。

这样的情形被称为链接无效(linkrot),页面会出现“404”的提示(具体可查看马海祥博客《404 Not Found错误页面是什么》的相关介绍)。

深度链接是指能够导向外部网站页面的渠道,使用者能够通过该链接进入某个特定的外部页面。如果没有采用深度链接技术,则使用者需要自行搜寻相关的内容。深度链接大大缩短了用户的使用路径,在图文内容消费场景里,基本上可以将深度链接理解为我们更为熟悉的超链接。

而超链接变无效链接,主要原因则是原有内容消失、变更或者位置改变,这使得服务器无法返回有效的页面。

如《好莱坞报道》曾为前华特·迪士尼CEO罗伊·迪士尼的妻子发表一篇讣告,并附上了一个纪念网站的链接,读者可以在该网站中向慈善机构捐款以纪念逝者。之后,其家人关闭了该网站。尽管网站不复存在,但《好莱坞报道》所引用的超链接依然能够跳转,这样的超链接就成了无效链接。

网页中死链接背后的灰色产业与利益-马海祥博客
微信公众号中的超链接呈现形式

无效的情况会随着超链接年份的累积变得更为普遍,因为随着时间的流逝,当初所引用的大量网站都可能已经不再被使用。

在对《纽约时报》的这项调查结果显示,发表于2018年的文章有6%的超链接已经无效;而2008年的文章则有43%的无效超链接;到了1998年,这一指标竟达到72%之高。在整体上,53%的文章中至少存在一个无效的超链接,也就是两篇文章中至少有一篇文章有一个无效的链接。

超链接的失效也与文章类型有关,不同板块的文章在无效链接的比例上也存在差异。

例如,健康板块的无效比例最低,比平均的超链接无效比例低17个百分点;而旅游板块的无效比例则是最高的,比平均比例还要高出17个百分点。

其实话说回来,这种超链接失效的情形在网络生活中并不少见。我们往期文章探讨过“数字仓鼠”的现象,即很多网友喜欢把各种资料囤着,这其中也包括各种链接。你一定也有过这样的经历,当你打开自己所收藏的文章时,其中总有一些已经被作者或者平台删除。

在微博中,这一现象更为常见,我惊奇地发现自己曾经点赞或转发的内容几乎一半以上都已经成为无效的链接,只显示“此微博已被删除”。

网页中死链接背后的灰色产业与利益-马海祥博客
“抱歉,此微博已被作者删除。”

另一种与链接无效相似的情形是内容转移(Content Drift)。

当一个超链接的内容被转移则意味着,当用户点击该超链接,服务器所返回的页面并非原本所连接的内容(具体可查看马海祥博客《超链接超文本文档检索系统原理和分析方法》的相关介绍)。

同样,内容转移的情况也会随着文章时间愈渐久远而变得更为频繁。调查中提到,在2019年所发表的文章中,仅有4%的超链接内容发生了变化;而2009年的文章中则有四分之一的超链接内容发生了变化。

这样的情况是否仅为个例?尽管该团队仅对《纽约时报》这一家机构长达13年的文章进行调查,但素以存档专业而著称的《纽约时报》,其所属文章超链接失效或内容转移的情况都如此普遍,其他规模更小的新闻机构中的情况恐怕更不乐观。

保存新闻并不只是保留原有的新闻文本或者音视频资料,因为这些内容往往都保存于新闻机构自己的服务器中,相比之下,更为棘手的是保留文章中所引用的外部信息,也就是超链接。

超链接所导向的外部网站并不受相关新闻机构的管理,这些网站的内容能够被第三方所修改或者删除。其带来的后果不只是新闻失去参考的信息来源或者新闻情境丧失,更严重的影响是,这些超链接可能会被用来导向无关的内容,或被用于一些不正当的牟利行为。

凯瑟琳·汉森和诺拉·保罗在他们《给未来的新闻:保留历史的第一稿》中表现出对于当前新闻存档现状深深的担忧。

在他们看来,新闻所发挥的作用远不仅仅只是传递当下的信息,更为重要的是完整表现出时代的特征和人们的生活。但随着新闻行业数字化进程不断深入,新闻业大力推进革新向前进的同时却忽视了往后面看一看。

2、占用“死去”的超链接成灰色产业

超链接之“死”暴露出两个问题:一是新闻的储存无法得到百分百妥善处理,另一方面则是超链接背后隐藏着巨大的地下市场。

因为版权问题,新闻网站需要用超链接标注所引用的资料来源,但这使得新闻网站对于超链接所指向的内容缺乏控制,这就为投机者利用无效超链接埋下了隐患。基于内容转移等原理,非法供应商可以将原本失效的超链接进行偷换,重新连接到新的网站中,以此来吸引流量、谋取利益。

(1)、储存新闻的困境

相较于报纸、录像带等传统的信息储存形式,电子新闻的储存无疑更加具有便利性。那为什么新闻储存在电子时代反而会成为一个问题?

要回答这个问题,我们必须首先了解在传统媒体时代新闻是如何进行储存的。

在数字化流行之前,新闻的主要形式是报纸、广播以及电视。广播和电视节目主要由新闻机构自行进行储存,一般媒体都会设有专职人员对这些新闻原件进行归档,其作用类似于图书管理员。

报纸的保存则涉及到更为复杂的过程。由于各种机构和个人都会订阅报纸,人们在购买报纸的过程中也同时保留了新闻原件。虽然个人可能出于兴趣保存有一定量的报纸,但这样的行为往往也并不具有系统性。

主要的第三方保存机构是大大小小的图书馆。图书馆具有更为宽敞的空间以及专业的图书管理员,因此可以相对更为完整地保存报纸。可以说,报纸的储存更为弥散化,除了新闻机构本身,第三方机构也会有所参与。

但随着新闻业数字化程度不断提高,互联网成为新闻传播的重要途径。电子化的新闻似乎不再需要归档,因为它原本就被安放在服务器的不同文件夹中。

但实体的文档和数字文档毕竟存在差异,一份报纸一旦发行就难以再做改动,而数字文档则始终保持着可变动性。尤其是诸如超链接等导向外部网站的渠道,其是否进行修改或删除取决于第三方机构,媒体无法对其进行直接管理。

另一方面,对于新闻归档的忽视也显示出新闻业整体的发展趋势——追求速度。正如周睿鸣老师在论文中指出那样,新闻业陷入与自我赛跑的泥淖,新闻生产成为不断提速的过程。在这样不断往前看的过程中,重视过去的新闻似乎有些不合时宜。

尽管人们开始意识到问题所在,但对于新闻机构而言,完整、独立地保存新闻依然存在诸多问题,版权问题无疑位于核心。如何既能够尊重第三方资料来源的版权,同时又能够防止其不被居心叵测者所利用,这成为解决问题的关键。

一种可能的处理方式是备份第三方机构的超链接页面,如果无法一比一复制,还可以考虑截图的形式。但这可能赋予新闻媒体过大的权力,使其能够直接复制其他内容来源;再者,这也促成了独立、封闭的网络生态体系的形成,使得流量始终在新闻网站内部循环。

第三方机构一般不会允许媒体借用它们所生产的内容来增强媒体的用户黏性。而一旦超链接导向外部网站,媒体就无法对其内容进行控制。因此,这一切处理起来并不容易。

(2)、超链接背后的灰色市场

如果媒体发布文章中的超链接导向的是一个完全无法控制的网站,那对于媒体公信力而言是存在风险的,美国的媒体正饱受这种无效超链接被篡改之苦,而这背后就有一片巨大的灰色市场。

通常这些超链接的地址会被导向某些具有盈利性质的网站,大多类似于广告引流。

其运作逻辑大致如下:正如前文提到的,新闻网站中大量的超链接内容已然失效,但这些链接依然存在且可点击;某些供应商则将此作为契机,寻找到新闻网站中的无效链接,将其替换成为客户所需要的网站内容。

这些被篡改的外部网站大多具有广告性质,诸如推销廉价酒店、在线咨询、在线支付甚至包括网络赌博等(具体可查看马海祥博客《黑帽客如何利用黑帽SEO做快速排名谋取暴利》的相关介绍)。

虽然人们对于过去新闻的兴趣会逐渐下降,但互联网中的新闻并不会因此完全被遗忘。通过搜索引擎,用户能够随时调用过去的新闻报道。当过去的“记忆”被唤醒时,伴随着这些旧新闻一起重建天日的还有那些已经被偷偷掉包的超链接。

当用户第一次发现超链接被篡改为毫无相关的广告时,他也许只会感慨互联网中的广告真是无孔不入。但第二次、第三次呢?他可能就会对新闻网站的专业性产生质疑了。更何况无效超链接的比例如此之高,谁也不知道下一个被点开的链接是否是其原本的内容。

BuzzFeed新闻对于美国各大主要新闻网站以及BBC的调查发现,这些新闻网站都深受超链接内容篡改之苦,其中福布斯新闻所受影响尤其明显。

福布斯发言人在一次公开声明中表示,网站已经删除这些被修改内容的超链接,并且积极寻找能够规避超链接被篡改的措施。BBC则在其网站上发布免责声明,称其对外部网站的内容不承担任何责任。

提供这些篡改服务的供应商大多避开了来自美国或欧洲国家的直接监管,其服务费往往十分高昂,替换一条超链接内容的服务费从200到500美金不定。

替换超链接的行为是诸多黑帽SEO技术中的一种。SEO(Search Engine Optimization)指的是搜索引擎最优化技术,它主要用于分析搜索引擎如何进行排名的规律,通过了解搜索引擎如何抓取互联网页面、怎样确定特定关键词等技术来提高网页在搜索引擎中的排名已增加浏览量。而黑帽SEO则是通过作弊的方式来提高网站的浏览量,以图谋取短期、快速的经济效益。

为了以假乱真,供应商有时甚至会模仿原有网站发布者的身份以图迷惑用户。例如,位于德里的一家SEO机构曾替换了福布斯网站中梅根·梅森(Megan Mason)于2015年所发表文章中的某些无效链接。替换者用梅根·马特(Megan Matt)的名义重新发布了一篇文章,并将其连接到圣地亚哥一家地毯清洁公司的网站。

新闻网站并非这些非法牟利者的唯一受害者,各大搜索引擎网站也饱受其苦,毕竟黑帽SEO会使得搜索结果无法满足用户的需求。当用户在搜索引擎中搜索某个关键词所返回的都是无关的广告甚至垃圾信息,用户势必会对搜索引擎所能提供的服务产生质疑。

3、规避风险亦不可因噎废食

从大大小小的灰色产业服务商到他们为篡改超链接内容所提出的高额报酬,看似不起眼的无效超链接背后潜藏着巨大的利益空间。那为何不索性取消超链接?这样就能从根本上遏制投机者用非法的渠道进行牟利。

首先依然是版权问题。

超链接存在之初便是为了媒体能够合法地使用外部网站中的内容,使用超链接不但能够标注资料的出处,还能够用最便捷的方式寻找到原初的资料。尽管通过增加尾注或者其他方式也能够注明版权,但超链接无疑是更合适的方式。

被篡改的超链接也折射出媒体对于版权的重视。即使深受黑帽SEO之扰(具体可查看马海祥博客《SEO优化人员常用的30个灰帽SEO或黑帽SEO技巧》的相关介绍),多数媒体也并没有想要取消超链接,而是试图用技术弥补当前存在的不足。

其次也折射出媒体对于网络生态的态度。

正如我在前文中指出,没有超链接的文章形成了封闭的网络生态,用户只能在网站中浏览该媒体内部的信息,不同网站之间也没有任何联系。

而超链接恰恰提供了连接的可能,只需要轻轻一点,用户即可浏览其他渠道的页面。不同新闻之间,甚至不同新闻网站之间都能通过超链接进行关联。

这样带来的一个好处是,不同媒体之间依靠内容质量来吸引受众,技术本身并不成为壁垒,甚至双方都乐见对方生产更加优质的内容。

总而言之一句话,尽管失效超链接背后潜藏着巨大的灰色市场,尽管第三方投机者的行为给新闻网站带来了棘手的问题,但行业也并没因噎废食,媒体机构依旧试图通过提升技术手段来降低潜在风险。

马海祥博客点评:

我们身边常见的超链接,有许多竟然已经“死”了。被篡改的超链接也提醒我们,尽管互联网不是法外之地,但是试图钻技术和规则漏洞的投机者依然大有人在。如《纽约时报》这些在内容存储上相对专业的新闻媒体所引用的超链接都有可能被第三方所盗用,其他网站中可能存在的“陷阱”无疑会更多。而这些,都有待平台、媒体和相关监管机构合力形成更严密的预防和处理机制。

本文发布于马海祥博客文章,如想转载,请注明原文网址摘自于https://www.mahaixiang.cn/seosw/3217.html,注明出处;否则,禁止转载;谢谢配合!

相关标签搜索: 网页   死链接   灰色产业   网页链接  

上一篇:我们的网站为什么必须要做SEO?
下一篇:没有了

您可能还会对以下这些文章感兴趣!

  • 如何分析并评估网站的SEO效果

    网站分析与SEO的关系,并不是相互取代,而是相辅相成,现在的SEO或者SEM,单纯进行操作已经成为历史,与网站分析相结合才是王道,而网站分析对SEO的评估和促进主要来自两个层面(浅水区和深水区)以及四个方面(索引、搜索引擎结果、流量和收益),通过这些层面的评估……【查看全文

    阅读:3443关键词: 网站分析   网站评估   网站seo   seo效果   seo   日期:2014-11-06
  • 史上最全的网站推广优化(seo)教程100条汇总

    最近一直有很多的朋友在询问关于推广优化的问题。大多是一些怎么做好一个网站?网站被降权了怎么办?怎么推广网站?怎样加强搜索引擎对网站的友好度?关于这些问题的解决,在此结合广大seo、站长的多年积累经验,给大家介绍一下新手建站推广优化的完整教程……【查看全文

    阅读:1523关键词: 网站推广优化   seo教程   推广教程汇总   日期:2013-03-28
  • 百度竞价暂停后该怎么推广网站

    除了百度竞价的推广,网络推广手段多种多样,千变万化,我们要在推广中总结,推广中前进,推广中学习,找到适合自己网站的推广方法,坚持下去,相信流量不是问题,要学会利于互联网上现成的技术和平台,为自己的网站服务,学会利用第三方平台,为自己的网站引来流量……【查看全文

    阅读:1276关键词: 百度竞价   网站推广   百度推广   日期:2015-04-07
  • 判定一个关键词的SEO优化难度等级标准

    每一个做SEO的朋友都有一个纠结期,尤其是刚学会SEO自己私人接单的朋友,在接到一个单子的时候,高兴得饭都吃不下,但随即烦恼又来了,这个关键词我有没有把握优化到首页呢?难度大不大呢?如何判断优化周期呢?种种疑问围绕在心头,以至于最后单子没吃下,到反打击到自……【查看全文

    阅读:1093关键词: seo   seo优化   关键词   日期:2016-05-26
  • 2014年网站SEO优化的新趋势

    通过对搜索引擎排名在前30名1万个搜索词的30万个网站进行研究、对比分析,从而得出影响搜索引擎排名的各项因素,最佳文章字数为975个字,搜索引擎排名前十网站的内部链接url的数量平均值在130左右,网站首页的反链与内页的反链比例需保持平衡,搜索引擎排名最好的网站点……【查看全文

    阅读:542关键词: 网站seo   seo优化   seo趋势   seo   日期:2014-09-16
  • SEO优化做的很好为什么还不算成功

    曾经有一段时间,SEO优化的地位和“互联网+”不相上下,在互联网狂热的那段日子里,只要掌握的SEO优化就等于真金,就像现在的互联网大热一样,很多企业或者行业只要和互联网挂钩,超越“小米”指日可待,但是,事实上在互联网任何一个炒着很热的新鲜词汇,很快就销声匿……【查看全文

    阅读:625关键词: seo优化   seo   日期:2015-07-29
  • 图片网站该如何做SEO优化?

    通常,在网站SEO优化的过程中,很多站长和SEOer对图片的优化往往是忽视的,但事实上,每一个网站都少不了有很多图片,因此优化网站图片与优化其它内容一样,成为SEO的一项重要工作内容,如果能够成功的优化图片的SEO排名,不但可以减轻图片对网站的负作用,也能够为网站……【查看全文

    阅读:1417关键词: 图片网站   seo优化   seo   图片优化   日期:2014-11-16
  • SEO岗位转型:SEO行业人员的出路在哪里?

    让SEO人员感觉没有前途的原因就是现在做SEO的工资都普遍偏低,一个人做几个人的工作。职位上写着招聘的是SEO,其实做的是编辑+推广+优化的工作,而薪水却不及三个职位的综合工资的三分之一。这让做SEO人员看不到明天的希望,感觉这就是一份苦差事,又累又没有前途。因为SEO的……【查看全文

    阅读:2467关键词: SEO岗位   岗位转型   SEO   SEO出路   SEO转型   SEO行业   日期:2014-05-04
  • 关键词优化难易程度的五个等级

    为了得到更好的排名,你的关键字就必须在页面中多次出现,或者在搜索引擎允许的范围内。因为网站关键词密度对于搜索引擎的排名有一定的影响,尤其是长尾词关键的排名都有很大影响,另外,还要注意关键词密度如果太高会被收索引擎视为关键词堆砌,导致网站降权的风险,在……【查看全文

    阅读:4923关键词: 关键词   关键词优化   关键词等级   日期:2014-06-22
  • 网站整体规划过程中的SEO定位和SEO优化策略

    真正的SEO是通过采用易于搜索引擎检索的合理手段,在网站规划,制作,推广等环节贯穿SEO的思维,使网站对用户和搜索引擎更友好(Search Engine Friendly),从而通过自然搜索,低成本的引入流量并转化为销量。优化良好的网站,从搜索引擎来的流量将会有很大的提高,不过……【查看全文

    阅读:2677关键词: 网站整体规划   网站SEO   网站的定位   SEO优化策略   日期:2012-09-29
  • SEO未来发展的方向及格局

    SEO行业在中国已经发展了数十年了,到现在为止,关于SEO行业的探讨,也没有一个人能够真正的说清楚。这样导致了SEO行业特别的混乱,试问谁能说的清楚百度、GOOGLE的算法。SEO技术只有在经验加实战得到,最后自己的执行力上来了,以前参加培训SEO可能多为创业或学习技能,……【查看全文

    阅读:391关键词: seo   日期:2016-06-13
  • 如何以SEO的角度来分析网站的竞争度

    很多朋友在做网站SEO优化的过程中,都是在未分析网站优化难以程度的情况下进行网站定位和制定SEO策略的,这个时候就会导致自己的工作很辛苦,并且网站得不到预期流量。如果网站持续获得不了流量,网站的任何工作都是无用功,所以,如何判断网站优化的竞争度就成了一个SE……【查看全文

    阅读:1016关键词: 网站分析   网站竞争度   竞争度   seo   日期:2014-07-13
  • 竞价排名和自然排名(SEO优化)的区别

    竞价排名和自然排名优化可以说是各有千秋,推荐预算充足的客户,可以考虑先做竞价排名一段时间,在这个时间内同时进行网站百度优化排名的工作,当网站百度优化排名工作结束,排名达到要求后,再撤掉竞价排名,这样可以最好的过渡,不会对营销造成影响,对于任何一家企业……【查看全文

    阅读:1458关键词: 竞价排名   自然排名   seo优化   seo排名   seo   日期:2014-08-12
  • 实例解析关键词聚类的方法策略

    所谓关键词聚类就是以领域特征明显的词和短语作为聚类对象,在分类系统的大规模层级分类语料库中,利用独创的文本分类的特征提取算法进行词语的领域聚类,通过控制词语频率的影响,分别获取领域通用词和领域专类词。要想做好这类做关键词的聚类,就一定要有一些基础信息……【查看全文

    阅读:9925关键词: 关键词聚类   聚类策略   关键词   日期:2014-06-05
  • 做了竞价排名,还要不要做SEO优化排名?

    面对百度算法的不断调整,很多的客户和老板都想到了一个共同的问题:既然现在SEO优化这么难做,排名又不好,那做了竞价推广,还需要不需要SEO做自然排名呢?竞价排名与SEO优化排名是否要同时做呢?关于这个问题,对不了解什么是竞价排名和自然排名的客户来讲,还真是无从回答……【查看全文

    阅读:949关键词: 竞价排名   seo优化   seo排名   自然排名   日期:2014-07-20
  • 外包SEO优化项目的生命周期

    无论你是选择SEO营销的广告主,还是参与SEO营销的实施人员,都会面对一个问题就是如何科学的实施SEO项目,往往问题并不是缺乏优秀的SEO策略,而是不知道从哪开始第一步,通过我多年的SEO从业经验积累,我认为一个SEO项目是否成功,取决于过程分解以及细节把控是否到位,……【查看全文

    阅读:641关键词: seo   seo优化   日期:2015-10-01
  • 我们的网站为什么必须要做SEO?

    我们做的网络商场或网站必须有用户访问或者被用户知道才有价值和意义,而想被用户所了解的话,必须做网络营销推广,而SEO属于网络营销推广中的一种常见的方式,相比于其他的营销方式,SEO的优势更加适用于中小企业或个人站长。SEO就是为了让我们的网站在搜索引擎上的曝……【查看全文

    阅读:4996关键词: seo   网站seo   日期:2017-02-22
  • 网站负面SEO常用的操作方法和补救措施

    现在说到的网站SEO优化都是利用一些SEO技术、SEO思维、SEO策略等结合用户体验、网站建设等让网站在搜索引擎中取得好的排名,让网站可用性更强,让内容更适合用户阅读,这是主动的SEO,然而,在这些主动SEO背后一直还存在一个黑暗的地方,那就是被动SEO,也就是我们通常所说的……【查看全文

    阅读:522关键词: 网站seo   负面seo   seo方法   seo措施   seo   日期:2014-08-11
  • 未来的SEO应该多注重用户体验优化(UEO)

    最近做SEO越来越觉得压力大了,关键词排名也真的没有以前那么好做了,很多的企业也开始思考是否把SEO当做重点来运作,也有越来越多的人开始唱衰SEO的未来,感觉SEO已经没什么出路了,其实对于这个问题,我也曾在马海祥博客上多次跟大家讨论过,不过我今天要跟大家讨论的……【查看全文

    阅读:810关键词: seo   用户体验   seo优化   ueo   日期:2015-04-02
  • 现在学习做SEO还是很有前途和机遇的

    近日,听到很多圈内朋友悲观地认为未来几年SEO会一大批人失业,因为一方面百度的排名越来越不好做了,另外自媒体人在各大网络媒体的扶持下蓬勃发展,在一个方面也削弱了草根站长的影响力和SEO搜索,进一步减少SEO的需求,甚至在微博上看到一个有趣的讨论,说是现在的网络公司……【查看全文

    阅读:2673关键词: seo   日期:2015-08-29
↓ 点击查看更多 ↓

互联网更多>>

SEO优化 更多>>

网站负面SEO常用的操作方法和补救措施 如何成为一名合格SEO主管?