网页中死链接背后的灰色产业与利益
在网页新闻中,超链接时常作为一种补充资料出现,用户能够点击超链接阅读媒体所引用的资料原文。
但随着信息数据的不断堆积,网络上的许多超链接其实已经失效了,比如有时候点击一个十几年前的文章链接,会反馈一个类似于“页面已消失”的提示。
大部分用户并不会特别关注一个超链接是否还有效,但在网络上,有一些人却像盗墓者一般搜寻着这些沉睡已久的超链接并用其牟利。
超链接怎么了?谁在利用那些已经“死去”的超链接?
本文我们将聚焦于那些已经无效的超链接,汇编并分析国外媒体所经历的无效超链接被篡改的困扰,试图揭示当下新闻归档存在的问题以及无效超链接背后巨大的灰色利益。
1、超链接之“死”
根据哈佛大学法学院一个团队对于《纽约时报》的调查,他们发现在该报553,693篇文章中的一百七十多万个深度链接(Deeplink)已经有25%完全无法使用。当用户点击这些深度链接,曾经的页面已经变成一片空白。
这样的情形被称为链接无效(linkrot),页面会出现“404”的提示(具体可查看马海祥博客《404 Not Found错误页面是什么》的相关介绍)。
深度链接是指能够导向外部网站页面的渠道,使用者能够通过该链接进入某个特定的外部页面。如果没有采用深度链接技术,则使用者需要自行搜寻相关的内容。深度链接大大缩短了用户的使用路径,在图文内容消费场景里,基本上可以将深度链接理解为我们更为熟悉的超链接。
而超链接变无效链接,主要原因则是原有内容消失、变更或者位置改变,这使得服务器无法返回有效的页面。
如《好莱坞报道》曾为前华特·迪士尼CEO罗伊·迪士尼的妻子发表一篇讣告,并附上了一个纪念网站的链接,读者可以在该网站中向慈善机构捐款以纪念逝者。之后,其家人关闭了该网站。尽管网站不复存在,但《好莱坞报道》所引用的超链接依然能够跳转,这样的超链接就成了无效链接。
微信公众号中的超链接呈现形式
无效的情况会随着超链接年份的累积变得更为普遍,因为随着时间的流逝,当初所引用的大量网站都可能已经不再被使用。
在对《纽约时报》的这项调查结果显示,发表于2018年的文章有6%的超链接已经无效;而2008年的文章则有43%的无效超链接;到了1998年,这一指标竟达到72%之高。在整体上,53%的文章中至少存在一个无效的超链接,也就是两篇文章中至少有一篇文章有一个无效的链接。
超链接的失效也与文章类型有关,不同板块的文章在无效链接的比例上也存在差异。
例如,健康板块的无效比例最低,比平均的超链接无效比例低17个百分点;而旅游板块的无效比例则是最高的,比平均比例还要高出17个百分点。
其实话说回来,这种超链接失效的情形在网络生活中并不少见。我们往期文章探讨过“数字仓鼠”的现象,即很多网友喜欢把各种资料囤着,这其中也包括各种链接。你一定也有过这样的经历,当你打开自己所收藏的文章时,其中总有一些已经被作者或者平台删除。
在微博中,这一现象更为常见,我惊奇地发现自己曾经点赞或转发的内容几乎一半以上都已经成为无效的链接,只显示“此微博已被删除”。
“抱歉,此微博已被作者删除。”
另一种与链接无效相似的情形是内容转移(Content Drift)。
当一个超链接的内容被转移则意味着,当用户点击该超链接,服务器所返回的页面并非原本所连接的内容(具体可查看马海祥博客《超链接超文本文档检索系统原理和分析方法》的相关介绍)。
同样,内容转移的情况也会随着文章时间愈渐久远而变得更为频繁。调查中提到,在2019年所发表的文章中,仅有4%的超链接内容发生了变化;而2009年的文章中则有四分之一的超链接内容发生了变化。
这样的情况是否仅为个例?尽管该团队仅对《纽约时报》这一家机构长达13年的文章进行调查,但素以存档专业而著称的《纽约时报》,其所属文章超链接失效或内容转移的情况都如此普遍,其他规模更小的新闻机构中的情况恐怕更不乐观。
保存新闻并不只是保留原有的新闻文本或者音视频资料,因为这些内容往往都保存于新闻机构自己的服务器中,相比之下,更为棘手的是保留文章中所引用的外部信息,也就是超链接。
超链接所导向的外部网站并不受相关新闻机构的管理,这些网站的内容能够被第三方所修改或者删除。其带来的后果不只是新闻失去参考的信息来源或者新闻情境丧失,更严重的影响是,这些超链接可能会被用来导向无关的内容,或被用于一些不正当的牟利行为。
凯瑟琳·汉森和诺拉·保罗在他们《给未来的新闻:保留历史的第一稿》中表现出对于当前新闻存档现状深深的担忧。
在他们看来,新闻所发挥的作用远不仅仅只是传递当下的信息,更为重要的是完整表现出时代的特征和人们的生活。但随着新闻行业数字化进程不断深入,新闻业大力推进革新向前进的同时却忽视了往后面看一看。
2、占用“死去”的超链接成灰色产业
超链接之“死”暴露出两个问题:一是新闻的储存无法得到百分百妥善处理,另一方面则是超链接背后隐藏着巨大的地下市场。
因为版权问题,新闻网站需要用超链接标注所引用的资料来源,但这使得新闻网站对于超链接所指向的内容缺乏控制,这就为投机者利用无效超链接埋下了隐患。基于内容转移等原理,非法供应商可以将原本失效的超链接进行偷换,重新连接到新的网站中,以此来吸引流量、谋取利益。
(1)、储存新闻的困境
相较于报纸、录像带等传统的信息储存形式,电子新闻的储存无疑更加具有便利性。那为什么新闻储存在电子时代反而会成为一个问题?
要回答这个问题,我们必须首先了解在传统媒体时代新闻是如何进行储存的。
在数字化流行之前,新闻的主要形式是报纸、广播以及电视。广播和电视节目主要由新闻机构自行进行储存,一般媒体都会设有专职人员对这些新闻原件进行归档,其作用类似于图书管理员。
报纸的保存则涉及到更为复杂的过程。由于各种机构和个人都会订阅报纸,人们在购买报纸的过程中也同时保留了新闻原件。虽然个人可能出于兴趣保存有一定量的报纸,但这样的行为往往也并不具有系统性。
主要的第三方保存机构是大大小小的图书馆。图书馆具有更为宽敞的空间以及专业的图书管理员,因此可以相对更为完整地保存报纸。可以说,报纸的储存更为弥散化,除了新闻机构本身,第三方机构也会有所参与。
但随着新闻业数字化程度不断提高,互联网成为新闻传播的重要途径。电子化的新闻似乎不再需要归档,因为它原本就被安放在服务器的不同文件夹中。
但实体的文档和数字文档毕竟存在差异,一份报纸一旦发行就难以再做改动,而数字文档则始终保持着可变动性。尤其是诸如超链接等导向外部网站的渠道,其是否进行修改或删除取决于第三方机构,媒体无法对其进行直接管理。
另一方面,对于新闻归档的忽视也显示出新闻业整体的发展趋势——追求速度。正如周睿鸣老师在论文中指出那样,新闻业陷入与自我赛跑的泥淖,新闻生产成为不断提速的过程。在这样不断往前看的过程中,重视过去的新闻似乎有些不合时宜。
尽管人们开始意识到问题所在,但对于新闻机构而言,完整、独立地保存新闻依然存在诸多问题,版权问题无疑位于核心。如何既能够尊重第三方资料来源的版权,同时又能够防止其不被居心叵测者所利用,这成为解决问题的关键。
一种可能的处理方式是备份第三方机构的超链接页面,如果无法一比一复制,还可以考虑截图的形式。但这可能赋予新闻媒体过大的权力,使其能够直接复制其他内容来源;再者,这也促成了独立、封闭的网络生态体系的形成,使得流量始终在新闻网站内部循环。
第三方机构一般不会允许媒体借用它们所生产的内容来增强媒体的用户黏性。而一旦超链接导向外部网站,媒体就无法对其内容进行控制。因此,这一切处理起来并不容易。
(2)、超链接背后的灰色市场
如果媒体发布文章中的超链接导向的是一个完全无法控制的网站,那对于媒体公信力而言是存在风险的,美国的媒体正饱受这种无效超链接被篡改之苦,而这背后就有一片巨大的灰色市场。
通常这些超链接的地址会被导向某些具有盈利性质的网站,大多类似于广告引流。
其运作逻辑大致如下:正如前文提到的,新闻网站中大量的超链接内容已然失效,但这些链接依然存在且可点击;某些供应商则将此作为契机,寻找到新闻网站中的无效链接,将其替换成为客户所需要的网站内容。
这些被篡改的外部网站大多具有广告性质,诸如推销廉价酒店、在线咨询、在线支付甚至包括网络赌博等(具体可查看马海祥博客《黑帽客如何利用黑帽SEO做快速排名谋取暴利》的相关介绍)。
虽然人们对于过去新闻的兴趣会逐渐下降,但互联网中的新闻并不会因此完全被遗忘。通过搜索引擎,用户能够随时调用过去的新闻报道。当过去的“记忆”被唤醒时,伴随着这些旧新闻一起重建天日的还有那些已经被偷偷掉包的超链接。
当用户第一次发现超链接被篡改为毫无相关的广告时,他也许只会感慨互联网中的广告真是无孔不入。但第二次、第三次呢?他可能就会对新闻网站的专业性产生质疑了。更何况无效超链接的比例如此之高,谁也不知道下一个被点开的链接是否是其原本的内容。
BuzzFeed新闻对于美国各大主要新闻网站以及BBC的调查发现,这些新闻网站都深受超链接内容篡改之苦,其中福布斯新闻所受影响尤其明显。
福布斯发言人在一次公开声明中表示,网站已经删除这些被修改内容的超链接,并且积极寻找能够规避超链接被篡改的措施。BBC则在其网站上发布免责声明,称其对外部网站的内容不承担任何责任。
提供这些篡改服务的供应商大多避开了来自美国或欧洲国家的直接监管,其服务费往往十分高昂,替换一条超链接内容的服务费从200到500美金不定。
替换超链接的行为是诸多黑帽SEO技术中的一种。SEO(Search Engine Optimization)指的是搜索引擎最优化技术,它主要用于分析搜索引擎如何进行排名的规律,通过了解搜索引擎如何抓取互联网页面、怎样确定特定关键词等技术来提高网页在搜索引擎中的排名已增加浏览量。而黑帽SEO则是通过作弊的方式来提高网站的浏览量,以图谋取短期、快速的经济效益。
为了以假乱真,供应商有时甚至会模仿原有网站发布者的身份以图迷惑用户。例如,位于德里的一家SEO机构曾替换了福布斯网站中梅根·梅森(Megan Mason)于2015年所发表文章中的某些无效链接。替换者用梅根·马特(Megan Matt)的名义重新发布了一篇文章,并将其连接到圣地亚哥一家地毯清洁公司的网站。
新闻网站并非这些非法牟利者的唯一受害者,各大搜索引擎网站也饱受其苦,毕竟黑帽SEO会使得搜索结果无法满足用户的需求。当用户在搜索引擎中搜索某个关键词所返回的都是无关的广告甚至垃圾信息,用户势必会对搜索引擎所能提供的服务产生质疑。
3、规避风险亦不可因噎废食
从大大小小的灰色产业服务商到他们为篡改超链接内容所提出的高额报酬,看似不起眼的无效超链接背后潜藏着巨大的利益空间。那为何不索性取消超链接?这样就能从根本上遏制投机者用非法的渠道进行牟利。
首先依然是版权问题。
超链接存在之初便是为了媒体能够合法地使用外部网站中的内容,使用超链接不但能够标注资料的出处,还能够用最便捷的方式寻找到原初的资料。尽管通过增加尾注或者其他方式也能够注明版权,但超链接无疑是更合适的方式。
被篡改的超链接也折射出媒体对于版权的重视。即使深受黑帽SEO之扰(具体可查看马海祥博客《SEO优化人员常用的30个灰帽SEO或黑帽SEO技巧》的相关介绍),多数媒体也并没有想要取消超链接,而是试图用技术弥补当前存在的不足。
其次也折射出媒体对于网络生态的态度。
正如我在前文中指出,没有超链接的文章形成了封闭的网络生态,用户只能在网站中浏览该媒体内部的信息,不同网站之间也没有任何联系。
而超链接恰恰提供了连接的可能,只需要轻轻一点,用户即可浏览其他渠道的页面。不同新闻之间,甚至不同新闻网站之间都能通过超链接进行关联。
这样带来的一个好处是,不同媒体之间依靠内容质量来吸引受众,技术本身并不成为壁垒,甚至双方都乐见对方生产更加优质的内容。
总而言之一句话,尽管失效超链接背后潜藏着巨大的灰色市场,尽管第三方投机者的行为给新闻网站带来了棘手的问题,但行业也并没因噎废食,媒体机构依旧试图通过提升技术手段来降低潜在风险。
马海祥博客点评:
我们身边常见的超链接,有许多竟然已经“死”了。被篡改的超链接也提醒我们,尽管互联网不是法外之地,但是试图钻技术和规则漏洞的投机者依然大有人在。如《纽约时报》这些在内容存储上相对专业的新闻媒体所引用的超链接都有可能被第三方所盗用,其他网站中可能存在的“陷阱”无疑会更多。而这些,都有待平台、媒体和相关监管机构合力形成更严密的预防和处理机制。
本文发布于马海祥博客文章,如想转载,请注明原文网址摘自于https://www.mahaixiang.cn/seosw/3217.html,注明出处;否则,禁止转载;谢谢配合!上一篇:我们的网站为什么必须要做SEO?
下一篇:没有了
您可能还会对以下这些文章感兴趣!
-
全面解析用户价值和用户体验之间的关系
用户体验是我们在做SEO过程中强调最多的一个话题,因为我们的网站不能只是为了给搜索引擎访问的,最关键的都是为了给用户访问,所以会涉及到用户体验的问题,而到底怎样才算是好的用户体验呢,那么用用户价值来对比衡量是比较好的。一个网站没有用户体验也可以生存,因……【查看全文】
-
如何将内容营销思维运用到网站SEO优化当中
SEO大环境确实翻天覆地地改变了,这对90%的SEO人来说都是坏消息,只有10%的SEO人认为是好消息,认为是好消息的人,就是在这种变革中看到机会的人。搜索引擎的用户体验,最核心的一项指标就是内容质量,无论搜索结果以哪种形式展现出来,最终还是要以内容见客,各大搜索引擎早……【查看全文】
-
SEO主管要具备哪些能力?
管理是指通过计划、组织、指挥、协调、控制及创新等手段,结合人力、物力、财力、信息等资源,以期高效的达 到组织目标的过程。而对于一个网络团队来说seo主管就显的尤为重要。SEO主管负责了整个SEO团队日常所有优化工作,包括优化方案的制定,网站的页面设计等各项工作……【查看全文】
-
如何根据竞争对手网站来制定SEO优化策略
由于网站SEO优化的好坏就直接关系着网站的排名,所以大多数企业网站都在做着SEO优化,有的甚至还专门聘请SEO团队来操作,有时候虽然下了很多工夫,但优化的结果有时候却并不如意,排名让然无法赶超竞争对手网站,这一方面说明网站的竞争是很大的,而另一方面则说明你对……【查看全文】
-
做了竞价排名,还要不要做SEO优化排名?
面对百度算法的不断调整,很多的客户和老板都想到了一个共同的问题:既然现在SEO优化这么难做,排名又不好,那做了竞价推广,还需要不需要SEO做自然排名呢?竞价排名与SEO优化排名是否要同时做呢?关于这个问题,对不了解什么是竞价排名和自然排名的客户来讲,还真是无从回答……【查看全文】
-
如何利用SEO思维为网站获取网络流量
从字面上来说,SEO是搜索引擎优化的意思,但是SEO发展到今天,你的思维不能跟着字面意思走,发散你的SEO思维,将搜索引擎优化改为搜索优化,有搜索就有SEO,还是那句话,SEO永远都不会灭亡,除非人的搜索习惯消失。为什么这么说,因为最初搞SEO,就是为了搜索引擎排名,……【查看全文】
-
SEO新手如何做好网站定位?
如今的网站扩展,简直可以用草来形容了,数量众多,如雨后春笋般的迅速增长,可质量上却是有层次之差的,看到行业网站中的领头者。你是否也会有一种感慨!为什么它们能够成为“头儿”,而自身还是那样默默的无闻呢。甚至是处于挣扎之中,有点濒临倒闭的可能性。对于出现……【查看全文】
-
现在学习做SEO还是很有前途和机遇的
近日,听到很多圈内朋友悲观地认为未来几年SEO会一大批人失业,因为一方面百度的排名越来越不好做了,另外自媒体人在各大网络媒体的扶持下蓬勃发展,在一个方面也削弱了草根站长的影响力和SEO搜索,进一步减少SEO的需求,甚至在微博上看到一个有趣的讨论,说是现在的网络公司……【查看全文】
阅读:2727关键词: seo 日期:2015-08-29 -
如何成为一名合格SEO主管?
SEOer与SEO主管的差别究竟在哪里?为什么有些人非常努力的去工作依然只停留于SEOer而有些人很是清闲却可以高居SEO主管或者网络运营经理?对于这个问题可能很多的SEOer甚至SEO主管都没有去深入思考过。那么今天我们就借助马海祥博客的平台跟大家深入分析一下两者之间的差……【查看全文】
-
从搜索引擎的角度来看文章内容原创的问题
在SEO行业,关于文章内容原创的问题已经是老生常谈的话题了,也是各位站长和SEO人员一直关心一直问及的问题,在SEO圈内也总会有人问道这样一些问题:我的文章是原创的怎么没收录?我的网站首发的文章没收录,为什么别人转载去却收录了?别人的网站转载了我的原创文章排名为什……【查看全文】
-
SEO优化人员必须要知道的SEO新趋势
一个好的营销师或SEO优化人员如果想利用网络与更多潜力客户保持联系,那么他们一定知道SEO(搜索引擎优化)总是处于变化之中。在SEO的早期发展阶段,只要在你的网站上堆满各种各样的内容而不必去考虑内容的质量和对最终用户的有用性,你的网站就能在搜索结果中获得一个不错的……【查看全文】
-
SEO新手该如何开展一个新站的SEO优化工作
不管是我们为自己的网站做SEO还是给公司的网站优化,又或者是给客户提供SEO服务,马海祥都希望大家能在SEO工作开始之前做好一份详细的SEO工作计划方案,尤其是一些刚入行的SEO新手,不要怕费时间,只有有计划地去工作,才能让效率大大地提高,做到事半功倍,如果没有一份良好……【查看全文】
-
实例解析关键词聚类的方法策略
所谓关键词聚类就是以领域特征明显的词和短语作为聚类对象,在分类系统的大规模层级分类语料库中,利用独创的文本分类的特征提取算法进行词语的领域聚类,通过控制词语频率的影响,分别获取领域通用词和领域专类词。要想做好这类做关键词的聚类,就一定要有一些基础信息……【查看全文】
-
网站降权后的补救方法汇总
最近一部分的网站都在逐步恢复中,这也使的部分站长们有看到了一丝希望,于是乎,如何恢复网站的权重也成为了最近的热点话题。做过SEO的都清楚,其实SEO是一个长期的工作,因为网站权重的提高是需要积累才能慢慢提升的,一口是很难吃成大胖子的,反而会适得其反,但在实……【查看全文】
-
2016年SEO优化的10大SEO发展趋势
针对很多人所说的老SEO已经死亡,转型,还是提倡新SEO,这都不是需要格外注意的东西,我们需要做的就是做好自己的能力及视野的提升,储备下快速学习的能力,ASO也好,社交SEO也好或者是传统SEO也好,最重要的是你的目标,你的用户,核心永远在于人,在不同平台的不同规则下用……【查看全文】
-
从不同的角度来看SEO优化思维
在写这篇文章之前,我也做过SEO培训,不能说自己熟知SEO优化技巧,最起码什么该做,什么不该做,心里还是有一把尺子的,当大家都以为SEO是由“内容+外链”的构建模式时,我觉得大家的想法太片面了,因为从操作重点上讲,SEO的确是以内容和外链为主,但SEO显然没有这么低……【查看全文】
-
百度竞价暂停后该怎么推广网站
除了百度竞价的推广,网络推广手段多种多样,千变万化,我们要在推广中总结,推广中前进,推广中学习,找到适合自己网站的推广方法,坚持下去,相信流量不是问题,要学会利于互联网上现成的技术和平台,为自己的网站服务,学会利用第三方平台,为自己的网站引来流量……【查看全文】
-
今年网站SEO优化要注意的6大策略
通俗的来说,SEO技术就是一种达到SEO效果所采用的技术手段,这里包括了一些专业的知识或术语,大部分是SEOer所必须熟悉和掌握的,因为这些是做SEO的基础。SEO技术高和低的运用就能够直接影响到网站或网站某个词的排名,不过就SEO的技术本身来说,并不是什么高深莫测的!……【查看全文】
-
未来的SEO应该多注重用户体验优化(UEO)
最近做SEO越来越觉得压力大了,关键词排名也真的没有以前那么好做了,很多的企业也开始思考是否把SEO当做重点来运作,也有越来越多的人开始唱衰SEO的未来,感觉SEO已经没什么出路了,其实对于这个问题,我也曾在马海祥博客上多次跟大家讨论过,不过我今天要跟大家讨论的……【查看全文】
-
判定一个关键词的SEO优化难度等级标准
每一个做SEO的朋友都有一个纠结期,尤其是刚学会SEO自己私人接单的朋友,在接到一个单子的时候,高兴得饭都吃不下,但随即烦恼又来了,这个关键词我有没有把握优化到首页呢?难度大不大呢?如何判断优化周期呢?种种疑问围绕在心头,以至于最后单子没吃下,到反打击到自……【查看全文】
分类目录
互联网更多>>
自然语言处理的单词嵌入及表征方法 本这篇文章里,综述了在自然语言处理(NLP)上应用深度神经网络得到的一些效果极其显著的成果,但我写这篇文章……
基于眼球追踪技术对用户调研的探讨研究 眼球追踪技术就是当人的眼睛看向不同方向时,眼部会有细微的变化,这些变化会产生可以提取的特征,计算机可以……
移动互联网是什么意思? 移动互联网就是将移动通信和互联网二者结合起来成为一体,是指互联网的技术、平台、商业模式和应用与移动通信……
SEO优化 更多>>
-
百度搜索页面站点Logo权限获取与使用
站点Logo是在百度搜索网站名称时,出现在网站名…… -
移动搜索未来发展的趋势及优化要点
无论百度是否有对移动端搜索结果进行调整,互…… -
如何分析一个网站的价值
评估一个网站的价值,特别是商业网站的价值,…… -
Google熊猫算法升级:熊猫算法4.1(Pan
近日,Google(谷歌)公司正式发布了熊猫算法4…… -
如何提升中小型医院的核心竞争力?
虽然说目前医疗行业的移动端营销推广还不完善…… -
百度是如何判断网站更有抓取和收录
最近为了是一些被误伤的网站能更快的恢复排名…… -
网站内链结构该怎么进行布局?
良好的网站结构会让蜘蛛顺着链接,一层层的读…… -
交换友情链接的参考标准
很多网站在交换友情链接后发现自己的网站开始……