谢恩·格林斯坦:互联网基础设施的经济学分析(上)
2021-10-04 07:42:17
  • 0
  • 0
  • 0

以下文章来源于比较 ,作者比较

编者按:

本文从经济学的角度分析了互联网基础设施中的经典议题,如网络数据交换的定价与条件、改进基础设施的激励、先数据基础设施的地区平衡以及网络架构的监管等,帮助读者了解互联网背后运营机制。本文原文发表在《比较》第114辑,本文为删节版。全文请参见财新网。

作 者:谢恩·格林斯坦(哈佛商学院管理学院)

译 者:余江

来 源:比较(ID:comparative-studies)

本文共计8740字数,阅读约需要16-19分钟。

商业意义上的互联网在25年前刚刚出现。20世纪90年代中期,当用户通过拨号上网传递数据包时,互联网上的主要流量是邮件、文件和少数网络应用。对此类内容,用户通常可以容忍延迟。当然,如今的互联网已是一个由软件应用和计算设备构成的相互连接的庞大系统,整个社会依靠它来交换信息与服务,以支持商业活动、购物和娱乐。流媒体、视频与游戏等数据传输成为互联网接入提供商的主要流量,基本上通过宽带送达用户,用户通常不再能接受服务的延迟。近年来,智能手机与无线局域网的兴起支持了类型广泛的“共享经济”新业务(如Uber、Lyft、Airbnb等)、移动信息服务业务(如社交媒体、订票业务、短信)和其他许多应用的增长。80%以上的美国家庭如今拥有至少一部智能手机,而2007年还几乎为零(数据来自Pew Research Center 2019 Mobile Fact Sheet)。超过86%有宽带接入的住宅利用某种无线局域网连接应用服务。

标准的GDP统计程序很可能低估了互联网的产出,包括与“免费”产品有关的产出,以及那些使用互联网广告的企业在构成上发生变化带来的经济活动重组等。至于这些经济变革的规模,要知道2017年在线广告(包括在线出版和广播,以及网络搜索门户等类别)为美国GDP贡献了1059亿美元,在之前5年里共增长了250%。美国人口普查局估计,仅电子购物和邮购商店(NAICS 4541)贡献的在线零售额就超过5450亿美元,在同期的增幅达65%。

虽然互联网已成为我们日常生活的组成部分,但对公众与大部分经济学家而言,互联网的内部架构与运营几乎是无形的。本文将首先介绍支持互联网服务传输的背后进程。互联网基础设施包含多个不同类型的设备:根服务器、光纤、宽带、网络交换机与路由器、内容分发网络、通信塔及其他。而互联网的“主干网”由庞大的数据线构成,尤其是连接各种网络与核心路由器以传输数据包的部分。互联网基础设施的其他组成要件包括云设备以及谷歌或亚马逊等大企业内部安置的网络。深入了解互联网架构机制,可以帮助我们解答如下类型的问题:数据交换的定价与条件由哪些因素决定?改进基础设施的激励来自哪里?先进的数据基础设施在不同地区之间的普及是否平衡?

这些讨论将涉及网络经济学中的某些经典议题。在标准和规则上达成共识的网络可以在广泛的环境中实现自我维持,因为现有用户和潜在用户都会被构造成熟的网络吸引。可是,如果网络中包含多个最终用户和多个商家,相互之间会发生成本和计费,某些时候的谈判可能陷入僵局。以原来的方式继续扩张网络或许简单易行,但网络运营中更复杂的变化可能会带来问题,因为此类变化可能会干扰确保网络运行的共同规则,或者需要为变化而投资的商家发现自己不能从其他参与者那里分到足够份额的、令投资物有所值的收益。

本文将着重讨论北美的做法,并简要提及工程设计方面的内容。尽管如此,本文仍能说明互联网基础设施是如何运行的,它的作用是什么。如果文中出现了相关的技术术语,我将做相应的介绍和解释。

互联网数据如何传输?

要理解互联网如何连接如此众多的设备,我们先从一个基础案例说起:某位用户从维基百科获取信息的要求如何引起若干即时操作?这就关系到用户通常看不到的数据传输机制。

这里是对该机制的一个简化解释:用户利用自己的计算机、手机或其他上网设备上已装载的网页浏览器,可以连接某家互联网接入提供商,即通过建设和运营能够传输数据的实体设备,提供有线或无线的网络连接的企业。此时,该企业把用户的访问要求提交给一台域名服务器,此服务器会把访问目的地(这里是指Wikipedia.org)关联到一个网络协议地址(IP address)。收到此信息后,用户的浏览器将把访问要求提交给该IP地址对应的服务器。然后维基百科网站的服务器将做出回应,以数据包形式发出用户要求获取的信息,数据包格式则是按照互联网上连接设备的特定协议编制的。这些数据传递给用户的互联网接入提供商,后者将其传递到用户的设备上,再由设备把信息转化为用户可以阅览的格式。

这一双向信息流动由多个市场交易支持。首先,互联网接入提供商的行为靠公开的市场交易决定:用户通常按月付费。此类企业大致分为两类:有线和无线提供商。有线提供商采用的技术各不相同,从最慢到最快的包括:卫星、数字用户线路(DSL)、有线调制解调器和光纤等。地球同步轨道上的卫星可以接收和发送来自全球任何位置的卫星天线的信息。DSL设备是对电话线加以改进来传输数据的。调制解调器是添加符合电缆数据服务接口规范(DOCSIS)的转化器和解调器,在有线电视系统上增加数据服务。光纤则通常是给用户铺设新的连接线路。

图1显示的是美国联邦通信委员会对企业宣传的几档网络传输速度开展的标准化测评结果,包含17家公司,其服务面向绝大多数美国用户。数据传输速率的单位是每秒百万单位,并将其换算成下载网页时的标准用户体验。如该图所示,不同接入技术宣传的传输速度会给用户带来不同的下载体验,也对应着不同的月费用。通常的卫星接入服务为每月90—120美元,另外需要至少300—500美元的初装费。DSL的月费用为30—50美元(仅包含互联网服务),美国最大的DSL提供商为AT&T(美国电话电报公司),用户近1600万。调制解调器服务的月费用为50—80美元,根据速度和流量封顶而不同,最大提供商为康卡斯特,用户人数超过2800万。入户光纤的月费用为40—80美元(仅包含互联网服务),根据速度和流量封顶而不同,对商户与住户的最大提供商为威瑞森光纤,用户数量约为700万。对任意给定的地点来说,上网选项通常可能有0—2个有线接入提供商,加上一家潜在的跨越型接入提供商。

无线上网选项与有线宽带的用途不同。虽然卫星连接服务可以全覆盖,其大多数用户却位于人口密度低、缺乏有线接入提供商的地方。据估计,其用户包含800多万个美国家庭。美国最大的无线接入提供商是威瑞森无线(Verizon Wireless)和AT&T无线(AT&T Wireless),分别拥有超过1.5亿和1.6亿用户。

还有一类市场交易对用户来说是藏在幕后的。域名以及网站所有者的代理人需要给域名服务器公司付费(美国最大的域名服务器企业包括Cloudflare、Amazon Web Services、Akamai等)。虽然域名服务器可以成为独立公司,但越来越普遍的做法是把域名服务同其他服务(如安全等)捆绑。此外,需要发送大量信息的某些机构会采用企业内的域名服务器,而非采购第三方的服务。

数据传输的五个选项

在互联网接入提供商与域名服务器发挥作用之后,还有一个关键步骤要解决:数据如何在用户的互联网接入提供商与维基百科等内容服务商之间传递?互联网数据可以在两点之间的多条路径流动,这使整个系统有极大的灵活度。那么每条消息的路径该如何决定?所有选项都采用相同的路由表和软件协议,通常把数据包发往堵塞最少的路径。这一过程主要依靠工程决策:在某些路径发生拥堵时,整个网络的参与者必须如何集体行动。至于数据传输的价格如何决定,我们将在后文解释,因为在了解网络运行机制后再讨论经济问题会容易得多。目前,我们还是聚焦于数据从用户到维基百科的往返路径,这里有五个选项。

第一个选项最简单,如果用户与内容服务商的连接通过同一家互联网接入提供商(如康卡斯特),则数据可以在这家互联网接入提供商的网络内部请求和发送。这条路径常见于个人之间的双边通信,如电子邮件,大多数发生在位置接近的两个参与者之间。不过,大多数其他流量,尤其是支持网页和流媒体应用的流量,发生在相距遥远的内容服务商与受众之间。由于地理分隔及美国互联网接入提供商的分散性质,此类交互通常并不局限在单一网络内部。

由此关系到互联网用来尽量减少延迟的最常见的第二个选项:把用户对内容服务商的数据请求转路由到内容分发网络(CDNs),它是地理上分散的服务器构成的网络,更加靠近终端用户。有时将这种做法称为“把数据转移到网络边缘”。由于此类网络在现实中更靠近用户,便可以节约响应时间。许多内容服务商选择把内容缓存在内容分发网络上,只对最及时和流行的内容做更新,使大多数用户实际上是同内容分发网络而非最终的内容服务商做内容交换。内容分发网络还可以增加一层可靠性和安全性,例如当某些服务器失效时,内容分发网络上的缓存内容依然可以为用户提供服务。另外,内容分发网络可以保护内容免受“拒绝服务攻击”,发起此类攻击的人试图以大量信息涌入使目标网站的服务瘫痪。

内容分发网络在商业互联网的初期并不存在,但如今,几乎所有大大小小的商业参与者都以某种方式利用它们来提供流行内容。美国目前最大的第三方内容分发网络提供商是Akamai,2018年的收入达27亿美元。紧随其后的提供商是Cloudflare和Limelight,2018年的收入分别为1.92亿美元和1.84亿美元。尽管内容分发网络对用户来说是隐形的,但他们收到的绝大多数数据其实直接来自这一路径。

传输数据的其他三个选项也在互联网私有化之后的20年中采用(Greenstein,2015),但很难估计其使用频率。在比较遥远的过去,私人对等互连(private peering)、互联网交换点(internet exchange points)以及传输载体(transit carriers)这三种传输选项更经常地用于把数据从内容服务商直接传递给用户,也就是说无须内容分发网络的帮助。如今,它们用于把数据从内容服务商传递给内容分发网络,并在大多数访问请求中作为内容分发网络的补充。在少数情形下,它们又作为内容分发网络的替代,例如当用户请求访问非流行的内容,或者内容服务商没有做出采用内容分发网络安排的时候。

私人对等互连兴起时,维基百科网站与它的用户(及支持用户的内容分发网络)有着不同的互联网接入提供商,但两家接入商有直接连接点,并相互达成了解决数据交换的双边合同。在典型的合同中,如果一个月内彼此往来的数据流量大致相当,则不需要支付费用;如果一方给另一方的数据流量占比更高,则发送净数据更多的运营商要给接受流量的一方付费。通常来说,这些支付的发生条件是流量超出谈判约定比例(在4 ∶1到8 ∶1之间)的时候。当然,此类合同与谈判的具体情况不是一句话能讲清楚的(详细介绍可参见Norton,2014)。

两家或更多互联网接入提供商还可以在互联网交换中心(IXP)交换数据,互联网交换中心可以由独立机构运营,被设置为各运营商彼此连接交换流量的场所。每家运营商向提供这些数据交换设备的机构支付一定的费用,并可以对有关的建筑物、备用能源和设备投资,以确保互联网交换中心在任何情况下都维持运转。不同于私人对等互连,这里的所有参与者通常都同意发送和接收自身连接能力允许的任意数据流量,各家租户的收费可能不同,但往往并不与数据流量挂钩。美国有数百个此类交换中心,全球的数量更多。最大的运营商Equinix的年收入超过50亿美元,在多个城市设有200多个数据中心,其中一部分即设置为互联网交换中心。

假如在我们的例子中,用户与维基百科网站各自的互联网接入提供商之间没有任何直接连接,甚至没有通过网络交换门户连接,则有最后一种实现互联的方式。此时,另外一家或多家网络的连线可以充当这两家提供商之间的传输载体。提供载体传输的运营商可以根据与其他运营商达成的合同为这些行动获得补偿。

投资、扩张与改进的激励

我们需要关注这一体系的经济意义:如果能帮助企业获得收入或者避免其他企业的收费,则网络运营商会有激励建设更多网线,提供更多连接,以缓解网络传输拥堵。如果能增加对用户的收费或减少运营费用,则互联网接入提供商就有激励提高产能,保证连接。这样的激励看起来符合长期的理想结果,即为数据的发送和接收提供更高效、更优质的选择。一个有趣的开放问题是与网络收益有关的私人激励的大小。传输线路是系统的组成部分之一,一个部分的改善会把收益传递给其他所有互补部分。传输线路改善产生的大多数收益是归属利用这些线路的内容服务商、享受更快内容服务的用户,还是从用户那里收费的互联网接入提供商?答案部分取决于我们下文要讨论的定价机制。

与之相关的一个问题是关于建设内容分发网络的激励。第三方商业内容分发网络需要与互联网接入提供商或无线接入提供商就“靠近用户的服务器的权利”展开谈判。互联网接入提供商或其他网络接入提供商还可以向内容分发网络收取从网络上获取数据的传输费,这些数据传输发生在内容服务商的服务器到内容分发网络建立的设备之间。原始内容服务商则向内容分发网络提供商付费,后者把内容从内容分发网络服务器上分发给用户,前者按照每天的约定时刻表更新内容分发网络服务器上的内容。美国的所有(包括规模最小的)互联网接入提供商都采用这一合同安排,表明该安排符合此类厂商的利益。

某些大型内容服务商,如谷歌、苹果、微软、脸书、亚马逊和网飞等公司,有自己的内容分发网络,并根据自己的应用和服务调整技术特征。同样,它们需要就支付给互联网接入提供商的“搭配”价格展开谈判,有时也为数据传输付费。事实上只有大型企业采取这种做法,因为对中小规模流量来说,外包给第三方内容分发网络比自建的成本更低。另外,出于其他若干原因,如分级服务、谈判摩擦与搭配费用等,某些企业选择把部分自有的内容分发网络放置在互联网连接点上,而非互联网接入提供商的体系中。

一个悬而未决的问题是:内容分发网络改善带来的大多数收益是归属经营服务器的内容分发网络提供商,还是利用该网络的内容服务商、享受更好服务的用户,或收取搭配费用和用户月费的互联网接入提供商?与任何网络组成部分一样,这里我们并不清楚私人激励与网络整体收益之间的关系。

但这一问题非常重要,因为内容分发网络的兴起既是用户需求改变和网络快速进步的原因,也是其表现。许多用户已转移到更高速的宽带上,提高了网速。这些用户更需要和支持新的应用服务,例如网飞、Sling、Disney+以及HBO Go等厂商提供的超越运营商的OTT流媒体服务,它们越过有线电视或卫星电视,直接通过互联网为消费者提供内容,尤其离不开内容分发网络设施。

快速进步最引人注目的表现是互联网应用服务的深度进化以及与之伴随的流量。在互联网最早出现的时候,文字在流量中占主导地位,采用电子邮件或被动浏览形式。以当前标准看,当时的数据量在上下两个方向都非常小。如今居民家庭接收的数据比发送的高出很多个量级,因为他们接收的大部分流量已从静态内容变成视频与流媒体(Huston,2017)。例如在2013年,家庭每月使用的中位数据传输量为20—60Gb(Federal Communications Commission,2013)。而如今在线收看一部标清或高清电影会产生每小时1—3Gb的流量,远远超出任何被动网页浏览所能达到的水平。仅仅是不间断追看一部连续剧,就能大幅增加居民家庭的数据使用量。与此同时,最大的流媒体服务企业网飞的美国注册用户数在21世纪第二个10年从2000万飞涨到6000万,其业务还远不止流媒体。简而言之,随着家庭以流媒体收看电视和电影的增加,处理密集数据应用服务的基础设施的能力必须随之提高。要回答投资激励是否最优的问题总是颇有难度,不过互联网发展历史确实表明,私人投资激励已足以带来网络架构的巨大扩容与升级。

数据中心与云服务

在商业互联网兴起之初,几乎所有企业都把服务器放在自己公司内。不过商业界逐渐认识到把计算资源集中到一个地方的规模经济,由此诞生了数据中心。这些建筑中包含很多排放在支架上的服务器,以适应网络支持和维护的日常操作。设计者最终学会了如何配置,以容纳数据储存和计算所需的大量服务器,利用建筑的特点降低能源消耗,并确保紧急情况下的可靠运行等。

市场上用来发送和接收信息的不同方式,如私人对等互连和系统互连等,也被某些服务于此目的的数据中心采用。数据中心的内部连线可以支持某些特定类型的活动。例如,纽约股票交易所的数据中心位于新泽西州,允许许多公司以极快的速度获得交易服务。又如,医疗、金融和运输等产业的部分商业用户要求极高的安全性与可靠性(即保证99.99%的运行时间),特别是对含有敏感客户信息的交易提供支持的关键功能。这些数据中心可能包含高级的备用发电机、能抵御洪水的高造价建筑物以及减少附近车辆行驶产生震动的加固地板等。此类成本不菲的配置在某些情况下会物有所值,例如,由于内在的灵活性与机智的选址,休斯敦的数据中心在2017年8月哈维飓风引发洪水期间及之后都没有停止正常运行。

较小的数据中心包含数万台服务器,建设费用可能超过1亿美元,而大型数据中心可以包含数十万台服务器,建设费用高达数十亿美元。作为美国最大的第三方网络机构之一,湖滨技术中心位于芝加哥市区以南2英里的一栋110万平方英尺的建筑物中,由唐纳利集团过去的一家印刷厂改建而成。该机构归数字房地产信托公司所有,这家控股公司控制着全球200多个数据中心,2018年的营业收入超过30亿美元。芝加哥这座建筑并不符合数据中心的惯例,通常的数据中心是修建在极其广阔的土地上的单层建筑,有丰富且廉价的电力,与互联网有高质量连接,往往位于距离商业用户不太远的郊区。北美洲最大的数据中心聚集地是弗吉尼亚州的阿什伯恩(Ashburn),就在华盛顿特区外围,靠近东部城域交换中心(通常称作MAE EAST),是美国最早的互联网交换中心之一。

数据中心的合同涵盖所有者与租赁市场之间全部可能的安排。一个极端是许多有通用需求(如备份存储)的买家,它们租赁数据中心的空间,自带服务器,但让其他人来管理建筑物。另一个极端是有特殊计算需求的公司,例如脸书、苹果、微软、亚马逊和谷歌等,它们拥有并维护自己的大型数据中心,并根据应用需要来配置建筑物与服务器。

所谓“云服务”是指出租存储服务、计算服务或数据库相关应用的数据中心,且用户可以根据自身需要灵活启用或关闭服务。主要的云服务提供商正越来越多地提供附加软件服务,只收取象征性费用或完全免费。例如,亚马逊网络服务就提供数十款云软件服务。微软云以云服务方式支持Outlook等微软公司的许多产品。谷歌则免费提供机器学习工具TensorFlow的云服务。

随着服务质量改进与价格下降,对云服务的需求正在增长。有研究估计,质量调整后的亚马逊网络服务的价格在2009—2016年的年降幅为17.3%(。对于支出增长和业内市场份额变化的估计则取决于销售额的具体定义,但最大的三家企业正是上文提到的亚马逊网络服务、微软云和谷歌云。例如在2019年,亚马逊网络服务被公认为是其中最大的一家,收入达350亿美元,比上年剧增40%。其他企业也在快速成长。云服务的吸引力来自它们的灵活性、工具类型广泛,以及能选择用可变成本替代固定成本。云服务还便于许多创新应用服务开展实验。

私有云提供商越来越多地利用复杂架构来平衡用户需求的负载,例如,把应对全方位任务的数据中心同快速提供内容服务的分发网络结合起来。云服务为内容分发网络提供及时更新,并对不太流行的内容做出次级响应,而主服务器的更新间隔时间与非流行内容响应时间则更慢。云服务可以在一天中把用户需求高峰的负载分摊到多个地理区域。

大企业在何种情形下运营自己的互联网基础设施

应用市场与平台中的许多大企业,如微软、苹果、谷歌、亚马逊和脸书等,运营自己的互联网基础设施,而非借助第三方提供商。这些企业都有自己的数据中心和内容分发网络。还有,谷歌自己的数据中心都与自己的主干网相连接,从而绕过了本可以从网络运营商租用的主干网。大企业把这些互补功能集成起来,是因为它们的运营费用可以低于第三方提供商,而且可以根据特殊需要调整工作流程,以便获得更好的结果。例如,谷歌自有的网线能帮助众多数据中心与内容分发网络在一天中平衡负载。大企业还能在众多相关服务中发现范围经济,以便提供对用户有吸引力的捆绑服务。例如,Cloudflare就把内容分发网络与域名服务器集合到一个有众多服务的包里,作为内容保护的全套安全服务的组成部分。

当大企业自建互联网基础设施时,对整个网络的效应可能是正面的,也可能是中性或负面的。例如,微软、谷歌与亚马逊等运营大型数据中心的大企业从数年前开始提供云服务。用户对其效率感到满意,于是需求增长迅猛。所以这些公司提供云服务让整个网络经济获得了好处。

不过,谷歌光纤的故事则是另一种情形。谷歌当时设立了一家新机构,向居民提供高速光纤接入,并通过与电视、电话和互联网接入企业签订合同进入了几个城市。尽管在本文写作时,该机构在这些城市取得了商业成功,但由于有若干挑战需要克服,投资被暂时停止。该项目的可见收益有限,并局限于其进入的少数地区,或者说最多表明在其他地方也可能成功。即使谷歌光纤延伸到其计划中的所有城市,覆盖的美国人口占比也不会高于10%。

当大企业加入互联网基础设施时,还可能产生某些有更大隐忧的结果。补充服务提供商必须同支配性的大企业谈判,相比在有更多选项的竞争性市场,它们可能遇到更苛刻的合同条款。此外,长期以来有人担忧,与更多采用开放协议的环境相比,最大型的企业内部越来越多采用专用流程可能不利于一般性创新。上述担忧在反垄断或监管议题中关系重大,因此一个有待解决的关键问题是:在何种市场支配力与哪些市场条件下,我们需要正视这方面的担忧。

私人数据中心与云服务的兴起,同样涉及网络基础设施改进的竞争行为与私人激励的重要经济问题:云服务等部分网络的改进带来的收益如何在用户与企业之间分配?在用户分享收益的情况下,竞争激励是否充分?是否对某些用户比其他用户更有利?利用第三方服务的创新企业进入的长期竞争前景如何?这些都是尚待研究的课题。

 
最新文章
相关阅读