Retric
欢迎打赏。BTC:1MibfK26s4u8GBLEAsTy82uVEBPBUG4z3F
写了 332 篇文章
预言家周报#20:搜索引擎决定了我们的世界观,它应该被去中心化吗?
发表于 2019-04-22 22:14:44

预言家周报-第二十期#20

Apr 22, 2019

对很多今天习以为常的事情,自从比特币和区块链出现之后,我们似乎多了一点莫名的勇气,去质疑甚至尝试修正它。 

搜索引擎就是这样一个例子。今天在 hacker news 上看到一个讨论,有人写了篇论文(https://arxiv.org/pdf/1903.03846.pdf),提议创造一个开放网络指数(open web index),解决今天搜索引擎所面临的问题。 

这个问题看起来有点怪。对于普通用户来说,搜索的结果足够快,想找什么基本都能找到,还有什么不满足的呢? 

发起open web index的人不这么想。他们是这么分析问题的:全世界主流的搜索引擎现在就那么几家,拥有自己指数的就更少了——“指数”在这里指的是搜索引擎背后依靠的网页数据库(the database of web pages)——有一些搜索引擎会使用别人的数据库来返回搜索结果,比如 Yahoo 就是用的 Bing 的服务。而主流搜索引擎里,只有 Google, Bing, Yandex 和百度这四家拥有独立的搜索指数。也许还有其他搜索引擎拥有自己的指数,但在市场占有量上它们和这四家面前不足一提。比如,在美国,Google 和 Bing 差不多瓜分了所有的搜索市场,而在欧洲的一些国家,Google一家可能就拥有 90% 的市场占有率。 

Google一年要为全世界用户提供超过 2,000,000,000,000 次的搜索。毫无疑问,搜索引擎已经成为了互联网一个非常重要的基础设施了。这么庞大的基础设施掌握在少数几家公司手上,会有什么问题吗? 

对用户来说,他们信任搜索引擎所提供的信息,认为自己得到的搜索结果是值得信赖的、公平的、无偏见的。因此,搜索引擎应该是中立的。这一点在现实中可能无法完全做到,但我们至少应该意识到:今天我们所使用的任何一个搜索引擎产品,本质上它们都是为我们提供一个由算法生成的“世界观”而已,它只是互联网这个世界中的一个切片,一个投影,而不是互联网的全部。没有任何一种搜索引擎的“世界观”是绝对正确的。 

让少数几个搜索引擎为我们“翻译”这个庞大的互联网世界,最终可能只会产生几种特定的“世界观”。这样会产生一些问题:不断的加强“刻板印象”,比如针对女性的刻板印象;在民主选举这样的讨论下影响公众的看法和观点;倾向于提供更有争议性和戏剧性的、更有“看点”的叙述方式,而不是提供更客观的信息、更无害的故事。 

从技术角度来说,只有少数几家公司拥有搜索指数,那么(1、互联网能够得到展现的可能性(比如不同的网站)就减少了。(2、每个搜索引擎都有自己的利害关系,如果它同时又是内容提供商就很容易发生利益冲突,把自家内容的展示权重提高,比如Google提高Youtube视频的排名,百度提高百家号的排名。(3、越多用户依赖于单一的搜索引擎,SEO的针对性就越强,那么搜索结果越容易被影响。考虑到现在SEO已经是一门价值数十亿的生意了,可见其中影响之深。 

所以,open web index的人就想提供一个开放网络指数,用一个非营利组织来建设一个存储网页数据的公共数据库,这个数据库将免费提供给所有人使用,不同的商业公司可以基于此提供不同的搜索算法,用不同的“世界观”进行市场竞争,赢取用户。这个提议在 hacker news 上引发了不少讨论,有的人认为 Wayback Machine 和 Commom Crawl 就是在做这件事的,有的人则认为这两个产品无法做到想要的结果,还有的人认为仅仅用非营利组织来建设这个数据库还不够,不仅需要开放,还需要去中心化,最好是用P2P的方式来做。 

老实说,看完上面这些讨论,我心里依然也没觉得这件事能够做成,因为很多事情存在的时间越久,面临的阻力也会越大。但让我比较感慨的是,以前我们也总说百度搜索有各种各样的问题,这里面抛开一些我们无法讨论的客观因素,在技术及商业层面,很少有人想着去做一个替代品干掉百度,哪怕有,说出来恐怕也只会让人嘲笑是在做白日梦。毕竟,百度是BAT三巨头,人人都在用百度,我们还能怎么办呢?但自从加入加密世界之后,互联网那些庞大的基础设施似乎不再是不可动摇的了,至少人们会去思考有没有办法做一些改变。 

发生这种转变的原因究竟是啥我也不是很清楚,我能想到的一个原因似乎是:商业和公司好像不再是人们唯一的选择了,我们手里有了账本和 token 这些不一样的武器,有了不同于传统商业公司拥有的力量,于是面对以往无解的公地问题,我们突然也有了更多的信心。 

那么,这种变化最终会不会转化成一个成功的结果,反过来去反噬那些传统的力量呢?我想没人能知道。但好消息是,这场戏至少已经开场了。

上周加密世界最好看的 6 篇文章

有哪些文章被我们错过了?

「往期 issue」


欢迎打赏。BTC:1MibfK26s4u8GBLEAsTy82uVEBPBUG4z3F
写了 332 篇文章

评论

this comment section is using the amazing decentralized database engine - Gun.db

推荐阅读

探访 AlphaWallet:谁会是区块链时代的“网景浏览器”?
Chia:发明 BT 下载的人,想用新的共识机制,解决比特币电力浪费和矿池中心化的问题
USDx :取代USDT,从做一个更好的DAI开始
加密网络,史上最有趣的模拟城市 | 围炉夜话
有趣的 DApp 设计模式:First-class Asset
透过这份数据,我们看到了以太坊网络真实状态的一个缩影