数据在现代工业中一直扮演着重要的角色,而且这一角色一年比一年突出。
最近,“大数据”的兴起对行业产生了巨大的影响。 到 2027 年,软件和服务收入预计将增长到 1030 亿美元,复合年增长率为 11.4%。 数据无处不在,从我们的社交媒体账户到我们用来钻探石油的设备,它非常有价值。
这意味着技术在未来几年面临的最大问题之一将是如何以一种不仅安全、负担得起,而且易于访问的方式存储所有这些数据。 随着可用数据量的增长,我们需要确保现有的存储系统能够处理这些数据,并且不会在压力下崩溃。
目前,这被证明是艰难的。 当前的存储选项已经在努力处理爆炸式增长的数据量,而且随着时间的推移,这只会变得更加困难。 我们需要重新思考我们看待存储的方式,并在不断变化的世界中提出新的解决方案。
在我们探讨一些解决方案之前,让我们先仔细看看当前中心化存储方法存在的问题。
为什么当前的方法被打破
当前的数据存储方法主要基于大型集中式数据中心。 甚至云存储也严重依赖这些庞大的中央数据库,这种方法存在各种问题。 这些包括:
它们臃肿且超大。 这使得它们的维护成本高昂且耗时,更不用说对环境造成破坏了。
它们很容易受到黑客攻击和网络犯罪,因为它们有一个中心故障点,可以将其作为目标来摧毁整个系统。 最重要的是,任何中央控制的系统都存在内部腐败的风险。
它们很难扩展。 那里的数据量呈指数增长,这些集中式数据库很快就会发现难以满足如此多的需求。
这不是一个理想的情况。 但是解决办法是什么? 许多人认为,区块链及其去中心化的存储方式可能是答案。
区块链的解决方案
区块链技术作为支撑比特币和其他加密货币的分类账而得名。 但该技术适用于各种数据,并且由于缺乏中心点,它与现有方法存在重大差异。 这给了它很多优势:
它是安全的。 数据被加密并分布在多个节点上,形成一个分散的网络,没有中心点,使攻击者难以造成破坏。
由于没有中央机构负责,因此很难破坏区块链。 这只能在某些网络中通过夺取大多数节点的控制权来完成,这几乎是不可能的。 它是真正民主的,并且高度抵抗欺诈。
它是不可变的。 这意味着数据无法被操纵或处理,换句话说,用户可以信任数据及其背后的完整性。
它很快。 通过利用庞大的节点网络而不是中央服务器,区块链有可能比传统存储方法快得多,从而实现无缝访问。
区块链似乎在很多领域都是明显的赢家,事实也确实如此。 但到目前为止,这项技术在大规模数据存储方面一直举步维艰。
让我们来看看为什么会这样,以及它如何很快改变。
区块链的问题——以及如何解决它们
传统上,随着区块链发展到包含越来越多的数据,它们一直在努力扩展。 比特币可能是这方面最明显的例子——在活动增加和价值更高的时代,它的交易时间和成本都猛增,给用户带来了严重的问题。
这是一个主要问题; 数据一直在增长,区块链必须能够适应这种不断增长和存储的需求。 如果区块链无法应对大容量,则它们不适合用于主流数据存储。 目前有几种方法和公司试图解决这个问题。
存储成本
虽然区块链在数据存储方面具有巨大潜力,但该技术首先需要解决其存储问题。 当区块链面临压力时,成本往往会失控。 例如,去年比特币价格暴涨时,交易成本飙升至 50 美元。这还不足以应对未来数据的爆炸式增长。
Sia 和 Storj 都运营基于区块链的大型存储网络,旨在提供快速且廉价的数据存储,而无需中心点或控制第三方。 这两个网络都通过将文件分割成块,然后加密这些文件并在网络上分发它们来工作。 Sia 已经部署,超过 130 TB 存储在 300 多个贡献者中。 Storj 即将推出。
Filecoin 的工作方式类似,依靠强大的 IFPS 网络中的节点来分发其文件。 该公司筹集了超过 2.5 亿美元,目前正在开发数据存储的去中心化营销。
数据安全性和可扩展性
对于任何数据存储系统,安全性必须是最重要的。 目前基于云的模型,如谷歌和亚马逊提供的模型,优先考虑安全性,但它们的集中性质使它们处于劣势,因为它们是围绕一个中心故障点构建的,并将用户数据留在公司手中。
区块链技术通常因其密闭结构和内在安全性而受到赞誉,显然是这里的赢家。
但困扰区块链空间的一个问题是可扩展性。 以太坊和区块链这两个最大的区块链在每秒交易量方面都难以达到两位数。 另一方面,Visa 可以处理 44,000 个,而 Facebook 可以处理高达 175,000 个。
Arweave 是这个生态系统中新兴的初创公司,它开创了一种处理数据的新方法。 该公司找到了一种将数据直接存储在区块链本身的方法,这与其他一些区块链数据存储方法不同,后者依赖于构建在现有区块链之上的第三方协议。
从本质上讲,随着存储在区块链中的数据量增加,达成共识所需的哈希值会减少,从而使其具有高度可扩展性。
除此之外,该平台还使用一种称为访问证明的新共识机制,矿工在其中竞争谁可以复制最多的数据。 这比现有模型(如工作量证明)的能源密集度要低得多,后者实质上奖励能够聚集最多计算能力的矿工。
“我们所做的实际上是解决了链上数据存储,不像其他解决方案在后台有 P2P 文件分发网络,然后在链上结算支付,我们做了一个加密经济激励系统,可以让你增长规模 Arweave 的 CEO Sam Williams 说: 这种方法提供了一种更好的数据存储方式,并且可以大规模使用。
更重要的是,该平台永久存储数据,只需要向用户收取一次性费用。 无需受制于昂贵的月度合同,这是许多云存储模型令人不快的副作用。
Arweave 最近还宣布推出 Permaweb——一种新的不可变和去中心化网络,可永久提供低成本、零维护的存储。 它提供便利、高效和信息安全,不受第三方干预。 它还带有自己的隐私层,提供不受任何外部力量影响的安全通信。
随着数据在我们的世界中扮演着越来越重要的角色,我们需要朝着创新迈进,并与 Arweave、Filecoin、Sia 和 Storj 等先驱一起,2019 年可能是我们摆脱过时存储方法的一年。