作者：Jason，?PuzzleVentures
TL;DR
将非核心数据从主链上分离并存入DSN已经成为了解决扩容、提升互操作性和隐私保护的主流方案。
Filecoin在矿工网络和存储成本上拥有极大的优势，但是Arweave的永久性存储可以给NFT或社交类应用提供更加可靠的解决方案。
L1扩展存储网络可以提供相比DSN互操作性更高的新方案，但是仍然需要时间验证模式。
未来的去中心化存储场景会包括完整的互操作性、数据可用性、安全性以及通过中间件和API提供用户/开发者友好的链下计算。
去中心化存储的发展历程
数据存储板块一直以来都是科技界发展的基石和重点关注领域。从基于亚马逊、微软、阿里巴巴等提供了中心化云存储服务以来，云存储市场已经基本形成了1000亿美元以上(2021年)的市场规模且头部效应明显。而随着Web3的爆发，一批去中心化存储的供应商开始满足传统云存储市场满足不了的需求。
虽然目前大多数的dApp仍然部署在AWS上，而以太坊的节点在merge前也有超过50%在AWS上运行，但是Web3项目却逐渐发现了将后端和元数据与去中心化存储连接的重要性和必然性。根据Ethereum.org的定义，去中心化存储是一个由p2p网络构成的，每个运营者拥有整体数据的一部分并可以通过算法复原的数据分享系统。
去中心化存储虽然可以解决诸多问题，例如数据隐私性保护、抗审查等，但目前的去中心化系统发展还不成熟且有诸多亟待解决的问题。经过链上存储方案的不断尝试，DSN是目前的主流解决方案，这种方案可以最大程度上将存储容量提升到接近于无限，并且对数据的安全性和隐私性有所保障。
表1区块链数据存储方案比较
具体链上扩容方案可以参考文章：https://zhuanlan.zhihu.com/p/48078642
笔者认为，链下的存储层终将会成为Web3生态中的重要基础设施，并通过热存储、冷存储的方式解决任何协议层、运行层的数据存储问题。
法庭文件：2022年前Alameda Research和FTX净亏损达37亿美元:11月22日消息，据破产法院相关动议，2022年之前Alameda Research和FTX自成立以来的净亏损高达37亿美元。而去年SBF告诉福布斯Alameda在2020年获得了10亿美元的利润，且据CNBC报道FTX泄露的2021年财务业绩表明它在2021年是盈利的，净收入为3.88亿美元。（福布斯）[2022/11/22 7:54:53]
在未来，“不可能三角”中的扩容问题可以通过将存储层完全剥离但维持互操作性的方式来解决，并通过建立于冷存储层之上的中间件、API等服务提升数据计算、调用、推送的效率。
去中心化存储的发展现状：分类与规模
去中心化存储本质上服务于Web3生态的应用层，因此在解决方案上更加倾向于满足终端用户的需求，也就是用更高效、更低成本的方式执行数据存储、计算与调用的需求。从分类上来看，Arweave、Filecoin和Storj已经形成了独立的三个头部去中心化存储网络，其中Filecoin和Storj是更加去中心化的P2P存储网络，而Arweave是更紧密组织的存储节点网络。
另一方面，不同类型的存储聚合网络因为满足用户费用优化、存储方便等需求，逐渐成为更有吸引力的gateway，但仍然架构在Arweave或Filecoin之上。另外，以EthStorage为代表的L1扩展网络则专注于可直接调用主链DA层且提供额外的算力的设计，与L1深度链接。
来源:PuzzleVentures
另外还有建立于底层存储网络之上或独立的计算网络和协调型中间件也是去中心化存储生态的补充部分，但以生态dApp为主，本文不重点讨论。
从发展规模角度来看，Filecoin无论在收入、FDV还是市场份额角度来看都遥遥领先，并且用户存储使用度仍然在不断增加。然而，三百多万美元的季度收入无论在Web2还是Web3领域都不能算多，并且还是在几乎垄断的情况下。所以整个去中心化存储赛道仍然有着很大的发展空间。
表2去中心化存储Q32022收入与规模
BDM Protocol借贷矿池公测时间更改为2021年2月26号:据官方消息，因BDM借贷矿池头矿白名单申请数量众多，为了对每一位申请者负责，提升用户体验，保证用户权益，BDM Protocol借贷矿池公测时间将改为2021年2月26号。同时BDM Protocol将进一步完善奖励制度，完善白名单制度，升级全新的solidity版本。[2021/2/25 17:52:32]
来源:Messari,Web3Index,CoinGecko
而Arweave和Storj的季度收入还处于十万美元级别，也就是日收入一千多美元，还远远没有达到其应有的市场规模。原因一方面与熊市整体市场萎靡相关，另一方面则是因为目前的DSN存储方案还没有达到与Web3完美契合的拐点。在未来，整个DSN市场一方面需要更多的中间件、聚合器去提供更多的用户流量，另一方面也需要对自身的成本与价值不断调整优化。
主流方案：Filecoin与Arweave的比较
1）功能性
在现阶段，Filecoin和Arweave采用的不同技术架构也带来在功能性上的不同。根据FundamentalLabs的研究报告，我们把功能性的评估框架定义为：存储范围的灵活性、存储的永久性、避免冗余能力、数据存储的激励性、存储数据的普遍性、数据的可获得性。从某种程度上来说，Arweave和Filecoin是一对互补的方案：Arweave更专注于数据存储的永久性和稳定性，更适合metadata和历史数据等；而Filecoin则可以提供更灵活的存储方案，更适合个人和非关键数据的存储。
来源：FundamentalLabs
从最新的技术发展进程来看，Filecoinversion17“Shark”主要建立了存储协议的可编程性，也就是在存储层上增加了智能合约的互动层，并计划于明年二月推出FEVM系统。Filecoin上的数据可用性和活跃度将有所提升，并可以支持更多元化的互操作性，这也是Filecoin相比Arweave的灵活性优势。而Arweave仍然在数据安全性、节点激励稳定性和存储入口上着力发展，对于永久性存储这一理念持续“充值信仰”。因此，虽然很难断言哪一种方案更有优势，但无论如何这两个去中心化存储协议已经在各项功能上发展的比较完善来满足去中心化存储的基本需求。
Candaq集团创始人林子昊：区块链技术2020年还面临3个重要的问题:金色财经现场报道，10月25日，由Candaq和金色财经共同主办，Litentry赞助、Jubi labs、德邻资本、WebX实验室协办的2020区块链波卡万物生长大会在上海举行。Candaq金融科技集团创始人林子昊Moke做大会的开幕演讲。林子昊表示，区块链技术2020还面临几个重要的问题。
第一个问题就是吞吐量的问题、性能的问题、成本的问题，包括整个系统的使用成本，以及搭建成本。这个问题2017年一直尝试解决，但是目前我没有看到非常好的解决方案，所以这个依然会是我们今年明年后年主要面临的问题。
第二个是灵活性的问题，大家觉得2017年的供应链之争背后的逻辑是什么？不是因为一些资本和项目方要寻找一个理由去融资发币，更主要的是区块链2.0技术某种程度上缺乏灵活性。是否能够让更多的项目或者开发的团队，能够在保有自己底层架构的灵活性基础上，同时又能够共享到基础设施和安全性和逻辑性。
第三个如何保证去中心化以及去中心化效率的平衡点，这个会在今年是非常重要的议题。波卡是个很好的例子，他的链上治理大家感觉一个多月前做拆分的时候是无感拆分，像以太坊他的升级必须通过硬分拆的形式，但是这个有可能导致社区的分裂。波卡把这套东西放在底层的一个代码当中，通过链上治理的形式决定升级与否。我觉得这是一个软分杈，是一个很有意思的点，所以这个治理也会是2020年可以值得讨论的一个点。[2020/10/25]
2）费用
同样，Filecoin和Arweave在费用方面也很难直观的比较，本文旨在尽可能合理的方式来对两者的费用形成一定的感知。为了形成数据可比性，本文采用同等存储大小在200年的存储时间内的价格作为比较对象。
表3云存储费用比较
来源：Amazon.com,Arweavefees.com,File.app,Filfox.info
从表3中可以看出，AWS最基础的S3Standard套餐的价格约为$0.023perGBpermonth，则存储200年需要$55.2perGB，而相对更适合长期冷存储的GlacierDeepArchive方案可以把价格压低至$2.38perGB，但是每年的归档次数有限制。而Arweave随着ARtoken的价格波动会产生不同的价格，2022年12月的价格是$1.42perGB，也就是说存储5年左右就可以和S3standard的存储成本持平。
动态 | 国际测试机构探索将区块链用于2020年东京夏季奥运会 以打击兴奋剂使用:据cnnmoney报道，国际测试机构（The International Testing Agency）正在探索将区块链用于2020年东京夏季奥运会。位于洛桑的独立组织正在与区块链公司BlockFactory合作开发原型，以了解该技术如何用于打击兴奋剂。[2019/6/9]
另一方面，Filecoin的价格计算较为复杂，因为不同的矿工给到的价格有差别且FILtoken价格、存储时间和数据调用的频率都会对价格造成影响。但无论如何Filecoin的存储成本相比Arweave和S3来说已经便宜了好几个数量级，可以几乎被认为是零成本存储。
但价格是最主要的因素吗？Arweave的永久性存储对于Web3的意义是更加重大的。例如NFT如果丢失了元数据和图片数据就会瞬间失去价值而变成一个点不开的连接，而在Filecoin的存储协议中，由于过于去中心化的管理方式会造成GarbageCollection的风险，也就是其存储文件的节点中如果对某些文档没有标星的话会有被误删的风险。
同时，当Filecoin存储的时间到期时需要更新存储方，这个过程中也容易形成风险。反观Arweave，通过AR的激励机制鼓励节点存储数据到200年，并且针对AR未来的贬值也做出了相应的补偿激励，同时在存储过程中会通过周期性的随机检查来确保节点仍然完整的存储数据。这些措施都是为了确保每一个节点都能通过完整的存储数据来获得激励，也保障了被存储数据的安全性和可靠性。在已经黑客事件频发的Web3世界中，数据存储的可靠性带来的价值不是用简单的存储价格来衡量的。
3）生态
去中心化存储的生态包括矿工/节点和生态dApps。表4?Filecoin与Arweave的生态数据比较
来源：Filscan.io,Messari
Filecoin由于社区建设较早且关注度较高，目前的存储力在18.9EB左右，是Arweave的17万倍。但是Arweave在3年多的发展时间内已经形成了比Filecoin高2.5倍的存储力增长率，而且Filecoin的增长率实际上已经趋近于稳定的直线。从市值的角度来说，Arweave目前的FDV是Filecoin的40%左右，我们可以判断Arweave在未来会快速追赶Filecoin的存储力生态。
动态 | BTC年交易额已超PayPal 有望于2022年超过Visa:据Bitcoin Exchange Guide消息，Crypto Slate最近一份报告显示，BTC年度交易额已超PayPal，若BTC交易价值延续当前趋势发展，则很可能在2022年超过Visa。据悉，该报告是由ARK Invest的cryptoassets分析师Yassine Elmandjra提出的。Yassine Elmandjra将BTC年交易额与Visa、银联、万事达、Discover和PayPal等不同信用卡公司进行了对比。[2018/8/27]
根据Filecoin今年11月发布的未来计划，Filecoin未来会致力于满足computation和更大范围的dataonboarding这两个需求，从而真正成为Web3世界的Layer0。从存储力扩展的角度来说，Filecoin通过向FIL+和ESPABootcamps这样的激励计划来促进更多的矿工来参与节点建设。
而在dataonboarding和computation上，Filecoin会关注一些具体的细分市场，例如NFT元数据、Web2数据源等等，然后通过FilecoinVirtualMachine建立链上的算力，让这些数据可以更加方便地被使用。从最新的一些Filecoin提案中也可以看出dataonboarding是目前的发展重点。
反观Arweave,最新的2.6版本中主要的关注点是降本增效，也就是通过迭代硬件等方式降低整体存储成本和存储价格，同时提升数据存储、调用的效率。所以Arweave实际上是希望通过建立更好的基础环境来吸引更多的开发者和用户，同时通过生态项目来满足例如gateways,computation等进一步的用例。
所以Filecoin的逻辑是提供大一统、专注于存储业务且依赖于矿工生态的去中心化存储网络；而Arweave更像是一个标准的Web3生态，通过提供完善的底层架构和激励机制营造一个适合开发和用户友好的环境，实现用户数量和dApp数量的有机增长。
从生态项目角度来说，Arweave上已经孵化出了包括Bundlr,Kyve,ArDrive,KwilDB等一批针对技术优化、存储入口、应用扩展方向的优质项目，并且大部分项目负责人都是年轻的创业者为主，发展潜力较大。Filecoin的生态项目数量上有着基数大的优势，Filecoin生态更像是一个开源环境，可以满足更广阔的存储相关需求但并没有重点的发展方向。
新方案：聚合网络与L1拓展网络
1）聚合网络
聚合网络的概念实际上早在Filecoin上线之初就有了，例如Coldstack等早期项目。然而Coldstack并没有获得巨大成功，究其原因主要是纯粹的、Uber式的聚合器并不能真正提升存储效率，而且除此之外无法提供进一步的价值。存储协议的聚合网络的确可以解决用户存储效率和成本上的痛点，但是做法却可以有多种。
首先，这些聚合网络得比Filecoin和Arweave自身的gateway要做的好才能获得市场认可。随着Filecoin往FVM链上计算的方向发展，很可能会挤掉一批建立在Filecoin之上，提供额外computation能力的聚合网络。其次，不同的聚合协议要解决Filecoin或Arweave本身很难实现的问题，而不是做大一统的聚合流量入口，因为大一统的流量入口最终将会由Filecoin和Arweave自身把控。
Jackal就是建立在Filecoin之上且专注于提升数据隐私性和安全性的聚合器方案。它提供了一套给已存文件进一步AES-256加密的方案，并通过Cosmos建立PoS共识的L1链来管理和收费，相当于在Filecoin之上又建立了一层私有云存储协议。
同时，Jackal还将通过其Proof-of-Persistence算法来提供3倍的文件拷贝，并在存储价格上进行优化。Redundancy和cost并不是去中心化存储的核心问题，但是数据隐私和安全的提升是Filecoin本身在短时间内较难做到的。4EVERLAND是另一个聚合了Filecoin,Arweave和Dfinity作为底层存储层的云计算平台，主要专注于给dApp提供去中心化存储、计算和网络的核心能力，打造底层去中心化存储层和应用层之间的连接层。
从目前来看，Webhosting和Bucket是其主要的两个产品，hosting在4EVERLAND全球200多个网关加速的情况下可以完成前端托管，而Bucket则是一个聚合gateway。这两个产品都从用户友好性上大幅提升了去中心化存储的实际使用度，并且解决了例如多币种付费、数据面板等细节层面的优化问题。
2）L1存储扩展网络
L1存储扩展网络本质上和现有的Layer2相同，都是提升L1性能和可扩展性的解决方案的总称。而EthStorage则是第一个以存储扩展为核心的Layer2解决方案，主要包括三大类的功能：ProofofPublication,ExternalDataRetention,AccessProtocol。
ProofofPublication即通过其特制的KZGCommitment和Reed-SolomonCode来实现存储数据的CRUD功能，而Filecoin和Arweave目前只能做到CRD。在增加了Update功能以后，再结合AccessProtocol这样的可直接渲染以太坊合约上面托管的资源的Web3URL功能，就可以轻松实现例如Web3Email、Web3Blog、Web3Drive等链上活动，这些尝试都有助于未来的Web3大规模应用。
另一方面，由于其EVM兼容和链上存储的特性，相比Filecoin和Arweave来说交互路径更短，所以可组合性也更高。举例来说，EthStorage可以将NFT的元数据链上存储在EVM环境中，并可通过智能合约完成NFT组合等需要可编程性才可以实现的新玩法，改善用户体验，而链上数据的可编程性在未来也会衍生出更多的新Defi、Gamefi、Socialfi应用。目前来看，L1存储扩展网络和DSN网络是互补且竞争的，要在EVM生态中生存并且将其存储范式演化成官方标准，需要时间来验证。
未来发展的可能性
总的来说，Filecoin和Arweave发展至今已经成为了去中心化存储的代表性项目，也代表着去中心化存储的0到1过程基本完成。在发展理念上，将非链上核心数据拆分到存储层已经成为了以太坊扩容的主要手段。
与此同时，存储聚合网络和L1扩展网络作为补充和延展，可以更高效、低成本的满足用户的具体需求，而基础的DSN网络还有很多需要解决的问题：生态应用偏少、存储与计算分离、Web2onboarding较难等问题都阻碍了DSN迈向下一波增长。在未来，本文判断以下几种类型的项目有可能成为下一波增长的引擎：
1.DSN聚合器：建立在不同/相同DSN网络上的聚合入口，并提供费用最优化的选择、统一代币支付、数据可用/调用服务等提升用户友好性的工具。类似项目：Lighthouse,4EVERLAND2.链下计算：虽然Filecoin已经在链上的去中心化计算布局，但纯粹的链上计算并不能满足更复杂的计算要求。结合链上数据和链下计算的综合性解决方案可可以通过完成更复杂的计算来提升数据的使用价值，扩展用例。类似项目：KwilDB,Tableland3.L1存储扩展网络：L1存储和算力扩展的优势是可以直接与L1生态产生深度连接，即使满足类似social、gaming这样数据存储需求较大的项目，同时还可以在获得官方认可后快速大规模实现integration。类似项目：EthStorage4.第三方数据安全网络：对现有的DSN中存储的数据进行安全保护，对存储节点进行审查、备份和阻挡黑客攻击，提供相关赔偿保险方案。类似项目：Jackal
参考文献：https://cointelegraph.com/news/3-cloud-providers-accounting-for-over-two-thirds-of-ethereum-nodes-datahttps://ethereum.org/en/developers/docs/storage/https://6pjecoitbb3mbacc67rvmct3gbugplnty5ptok4rgunlo24tvq.arweave.net/89JBORMIdsCAQvfjVgp7MGhnrbPHXzcrk_TUat2uTrAhttps://filecoin.io/blog/posts/the-filecoin-masterplan/https://arweave.news/arweave-2-6-major-upgrade-more-data-less-energy/
郑重声明： 本文版权归原作者所有， 转载文章仅为传播更多信息之目的， 如作者信息标记有误， 请第一时间联系我们修改或删除， 多谢。