声明:本文旨在传递更多市场信息,不构成任何投资建议。文章仅代表作者观点,不代表火星财经官方立场。
边肖:记得要集中注意力。
来源:桑榆说区块链
2020年6月9日,IPFS/Filecoin正式发表了一篇关于Filecoin协议特有功能——大规模数据离线数据传输的博客。
具体原文如下:
Filecoin旨在存储世界上最有价值的信息。在全球范围内,我们每天生成2.5亿字节的数据。虽然这些数据中有很多并不需要永久存储,但其中一些却涵盖了人类在科学、数学、艺术、历史和人文等领域创造的最重要的信息。
Filecoin是一个位于区块链的买卖分散存储的市场。区块链机制提供安全存储保障,加密货币机制创造动态市场。
正如我们在cryptoeconomics construction的博文中所讨论的那样,有时当你在处理大量数据时,为了安全起见,通过互联网传输这些文件是很困难的(既昂贵又耗时)。对于Pb级的数据集和更大的数据集,最明智的解决方案通常是在硬盘上传输数据。Filecoin协议和项目有工具和结构来支持所谓的离线数据传输。
什么时候考虑离线数据传输?
在决定是在线还是离线传输数据时,需要考虑的两个因素是成本和时间。
成本:考虑像网络这样的存储程序,因为数据的高速公路从一个地方移动到另一个地方。这种锻炼很快就会变得非常昂贵。想象一个巨大的信息档案库,比如博物馆或图书馆,想要在分散式Web(dweb)上上传、存储和保护其藏品。要做到这一点,组织可以通过互联网或使用物理设备传输数据。
使用互联网流式传输数据可以快速确定传输成本。在现在的云服务中,PB级数据的传输需要经过多个区域发送数据,会产生互联费和区域带宽费,如果选择租用专线或者考虑需要重试,还会产生额外的费用。从粗略的成本来看,仅用带宽传输2.5 PB的数据就要花费14万美元左右——如果数据跨区域移动,成本会更高。
这些费用可能会增加档案馆、博物馆和其他非营利组织的开支。现代艺术博物馆的藏品超过90万亿字节,预计到2025年将增长到1.2 PB的英文维基百科包含超过600万页的文章和超过360亿个单词。欧洲粒子物理研究所的开放数据门户包含超过1pb的粒子物理实验数据。伦敦自然历史博物馆的数据门户包含近400万件历史标本。国家档案馆的电子档案部门有500 TB的数据。这些都是很有价值的数据。
然后,考虑硬盘驱动器本身的成本——用于存储和传输数据的物理介质。一个8 TB级服务器驱动器的价格约为200美元。例如,要传输2.5 PB的数据,您将需要大约315个硬盘,总计约63,000美元。虽然你可能要付出一些额外的运输、进口费用和货币转换单位成本,但你的成本远远低于通过互联网传输数据的成本!
时间:现在,让我们想象一下,美国国家档案馆想要将其电子记录转移到另一台服务器上。以100 Mbps的速度传输500 TB的数据需要一年多的时间。用硬盘传输同样的数据只需要下载和发送时间——大约一周就能完成!归根结底,很明显,在某些情况下,以物理方式传输数据更经济、更快。
如何使用Filecoin进行离线数据传输?
对于较小的数据传输,当存储客户端希望与挖掘器进行交易时,他们将向挖掘器提出交易,以在“Y”时间段内存储“X”数据。在与客户谈妥交易后,矿工通常开始通过网络从客户向矿工传输数据。
Filecoin的离线数据传输功能使拥有非常大数据集的用户可以离线完成数据传输步骤(例如,通过将硬盘从客户端运输到storage miner),并按照预期的顺序进行交易。它是通过一个告诉客户端不要通过网络传输数据的标志来实现的。取而代之的是,客户传递一个CID(描述数据的唯一标识符),然后挖掘者必须匹配这个CID,交易才能通过。这为客户端节点提供了如何设置事务的灵活性,例如,将硬盘上挖掘者的特定位置发送给挖掘者,供他们用来生成分段CID数据。
Filecoin项目如何支持离线数据传输?
5月7日,我们推出了Filecoin Discover,旨在鼓励早期矿工订购和存储有价值的开源数据的硬盘,作为交换,获得其他Filecoin令牌。这是一种帮助Filecoin成为人类最重要的数据集home并让其他人可以访问它的方式,从而扩展我们的知识库并形成新的想法。矿工可以在Filecoin Discover Store中选择硬盘并签署担保合同,这是一个PB级重要公共数据的目录(并且还在增长!)。然后,矿工将以一定的成本接收驱动器上的数据。为了交换和存储这些数据,矿工们得到了Filecoin。
在商店开业后的第一个24小时内,我们收到了600多个驱动器的订单,这凸显了这个项目的兴奋。
对于Filecoin Discover这样的项目,成功编程的关键是降低硬件成本。4月,Filecoin提出了存储设备(类似于AWS雪球)的提案请求,以实现更快的离线数据传输。
RFP的目标是构建一个冗余且安全的低成本硬盘解决方案。矿工可以在设定的期限内租用这些设备,以保持数据传输。客户端可以在这些设备上加载数据,而矿工在收到数据后可以将数据卸载到自己的服务器上。
离线交易也可以在Discover程序之外进行。考虑一艘海上潜艇,它收集太平洋水下生物的PB级信息。当飞船返回陆地时,邮寄这些硬盘可能比依赖在线数据传输更有意义。随着我们分散网络的努力,大量数据的物理传输将继续在信息传播中发挥重要作用。展望未来,exabytes规模的数据传输(如AWS Snowmobile)是这一进化过程的下一步,用于传输大量数据。
最终,离线数据传输等解决方案将使Filecoin成为传统云存储平台存储数据的更强大的替代方案。数据存储是几乎所有企业每个部门的实际成本。如果存储成本下降,小企业将节省资金——他们可以将这笔钱投资于招聘或研发。
这只是Filecoin network的独特功能如何帮助企业以更高效、更安全、更经济的方式满足其存储需求的一个例子。在接下来的几周内,我们将发布更多强调这些特性的帖子。我们希望您能与我们一起完成这项任务,以分散存储空间并改善对信息的访问。