ipfs分布式存储服务器原理_ipfs分布式文件系统

hacker|
85

文章目录:

为什么需要IPFS分布式存储?

想知道为什么我们需要IPFS,可以先看看目前HTTP有何缺陷。

IPFS和HTTP之间的区别

安全性:HTTP属于中心化的,所有流量直接搭载在中心化的服务器上,承载的压力极大,容易造成系统崩溃,HTTP还容易遭受DDOS攻击;IPFS的存储方式是去中心化的分片的分布式存储,黑客无法攻击,文件不易丢失,安全有保障。

效率:HTTP依赖中心化服务网络,服务器容易被关闭,服务器上文件也容易被删除,服务器需要24小时开机;IPFS采用P2P网络拓扑,全网域的计算机都可以成为存储节点,就近分布式存储大大提高了网络效率。

成本:HTTP中心化服务器运行,需要较高的维护运行成本,中心化数据库一旦遭受DDOS攻击,或遭受不可抗力损害,所有数据将全部丢失;IPFS极大的降低服务器存储成本,也降低了服务器的带宽成本。

HTTP的客户网络访问绝大部分不是本地化的,有网络延迟,IPFS可以极大的加快网络访问速度,网络访问本地化,体验感会明显提升。

为什么我们需要IPFS?

想知道为什么我们需要IPFS,可以先看看目前HTTP有何缺陷。

IPFS和HTTP之间的区别

安全性:HTTP属于中心化的,所有流量直接搭载在中心化的服务器上,承载的压力极大,容易造成系统崩溃,HTTP还容易遭受DDOS攻击;IPFS的存储方式是去中心化的分片的分布式存储,黑客无法攻击,文件不易丢失,安全有保障。

效率:HTTP依赖中心化服务网络,服务器容易被关闭,服务器上文件也容易被删除,服务器需要24小时开机;IPFS采用P2P网络拓扑,全网域的计算机都可以成为存储节点,就近分布式存储大大提高了网络效率。

成本:HTTP中心化服务器运行,需要较高的维护运行成本,中心化数据库一旦遭受DDOS攻击,或遭受不可抗力损害,所有数据将全部丢失;IPFS极大的降低服务器存储成本,也降低了服务器的带宽成本。

HTTP的客户网络访问绝大部分不是本地化的,有网络延迟,IPFS可以极大的加快网络访问速度,网络访问本地化,体验感会明显提升。

什么是IPFS?

IPFS(InterPlanetary File System,星际文件系统),它是一种全新的超媒体文本传输协议,可以把它理解为一种支持分布式存储的网站。IPFS 诞生于2015年、2017年8月,IPFS 的激励层filecoin,公开众筹在很短时间内,就募集了超过2.57亿美金,相当于接近20个亿人民币的投资!所以它引起了全世界投资人的高度关注!与此同时它打破纪录,创造了当年全球ICO的奇迹,当之无愧的成为了一个全球瞩目堪比当年以太坊的明星项目!

相对应的就是现在大家所熟悉的以 http 开头的中心化存储网站。这跟我们平时使用的百度云,阿里云这些网站有什么不一样呢?各位不妨思考一下,你存储在U盘,网盘上的这些数据 是绝对的安全吗?答案是否定的!它会丢失,甚至会被和谐掉,对吗?比如从前的金山网盘,360网盘,官方通道已经关闭了,文件需要大量的转移,时间精力都浪费了,另外像百度网盘,免费用户使用的空间也是有限的,如果你想增加储存容量就必须得充值,而且安全性也是有待考究的。

而 IPFS 的网络存储文件,使用的是去中心化分片加密存储技术,把文件分割成了多个片段,存储在网络的各个节点上,而这些节点就是我们使用的电脑,当你下载文件的时候,或者想

要打开文件的时候,IPFS 网络会自动把文件还原,给你使用、供你下载,可以防止某个人或者某个机构控制你的数据,也可以防止被黑客攻击,这样就可以保护我们的存储数据,不会被随意篡改、删除了!此外,使用IPFS 网络进行文件存储、文件下载,在速度方面 可是相当的快!IPFS 最大的神奇之处呢,是彻底告别了传统的HTTP协议常见的卡顿和404错误。

互联网的发展一共经历的三个阶段:

所谓的Web1.0,就是互联网的早期形态。

提出年代:20世纪90年代中期

特征表现:国内以搜狐、网易、新浪、腾讯为代表的一批门户型网站诞生,人们对新闻信息的获取是其利用网络的主要驱动力,巨大的点击流量诞生了新的商业模式。

由网站的运营者生产内容。那时候的网站几乎不记录用户数据。这使得想在网上进行复杂的活动几乎不可能。因为你不知道谁来过,看得啥,做了什么。

随着微博,微信的崛起,我们进入了现在所处的Web2.0时代。

提出年代:21世纪初期

特征表现:BBS、博客、RSS(聚合内容)兴起与繁荣。人的重要性与参与性上升,用户既是互联网内容的浏览者,也是制造者。

在这个时代,每个人都是内容的生产者。如果说Web1.0时代给了我们一个绚丽的画廊,我们只是过客。只能被动的观看画廊中布置的作品。

那么进入Web2.0时代,我们迎来了一个可以自由创新的共享空间。在这里我们即欣赏他人创作,可共享我们的创意。但这个空间的主人并不是我们。比如有一天你不用微信了,那么你在上面的所有信息也就没有了。换句话说,在Web2.0时代,你的网络身份不属于你自己。而是属于这些科技巨头。我们有没有可能主宰自己的数据呢?

有!这就是Web3.0

提出年代:2010年左右

特征表现:网络模式实现不同终端的兼容,从PC互联网到WAP手机,移动互联让普通人群的参与方式呈现更多的可能。基于物联技术的飞跃,跨平台支付、大数据经济等发力迅猛。

Web3.0的提法来自区块链,以太坊的联合创始人Gavin Wood博士。第一个提出了Web3.0的概念在这个网络中一切都是去中心化。

没有服务器,没有中心化机构。更没有权威或垄断组织掌控信息流。而要构造这个一个庞大的Web3.0,信息存储和文件传输的去中心化就是核心之一。

人类社会自进入互联网时代以来,信息爆发式增长,过去两年,新产生的数据占据了人类文明的90%,传统的硬盘级别磁盘列阵存储方式。也渐渐被在最新的云存储技术所替代。云存储就是把存储资源放到云上,然后供人存取。各种不同类型的存储设备通过应用软件集合起来协同工作,保证数据的安全性并节约了存储空间。使用者可以在任何时间任何地点通过任何可联网的装置,使用云上数据。

云存储同时也带来了很多隐患,最大的就是数据存储安全方面的问题。分为以下四类。

第一类:最常见的就是服务器被攻击,数据被盗取的风险。

第二类:属于操作失误或运作流程的缺陷比如腾讯云因为操作失误,导致创业公司,前言数控技术。存在在上面价值上千万的核心数据全部丢失,导致该公司直接停业。

第三类:属于服务器自身故障,导致数据丢失或错误。比如亚马逊云。2019年8月,币安在使用过程中由于出现故障,导致比特币交易价格由正常的接近一万美元变为0.32美元 造成巨大损失

第四类:如果服务商,因为亏损或者政策等原因停止运营,那用户的数据像何处迁移。数据安全由谁负责,这些都是云存储服务提供商所面临的困境。再说说中心化文件传输方案所面临的问题。主要是文件获取效率低下。有两种情况:1,当我们浏览或者下载一部高清电影。那么这台计算机服务器的响应速度和他 网络通信环境就限制了我们浏览和下载文件的速度。第二张我们要获取的这个文件。可能存储在地球的另一端的服务器上,在这种情况下。获取文件的速度也会低下。面对传统互联网安全性能查和效率低下的问题。有没有更好的解决办法呢?有,这就是基于点对点网络的去中心化文件存储及传输协议IPFS。

IPFS,全称是星际文件系统(interplanetary file eystem)由毕业于斯坦福大学的创始人Juan Benet(胡安,贝内特)和他的团队创办。IPFS协议,主要从数据存储和文件传输。两个方面做了架构性的革新。比如大卫要在IFPS系统中保存一段视频,系统会把文件打碎成若干个大小一样的碎片。然后对每个碎片进行哈希运算得到一个数值,称为哈希值,然后再将所有这些碎片的哈希值及相关数据一起整理并在此进行哈希运算。得到一个最终的哈希值。然后被传输到IPFS系统中。很有可能你的文件中一部分碎片就存储在你邻居家的硬盘中。可是他既不知道这些碎片的内容是什么,也不知道替谁存储了文件,只要没有该文件对应的哈希值任何个人和机构就无法查看你的文件内容,这样我们就不用担心自己我数据被人利用。文件的碎片会被备份多次保留在IPFS系统中的多个节点上。这样即使黑客能攻击其中的个别节点。或者发生区域性的自然灾害,甚至类似911的这种。其他节点依然能保持文件的完整性,在文件传输方面。当我们使用IPFS访问或者下载文件时。我们像系统提交的是改文件的哈希值,因此,只要文件存在于整个IPFS系统中。系统就能帮我们通过最近的网络距离找出这个内容。

这样的处理方式,至少在两个方面都比传统互联网有优势,在搜索方面。HTTP是根据地质寻找内容,比如在没有电话,电报的年代。张三的朋友李四住在北京东城区灯草胡同730号。如果张三要从杭州去找李四就得根据这个地址千里走单骑,结果好不容易到了地方。发现房子还在可是李四已经搬走了。这就是我们传统互联网搜索内容经常会碰到的问题。而在IPFS中,文件是按照内容进行搜索的。甭管李四在世界的哪个角落,我都可以通过各种通信设备找到他,而不再是通过古老的地址检索,在效率方面。比如张三要下载一份视频资料,一共10GB大小,如果这份资料存储在地球另一端某个服务器上。那得经过若干路由从遥远的服务器中,像蚂蚁搬家那样一点点的下载。就好比一艘货轮拉了满仓货物通过海洋慢慢的给运过来。而在IPFS中,系统会从离我们网络距离若干节点,同时向我们传输这个文件的碎片。由于每个碎片只有256KB大小,所以速度将快的惊人。因此无论从传输距离还是从传输容量上。IPFS都大大优于HTTP协议。尽管IPFS有大大了优点,但同时也有缺陷。比如在隐私的保护方面。

由于在IPFS中,文件的检索是根据文件内容的哈希值来进行的,因此这个哈希值如果泄露给第三方。那么第三方就可以毫无门槛的下载这个文件,对此有没有解决办法呢?

有!那就是用户把文件上传到IPFS之前,先对他进行加密。将即使第三方下载了这个文件,他也看不到原始内容。

因此在Web3.0即将开启的时代,IPFS在数据确权,存储安全文件封发及传输效率方面都比Web2.0大大的迈进了一步,新生的IPFS虽然还不尽完善,但这并不影响他的贡献和价值。1991年,蒂姆 博纳斯 李发明的HTTP协议搭建了互联网世界的高速公路,从此我们对信息的传递可以在一瞬间抵达世界的各个角落。30年后,胡安 贝内特和他的团队创建了IPFS协议将重塑这个新世界的数据航道,让人类信息得以永存!正是因为有这样的一群人,推进着科技文明的进步。才得以让我们对未来的探索,有了更多的可能。然而如此宏大的系统要实现稳健运行,就得需要充足的燃料来维持,IPFS要想在完整的应用生态中发挥作用,还需要激励机制和一套完整的运行系统。

为此Filecoin应运而生。

ipfs矿机工作原理是什么?

IPFS Filecoin的矿工分为两种:储存和检索矿工,因为检索矿工对网络要求非常高。而一般像散户可以参与的就是储存矿工,储存矿工说白了就是出租储存空间。

IPFS矿机与其说是挖矿,不如是说收取租金。为什么这么说?如果有用户有储存需求,那么矿工就会出租自己矿机内存作为储存空间,而用户会支付Filecoin作为酬劳给矿工。

工作原理简单的说:用户的储存需求相当于滴滴快单,而矿工做的就是抢单,距离越近的越优先。那哪里的用户最扎堆,肯定是北上广,所以离北上广的矿工有天然优势。

相比较传统矿机,像星际奥云这样的IPFS矿机是有优势。它不需要大量运算,也没有噪音,耗电也少,几乎完美。甚至出租存储空间有一点共享经济的意思,而且也要求矿工有更好的网速和硬盘,公平竞争,对整个生态的发展有良好的向上作用。

如果后续考虑挖 Filecoin可以选择算力方舟,这是一个非常不错的选择。

3条大神的评论

  • avatar
    访客 2022-07-09 下午 01:59:24

    不用担心自己我数据被人利用。文件的碎片会被备份多次保留在IPFS系统中的多个节点上。这样即使黑客能攻击其中的个别节点。或者发生区域性的自然灾害,甚至类似911的这种。其他节点依然能保持文件的完整性,在文件传输方面。当我们使用IPFS访问或者下载文件时

  • avatar
    访客 2022-07-09 上午 11:20:23

    是绝对的安全吗?答案是否定的!它会丢失,甚至会被和谐掉,对吗?比如从前的金山网盘,360网盘,官方通道已经关闭了,文件需要大量的转移,时间精力都浪费了,另外像百度网盘,免费用户使用的空间也是有限的,如果你想增加储存容量就必

  • avatar
    访客 2022-07-09 上午 11:40:37

    通信设备找到他,而不再是通过古老的地址检索,在效率方面。比如张三要下载一份视频资料,一共10GB大小,如果这份资料存储在地球另一端某个服务器上。那得经过若干路由从遥远的服务器中,像蚂蚁搬家那样一点点

发表评论