标签:#分散式檔案系統

共 16 篇文章

Solid (网络去中心化项目)

Solid(缩写自Social Linked Data,意为社交互联数据)是由万维网发明者蒂姆·伯纳斯-李(Tim Berners-Lee)领导的网络去中心化项目,由麻省理工学院(MIT)运行。该项目为需要链接数据的应用程序开发了一个分布式网络平台,这个平台完全由用户控制,而不是由其他组织或个人控制。它“旨在从根本上改变网络应用程序的工作方式,从而实现让每个人拥有真正的数据所有权,并且改善隐私状况”。 历史 在伯纳斯-李于1989年发明…

GlusterFS

Gluster是一个可水平拓展的网络文件系统。它是各种不同的存储服务器之上的组合,这些服务器由以太网或Infiniband RDMA网络互相融汇,最终形成一个大的并行网络文件系统。它有包括云计算在内的多重应用,诸如:生物信息学,流媒体、文档存储和CDN等。Gluster是由GNU托管的自由软件,许可证是AGPL。Gluster公司,是Gluster的首要商业赞助商,且提供商业产品以及基于Gluster的解决方案。 设计 Gluster是…

分散式檔案系統 (Microsoft)

分散式檔案系統(,縮寫為DFS),一種由微軟公司開發的分散式檔案系統,使用於Microsoft Windows伺服器。它是一套客戶端與伺服器端的軟體,可以將散布在不同機器上的SMB檔案連結在一起。它也被稱為MS-DFS,或MSDFS,但是與DCE分散式檔案系統(DCE/DFS)是無關的。

Alluxio

Alluxio是一个开源的虚拟分布式文件系统(VDFS)。 Alluxio最初起源于一个叫Tachyon的研究项目,它是加州大学伯克利分校AMPLab实验室由师从Scott Shenker教授和Ion Stoica教授的李浩源博士的博士论文课题。Alluxio位于大数据栈中的计算和存储之间。它为计算框架提供了数据抽象层,使得应用能够通过一个共同的接口连接底层不同的存储系统。这个软件是以Apache License的开源协议进行发布的。 …

Rclone

{{Infobox software | name = Rclone | logo = Rclone wide logo.svg | screenshot = File:Screenshot using rclone ncdu.png | caption = | collapsible = | author = Nick Craig-Wood | developer = Nick Craig-Wood | released = | di…

星际文件系统

星际文件系统(,缩写)是從2014年開始發展的开放源代码项目,目的是实现文件分布式存储、共享和持久化的网络传输协议,它是一种的对等超媒体分发协议,在IPFS网络中的节点构成一个集群文件系统。 历史 在2014年,IPFS协议是类似于比特币区塊链的网络基础设施,有着存储不可更改的数据的优势,可以移除网络上的冗余文件,获取存储节点的地址信息——以搜索网络中的文件。 目前的实现采用Go和JavaScript,并有Python实现(上次提交时间…

安德魯檔案系統

安德魯檔案系統(,縮寫為AFS),一種分散式檔案系統,由卡內基美隆大學開發的檔案系統。於1982年開始開發,是安德魯計劃的一部份,為了紀念安德鲁·卡内基與安德鲁·W·梅隆而命名,用於分布式计算之中。AFS系統仍然屬於IBM公司,OpenAFS、Arla與Coda是它的開放原始碼版本與分支版本。 歷史 安德魯檔案系統最早是為了學術研究而開發,作為研究及校園內使用。 1987年,卡內基梅隆大學由AFS-2中,分支出Coda,主要是使用於筆記…

Lustre

Lustre,一種-{zh-tw:平行;zh-cn:并行}-分散式檔案系統,通常用于大型計算機叢集和超級電腦。Lustre是源自Linux和Cluster的混成词。最早在1999年,由皮特·布拉姆()建立的叢集檔案系統公司()開始研發,於2003年釋出 Lustre 1.0。採用GNU GPLv2開源碼授權。 历史 Lustre文件系统架构是Peter Braam1999年开始的一个研究项目,皮特当时在卡内基梅隆大学担任教职。2001年…

分散式檔案系統

相對於本機端的檔案系統而言,分散式檔案系統(, DFS),或是網路檔案系統(),是一種允許檔案透過網路在多台主機上分享的檔案系統,可讓多機器上的多使用者分享檔案和儲存空間。 在這樣的檔案系統中,客戶端並非直接存取底層的資料儲存區塊,而是透過網路,以特定的通訊協定和伺服器溝通。藉由通訊協定的設計,可以讓客戶端和伺服器端都能根據存取控制清單或是授權,來限制對於檔案系統的存取。 相對地,在一個分享的磁碟檔案系統中,所有節點對資料儲存區塊都有相…

DCE分散式檔案系統

DCE分散式檔案系統(,縮寫為DCE/DFS),一種分散式檔案系統,使用於分散式運算環境(DCE)中。它的核心是一套遠端檔案存取的網路協定,基於Transarc公司開發的安德魯檔案系統第三版(AFS-3)網路協定發展而成,它最早起源於卡內基梅隆大學開發的安德魯檔案系統。2000年時,IBM公司公布OpenAFS時,也對外公開釋出這個協定的文件。但在2005年之後,IBM公司已經不再繼續維護這套標準,轉而開發先進分散式檔案系統(Advan…

MapR

MapR是一所美国企业管理软件公司、全球三大Hadoop开源大数据软件的提供商之一,总部位于美国加州圣何塞市,主要参与大数据的安全优化与开发、销售Apache Hadoop的衍生软件。MapR和Apache Hadoop一起参加过HBase、Apache Hive、Apache ZooKeeper等项目的研发。MAPR曾被亚马逊云服务选择为亚马逊弹性云EC2的升级版本。MapR称,目前为止该公司的付费认证客户总数已达500家。 MapR…

Apache Hadoop

Apache Hadoop是一款支持數據密集型分佈式應用程序并以Apache 2.0許可協議發佈的開源軟體框架,有助于使用许多计算机组成的网络来解决数据、计算密集型的问题。基于MapReduce计算模型,它为大数据的分布式存储与处理提供了一个软件框架。所有的Hadoop模块都有一个基本假设,即硬件故障是常见情况,应该由框架自动处理。 Apache Hadoop的核心模块分为存储和计算模块,前者被称为Hadoop分布式文件系统(HDFS)…

Coda

Coda是Constant Data Availability的縮寫,是一套由卡內基美隆大學於1987年開始發展,由Mahadev Satyanarayanan主導研究的分散式檔案系統。本系統的前身由安德魯檔案系統(AFS-2)的舊版本分支出來,兩者提供很多相似的特性。InterMezzo檔案系統亦受到Coda的影響。本系統目前仍持續發展中,但從其官方網站的問題紀錄顯示,自2011年2月已再沒有開發紀錄。雖然有說系統現時已轉往商業應用,…

亚马逊弹性文件系统

亚马逊弹性文件系统 (Amazon Elastic File System,Amazon EFS) 是亚马逊云计算服务提供的一种云存储,旨在提供可扩展性、弹性、有一些限制和加密的文件存储,供亚马逊云计算服务和企业内部使用。Amazon EFS支持网络文件系统(NFS) 版本 4.0和4.1 (NFSv4) 协议并通过可移植操作系统接口 ( POSIX ) 权限控制用戶对文件的访问。 参考文献

OpenAFS

OpenAFS,一種分散式檔案系統,為安德魯檔案系統(AFS)的開放原始碼版本,由AFS 3.6版分支出來。AFS最早源自卡內基梅隆大學,由Transarc公司將它開發成商業產品。IBM併購Transarc公司之後,取得這套軟體,於2000年8月15日,在 LinuxWorld雜誌上,IBM宣布以(IBM Public License)釋出AFS 3.6版軟體與相關文件,這個版本隨後發展成為OpenAFS。但是AFS仍然屬於IBM公司,…

Arla

Arla,一種分散式檔案系統,是安德魯檔案系統的開放原始碼分支,由瑞典皇家工學院於1993年開發,但是還未到實用程度就停止。至1997年,這個計劃才又重新啟動。 歷史 1993年,Björn Grönvall在皇家工學院開始這個計劃,Assar Westerlund與Johan Danielsson隨後加入。但這個計劃在開發到實用程度之前,就被中止了。 1997年秋天,這個計劃重新開始了,但仍未開發到穩定階段。目前在OpenBSD、Fr…