问题已关闭
与已有问题相似
问题已重定向至
金山快盘，微云，百度云，360网盘， 等云储存巨大储存空间，它们的原理究竟是什么？
如标题，从最早QQ网盘到现在的云，从20M网络硬盘到现在360无限空间。请问各位，所谓的云储存，把无限空间开放给用户，到底是通过什么原理来实现的？
按投票排序
以下转自搜狐社区，同样疑惑，看到了便贴过来： 多谢提醒，知乎上面也有这个回答，谁是原创懒得深究，索性一并发上来吧：
之前国内各家大公司之间的网盘大战吵的沸沸扬扬，很多同学都在自己的博客上说今天领取了XXXT容量，1元XXXX，免费升级到XXT之类的，鸡冻你没发现dropbox这种网盘鼻祖却始终提供那么点容量，你们就没有想到过为什么么？我只想说，图样图森破啊~事实是这样的~我想要为每个用户提供 1G 的网络存储空间。如果服务器上有一颗 1000G 的硬盘可以全部为用户提供数据储存，如果每个用户分配 1G 的最大储存空间，那么能非配给多少个用户使用呢？你一定说是 0 个用户。但事实上你这么分配了，你会发现每个用户平时根本不会上传 1G 的东西将容量占的漫漫的，有多又少，但平均用户平时只上传 50M 的文件，也就是说，你将 1000G 的硬盘分给 1000个 人使用，但只有效利用了其中的 50M*1000=50G 的空间，剩余 950G 的空间基本都完全浪费了。那么怎么解决呢？你可以变通一下，将这 1000G 的空间分配给 20000个 用户使用，每个人的上传上限容量还是 1G，但每人平时还是平均上传 50M 的数据，那么 00G，这下子就把宝贵的服务器上的存储空间充分利用了。但你又怕这样分配给 20000个 人后，万一某一刻人们突然多上传点数据，那么用户不是就觉察出来你分给人家的 1G 空间是假的了吗？所以可以不分配那么多人，只分配给 19000 人，剩下一些空间做应急之用。突然发现一下子将可分配的用户数量翻了 19倍啊，了不起。那还有买有办法更加有效的利用一下呢？如果我有 1000个 以上的服务器，一个服务器上有 1000G 空间，那么我们个服务器上都要留下 50G 的空白空间以备用户突然上传大数据时导致数据塞满的情况，呢么我这 1000个服务器上就空出了 1000台*50G=50000G 的空间被浪费了，所么可惜。所以我们发明了计存储集群，使得一个用户的数据可以被分配在多个服务器上存储，但在用户那看起来只是一个 1G 的连续空间，那么就没必要在每个服务器上预留出应急的空间了，甚至可以充分的将前一个服务器塞满后，在将数据往下一个服务器中塞。这样保证了服务器空间的最大利用，如果某一刻管理员发现用户都在疯狂上传数据（在一个大规模用户群下，这样的概率少之又少）导致我现有提供的空间不够了，没关系，只需要随手加几块硬盘或者服务器就解决了。好吧，这下子我们的服务器空间利用高多了，可以将一定量的空间分配给最多的用户使用了。但有没有更好的改进方案呢？管理员有一天发现，即使每个用户平局下来只存储 50M 的东西，但这 50M 也不是一蹴而就的，是随着1-2年的使用慢慢的达到这个数量的，也就是说，一个新的用户刚刚注册我的网络空间时，不会上传东西，或者只上传一点非常小的东西。那么我为每一个用户都初始分配了 50M 的空间，即使将来2年后他们会填满这 50M ，但这期间的这空间就有很多时浪费的啊。所以聪明的工程师说：既然我们可以分布式、集群式存储，一个用户的数据可以分布在多个服务器上，那么我们就假设一开始就给一个新注册的用户提供 0M 的空间，将来他用多少，我就给他提供多少存储空间，这样就彻底的保证硬盘的利用了。但用户的前端还是要显示 1G 的。工程师的这个点子，使得我在建立网盘初期能用 1台 1000G 的服务器提供了大约 1000000 人来注册和使用，随着注册的人多了，我也有钱了，也可以不断增加服务器以提供他们后期的存贮了。同时因为一部分服务器完了一年多购买，我的购买成本也下来了。那么...这结束了吗？若是邮箱提供商的话，这样的利用率够高了。但网盘就不一样了。聪明的工程师发现：不同于邮箱，大家的内容的附件绝大多数都是自创的和不同的。但网盘上大家上传的东西很多都是重复的。比如：张三 今天下载了一部《TOKYO HOT》上传上传到了自己的网盘上，李四在三天后也下载了一模一样的《TOKYO HOT》上传到了网络硬盘上，随着用户的增多，你会发现总计有 1000个人 上传了 1000份 一模一样的文件到你宝贵的服务器空间上，所以工程师想出一个办法，既然是一样的文件，我就只存一份不久好啦，然后在用户的前端显示是没人都有一份不久行啦。当某些用户要删除这个文件的时候，我并不真的删除，只需要在前端显示似乎删除了，但后端一直保留着以供其他拥有此文件的用户下载。直到所有使用此文件的用户都删除了这个文件我再真的将其删除吧。这样子随着存储的数据越来越多，注册的用户越来越多，其上传的重复数据越来越多。你发现这样的检测重复文件存储的效率越来越大。这样算下来似乎每个人上传的不重复的文件只能平均 1M/用户。这下子你可以提供超过 50倍 的用户使用您这有限的空间了。但伴随这使用，你又发现一个规律：张三上传的《TOKYO HOT N0124》和李四上传的《TH n124》是同一个文件，只不过文件名不一样，难道我就不能识别出他们是一个文件，然后只将其分别给不同的用户保存成不同的文件名不久行啦？确实可行，但这要利用一些识别文件相同性的算法，例如 MD5 值等。只要两个文件的 MD5 值一样，文件大小一样，我就认为它们是相同的文件，只需要保存一份文件并给不同的用户记作不同的文件名就好了。有一天你发现，因为每一个文件都需要计算 MD5 值，导致 CPU 负荷很大，而且本来一样的文件非要浪费带宽上传回来才可以检测一致性，能改进一下吗？聪明的工程师写了个小软件/.小插件，美其名曰“上传控件”，将计算 MD5 的工作利用这个软件交给了上传用户的点老来完成，一旦计算出用户要上传的数据和服务器上已经存储的某个数据是一样的，就干脆不用上传了，直接在用户那里标记上这个文件已经按照 XX 文件名上传成功了。这个过程几乎是瞬间搞定了，并给其起了个高富帅的名字“秒传”！通过以上这么多步骤，你发现本来你只能给 1000用户 提供网络空间的，这么多改进办法后，在用户端显示 1G 空间不变的情况下，近乎可以为 1000000个用户 提供网络空间了。这样若是您哪天心情好，对外宣传说：我要将每个用户的存储空间上限提升到 1TB。那么每个用户平均还是只上传 50M 数据，只有极个别极个别的用户上传了突破 1G 原始空间的数据，你会发现所付出的成本近乎是微乎其微的。辛勤的工程师还在为如何更有效率的利用服务器提供的磁盘空间在不屑努力和挖掘着......
没想到还有人不懂。 不过我还是乐意解答。我是这样认为的（百度云获得2TB存储空间后，首次极速秒传后）：极速秒传的原理：你上传一部电影，2秒钟就好了，你不解，尼玛为什么这么快啊？你们知道MD5值吧？MD5值就是一个文件的编码，不同文件的编码一定不相同，就像这样一串：a524hlad，这乱七八糟的一堆就是了。校验MD5值的快慢与文件大小有关系，越大的文件效验得越慢，越小的文件效验得越快。你传的电影别人也上传过？工程师：尼玛这不就重复了么！服务器很贵的啊卧槽。。工程师恼羞成怒，立马开发出了一种能通过一个地址来把文件分配给不同的用户。通过MD5值来区分文件，如果你上传的文件MD5值与服务器当中的一个相同，那么服务器就把这个地址连接到到你的账户当中。这个问题就迎刃而解了。
跟银行一样，银行其实是 没多少钱的。。。。
这里我们就不考虑压缩吧。就一点，空间复用。你用了的才实际占了物理空间，你没用的部分嘛，就是个数字而已。而你用的那部分嘛，很多又是跟别人重叠的，一部大电影，你的网盘有，他的网盘也有，物理上只要一份的空间加上一些辅助索引就行了。网盘里，用的人越多，重复文件的概率就会越高。至于私人特别的文件，就大部分用户网络的上传速度，你能传多少大文件。去体会下网盘里的离线下载上传的秒杀，你就能明白为什么了。115网盘表示，你在说谁的空间巨大？
这个就跟存款创造一样，基础货币只有一点点，但是整个货币供给却很多
明白…秒传…你就知道原理了了
很简单，这和国人的使用方式有关。国人使用网盘存储大型文件的时候，多半不是独一无二的内容（我这样的除外）。这样可以将每一个文件的hash记录下来，以后如果有人上传hash相同的文件，就不进行存储而只是将原有的文件的引用次数+1。这样不仅节约存储空间，也便于进行管理，对于非法文件，只要将其母文件删除即可。
已有帐号？
无法登录？
社交帐号登录网盘搜索,就上盘搜搜 - 最好用的百度云搜索引擎最好是跟其他网盘合并，不然对用户影响太大了！
360用户多，而且360有实力，你可以放心使用
已有帐号？
无法登录？
社交帐号登录小伙伴们惊呆了，金山快盘、360云盘、百度云网盘空间大赠送活动 - 爱控客
小伙伴们惊呆了，金山快盘、360云盘、百度云网盘空间大赠送活动
&>>&&>>&小伙伴们惊呆了，金山快盘、360云盘、百度云网盘空间大赠送活动
0 次，平均分
不看不知道，一看吓一跳。今年国内云计算开始大爆发了，而云存储也是有了很大的变化，从以前的小空间单一存储，到数据分享，到离线，再到在线播放等等功能不断丰富，这对于用户来说确实是好事。现在网盘不止要拼功能，还要拼容量。此次容量比拼应该是由百度率先发起的。
接着金山快盘出场了，直接推出了100G永久的，这确实是抢了不少百度云的风头，毕竟快盘是不用花钱的，而且赠送的是永久空间，不是百度那样有时限的。虽然快盘推出的时间是比较久了，不过在功能上却差了些，而且金山的魄力注定了会在这次大乱斗中杯具。
这时候360云盘登场，直接秒杀了金山的活动，先是免费赠送360G空间，取消流量限制，接着是360卫士活动推广赠送32G，最后是360搜索推广赠送36G空间，总共赠送了440G，360云盘的功能不错，具有离线下载及文件保险箱功能。
紧接着百度云发了一个大招，免费送100G+360G，1块钱购买564G，合起来是1T空间，这让以前都是做有时限空间低价活动的百度云得分不少。
至于后面还有没有更多的活动？我们只能等着看了。
金山快盘活动：
永久免费100G：
关注并绑定快盘微信 送50G空间（取消关注会收回），下载并使用快盘移动客户端 送50G空间。
360云盘活动：
永久免费360G：
只要使用360云盘PC客户端，就能立即领取100G永久免费空间；只要使用版（Android）或版（iphone）的360云盘，就能立即领取260G永久免费空间。
360手机卫士推广：
360搜索推广：
360云盘推广：（邀请注册，共1024G）
百度云活动：
1024G活动：登录百度云电脑客户端，就能立即领取100G永久使用容量；登录百度云移动端，就能立即领取360G永久使用容量；支付1元，就能获得564G永久使用容量。
大家加油领取，机不可失时不再来！！！！！！！！！！！！
除特别注明外，本站所有文章均为原创，转载请注明出处来自
万能淫才！！！
71040 积分100 积分100 积分100 积分100 积分
扫一扫二维码分享