初期:用户访问量低,只弄了一台服务器,一个tomcat项目运行一个web工程。
中期:用户访问量提高,服务器崩了,为了解决这个问题,购买服务器,增加服务器数量,然后每个服务器中个各放了一份,使用nginx代理转发。(这就是运用集群原理)
后期:用户访问量不断增加,响应速度变慢,服务器又崩了,在不考虑增加服务器带宽、内存和CPU的情况下如何解决这个问题?先解决响应速度变慢,用户频繁调用数据库,在客户端与数据库之间,使用redis缓存。解决之后,又发现问题:由于每台服务器运行一个tomcat,放着一个web工程,用户有可能在商品详情存在大幅度调用数据库,而订单列表调用幅度小,此时就存在着模块之间耦合度高,一个功能升级其他也需要升级,扩展性差,不能灵活部署。是该考虑项目重构,把项目按照模块分为不同的系统(使用zookeeper进行模块之间通信),例如:订单系统,会员系统、搜索系统、商品信息系统。把每个模块进行拆分,用户在哪个系统访问频繁,就针对哪个系统进行对症下药,增加缓存还是使用其他技术。(这样我们就可以单独对这个模块进行服务性能的提升,不用全部都一起提升。也降低了代码的耦合度,模块之间互不影响,即使后期增加开发人员,也可按照敏捷开发思想只对其负责模块进行开发,效率大大提升)。这样一个web工程就拆分成多个web工程(多个tomcat部署)。那这个项目就可以在一台服务器部署多个工程(不同端口进行通信)或者多台服务器运行单个项目。(这就是分布式原理)
总而言之,分布式是以缩短单个任务的执行时间来提升效率的,而集群则是通过提高单位时间内执行的任务数来提升效率。
分布式系统是相较于传统拼接处理器而言,分布式输入和输出节点设备分开布署,通过IP网络互联,分布式布署在软件商集中管控的拼接控制系统。所以相对于集中式而言,分布式系统拥有低成本、高性能、扩容简便等优点。举例世界地图吧。如果网络上的世界地图,全部储存在一个服务器里,那么面对来自全世界庞大的访问量,主机势必宕机。但如果地图信息是存放在世界各地的服务器里,大家通过网络交互去访问,就不会出现这样的问题。而且就算某个区域的服务器宕机,那需要修复的也只是这一台服务器而已。分布式工作的原理和优点就是这样。目前而言,分布式处理器国内做得比较好的,你可以去查查一家叫晨驭科技的。分布式目前经常被用在音视频技术领域,比如大屏拼接啊,投影融合啊,KVM坐席之类的项目里。KVM就是大型可视化坐席协作管理平台,新闻里那些火箭发射指挥中心,用的都是这样一套系统。目前的ipfs、Filecion矿机越来越火热,对于很多人来说,不理解IPFS分布式存储是什么,也不知道Filecion矿机到底是什么意思,那让我们来聊一聊!Ipfs是一个全球性的、P2P点多点分布式存储协议,它可以将所有的相同的文件系统连接起来,传统的互联网协议HTTP主要是搜索域名地址,而ipfs则是搜索内容地址,ipfs的出现超越了http协议,未来的互联网可能会是ipfs趋势。
关于存储:
存储其实就是数据的存储,互联网的发展很迅速,5G时代的到来,无非带来了更多的考验,5G技术、大数据,的人工智能及物联网的到来,它们的运行,时时都是数据, 历史 数据与实时数据的积累,展示庞大的数据,这些数据的储存就成了大问题,原始的储存已经不能满足当下数据的需求,这些数据需要存储和流通。所以,像阿里云在10年前就开始研发数据云,因为马云看到了未来数据存储的量级,这种数据的量级会随着技术的进一步不断增长,目前一些全世界知名的数据云比如亚马逊云、阿里云、华为云、腾讯云等也无法满足世界增长的需求。所以世界,需要更大更好的更有保障的存储云。
储存分有DAS(直接储存)、集中储存、分布式储存三种。
DAS:主要是储存与计算连接,有扩展性、灵活性比较差。集中储存:它的设备类型丰富,主要是通过外部P/FC网络进行互连,具有扩展性;受控制器能力限制,扩展能力有限,属于PB级;设备到生命周期时需要更换,在数据迁移耗时需要耗力。分布式储存:分布式存储主要大规模应用于互联网,它追求扩展性和低成本,在进入传统企业市场后,开始构建了企业级存储能力,分布式存储的扩展性强,比较容易运维,上线快。
分布式储存指代的是一种的独特的系统框架类型,它是由一组通过互联网进行通信、为了完成共同任务而协调工作的计算机节点组成,它的存在是为了解决廉价的、普通机器完成单个计算机无法完成的计算和储存问题。它主要是为了利用更多的机器完成更多的数据计算和存储。简单的来说就像 汽车 拉货,比如 汽车 是机器,货物是数据,以前一个 汽车 运输货物的数量有限,需要换更大的货车,而现在想拉更多的货物就可以直接用火车,拉更多的货就直接加车厢,每个车厢都有动力,就不用担忧拉不动货物。分布式的存储原理就跟这个一样。存储经过几十年的发展,衍生出各种各样的存储产品,满足了企业应用的各种不同需求。在这个数字化的时代,存储的核心必须以客户为本、以数据为核心,倡导数据按需求服务的理念。
ipfs的“分布式存储”有两个非常重要的两个基石:存储和分布式。Ipfs分布式储存的特性主要是永久的、去中心化保存和共享文件 (区块链模式下的存储)。点对点分布式:P2P 点对点地保存着各种各样不同的数据。版本化:可追溯文件进行修改 历史 。内容寻址:通过文件内容生成独立哈希值来标识文件,而不是通过文件保存位置来标识,举个例子,就像我们找个人,没有电话的那个时代,我们是通过这人位置来找,需要找这个人所有可能存在的地方。而现在,我们是通过内容寻找位置的方式,只需搜索这个人的名字就可以找到这个人,节约了时间还有通过位置查找是遇见恶意的信息、遇到危险而导致自身的信息、网络、资金等受到威胁。它会把相同内容的文件在系统中备份唯一,节约了系统的存储空间 (区块链模式)。ipfs分布式存储简单地来说,就是将数据分散存储到多个数据存储服务器上。
关于Filecion矿机:
相信现在很多人都对虚拟货币并不陌生,很多人都在玩比特币,比特币是一种虚拟货币,这些虚拟货币的获取都需要用矿机来挖矿。而挖矿的方式有显卡挖矿、CPU挖矿等,知道了挖矿的方式,挖矿的原理,才能更好地挖取虚拟货币。那么Filecoin挖矿是什么意思呢?
为了保障IPFS项目的实施,还有防止所有的IPFS节点不会因为运营商恶意进行数据删改或者关停节点,导致存储用户无法获取数据数显的弊端。因此出现了Filecoin,Filecoin运用奖惩机制,通过保障节点的正常运行,来获得Filecoin的奖励,如果出现恶意的删改数据和关停节点Filecoin。Filecoin的出现保障了IPFS网络的正常运行,维持了网络秩序,那些违反了IPFS网络正常的将会罚款,收没所有的Filecoin奖励。一般正常情况下,不会出现这种情况,通过正常的节点运行就可以获得Filecoin奖励,只要有相应的奖励,几乎所有人都会遵守网络秩序。
在Filecoin 的初期,就跟比特币一样,大家都积极参加 Filecoin 挖矿工,希望在最早期成为环节中的一员,大家的想法都一样,想着越早进,挖得越多,就赚得更多,像早期滴滴的司机,大家都有赚到,因为设有有很多的奖励,而Filecoin也有很多的奖励政策。所以,IPFS硬盘矿机在市场上流行还不算多,早期选择一个好的矿机很关键。
欢迎分享,转载请注明来源:夏雨云
评论列表(0条)