ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

05 分布式系统概述

2021-07-07 11:55:51  阅读:177  来源: 互联网

标签:软件系统 05 solrcloud 概述 分布式系统 服务器 节点 分布式


由于大数据技术领域的各类技术框架基本上都是分布式系统,因此,理解Hadoop、storm、spark等技术框架,都需要具备基本的分布式系统概念。

分布式软件系统(Distributed Software Systems)

该软件系统会划分成多个子系统或模块,各自运行在不同的机器上,子系统或模块之间通过网络通信进行协作,实现最终的整体功能

比如:分布式操作系统、分布式程序设计语言及其编译(解释)系统、分布式文件系统和分布式数据库系统等。

分布式软件系统举例:solrcloud

A.一个solrcloud集群通常有多台solr服务器

B.每一个solr服务器节点负责存储整个索引库的若干个shard(数据分片)

C.每一个shard又有多台服务器存放若干个副本互为主备用

D.索引的建立和查询会在整个集群的各个节点上并发执行

E.solrcloud集群作为整体对外服务,而其内部细节可对客户端透明

总结:利用多个节点共同协作完成一项或多项具体业务功能的系统就是分布式系统。

分布式应用系统模拟开发

需求: 可以实现由主节点将运算任务发往从节点,并将各从节点上的任务启动;

程序清单:

  • AppMaster
  • AppSlave/APPSlaveThread
  • Task

程序运行逻辑流程:
在这里插入图片描述

 

标签:软件系统,05,solrcloud,概述,分布式系统,服务器,节点,分布式
来源: https://blog.51cto.com/u_15294985/2999347

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有