分布式系统原理,什么是RPC ,以及Dubbo 和 zookeeper

240 阅读6分钟

分布式系统

分布式系统是由一组通过网络进行通信,为了完成共同的任务而协调工作放入计算机节点组成的系统。分布式系统的出现是为了用廉价的,普通的机器完成单个计算机无法完成的计算,存储任务。其目的是利用更多的机器,处理更多的数据 分布式系统是建立在网络之上的软件系统。 首先需要明确的是,只有单个节点的处理能力无法满足日益增长的计算,存储任务的时候,且硬件的提升(加内存,加磁盘,使用更好的cpu)高昂到得不偿失的时候,应用程序也不能进一步优化的时候,我们才需要考虑分布式系统,因为分布式系统要解决的问题本身就是和单机系统一样的,而由于分布式系统多节点,通过网络通信,会引入很多的单机系统没有的问题,为了解决这些问题会引入更多的机制,协议,带来更多的问题

Dubbo 文档

随着互联网的发展,网站应用的规模不断扩大,常规的垂直应用架构已无法应对,分布式服务架构以及流动计算架构势在必得,急需一个治理系统确保架构有条不紊的演进

单一应用架构

当网站流量很小时,只需要一个应用,将所有功能部署在一起,以减少部署节点和成本,此时,用于简化增删查改的工作量的数据访问框架(ORM)时关键 在这里插入图片描述适用于小型网站,小型管理系统,将所有功能都部署到一个功能,简单易用

缺点

1,性能扩展比较难 2,协同开发问题 3,不利于升级维护

垂直应用架构

当访问量逐渐增大,单一应用增加机器带来的加速度越来越小,将应用拆成互不相干的几个应用,以提升效率,此时,用于 加速前端页面开发的WEB 框架(mvc) 是关键

流动计算架构

当服务越来越多,容量的评估,小服务资源浪费等问题逐渐显现,此时增加一个调度中心基于访问压力实时管理集群容量,提高集群利用率,此时,用于提高机器利用率的资源调度和治理中心是关键在这里插入图片描述 RPC

什么是RPC RPC 是指远程调度,是一种进程间通信方式,他是一种技术的思想,而不是规范,它允许程序 调用另一个地址空间(通常是共享网络的另一台机器上)的过程或函数,而不是程序员显式编码这个远程调用的细节 即程序员无论是调用本地的还是远程的函数,本质上编写的调用本地的还是远程的函数,本质上编写的调用代码基本相同

也就是说两台服务器A, B,一个应用部署在A服务器上,想要调用B服务器上应用提供的函数/方法,由于不在一个内存空 间,不能直接调用,需要通过网络来表达调用的语义和传达调用的数据。为什么要用RPC呢?就是无法在一个进程内, 甚至 一个计算机内通过本地调用的方式完成的需求,比如不同的系统间的通讯,甚至不同的组织间的通讯,由于计算能力需要横 向扩展,需要在多台机器组成的集群上部署应用。RPC就是要像调用本地的函数一样去调远程函数;

Dubbo 概念

什么是dubbo? Apache Dubbo I'dAbeu|是一款高性能、 轻量级的开源Java RPC框架,它提供了三大核心能力:面向接口的远程方法调 用,智能容错和负载均衡,以及服务自动注册和发现。

windows 安装zookeeper

在这里插入图片描述 在这里插入图片描述 在这里插入图片描述 sh 后缀的是Linux 的 在这里插入图片描述 在这里插入图片描述 此刻打开就不会报错了! 在这里插入图片描述 打开服务端会报错,跟Linux 上修改配置变量一样 在这里插入图片描述 此时打开客户端 在这里插入图片描述

简单的测试我们的zookeeper 就安装好了!

Dubbo 简单介绍

在这里插入图片描述 服务提供者(Provider) :暴露服务的服务提供方,服务提供者在启动时,向注册中心注册自己提供的服务。 服务消费者(Consumer) :调用远程服务的服务消费方,服务消费者在启动时,向注册中心订阅自己所需的服务,服务消 费者,从提供者地址列表中,基于软负载均衡算法,选一台提供者进行调用,如果调用失败,再选另一台调用。 注册中心(Registry) : 注册中心返回服务提供者地址列表给消费者,如果有变更,注册中心将基于长连接推送变更数据给 消费者 监控中心(Monitor) :服务消费者和提供者,在内存中累计调用次数和调用时间,定时每分钟发送一次统计数据到监控中 心

调用关系说明

服务容器负责启动,加载,运行服务提供者。 服务提供者在启动时,向注册中心注册自己提供的服务。 服务消费者在启动时,向注册中心订阅自己所需的服务。

注册中心返回服务提供者地址列表给消费者,如果有变更,注册中心付基于长连接变更按推送变更数据给消费者。 服务消费者,从提供者地址列表中,基于软负载均衡算法,选台提供者进行调用,如果调用失败,再选另一台调用。 服务消费者和提供者,在内存中累计调用次数和调用时间,定时每分钟发送一次统计数据到监控中心。

安装Dubbo 这个就是让你可以看到谁消费了什么,可以说是一个可视化的工具

第一步 在这里插入图片描述 下载下来后就是一个Springboot 的一个项目,打包就行 别让它跑测试 mvn clean package -Dmaven.test.skip=true 生成jar 包后,把zookeeper 打开,在双击jar 包!! 在这里插入图片描述 访问这个端口号,登陆root,root 就可以登陆上了 在这里插入图片描述 作用其实就相当于可视化了!

Springboot 集成 dubbo 跟zookeeper

第一步 在这里插入图片描述

第二步 添加Springboot模块 在这里插入图片描述

消费者的结构 在这里插入图片描述 简单的service

package com.jj.proviser.service;

public interface proviser {
//    返回字符串的方法
    public String demo();
}

实现类

package com.jj.proviser.service;

import org.apache.dubbo.config.annotation.Service;
import org.springframework.stereotype.Component;

//加入注解
@Component   //要用这个万能注解,应为 dubbo 的service 的注解和原来的service 一样,怕冲突
@Service
public class proviserimpl implements proviser{
    @Override
    public String demo() {
        return "我是娇娇的第一个服务端!";
    }
}

yml 服务端的

#配置端口号
server.port=8081
#服务中心的名字
dubbo.application.name=proviser-server
#注册中心的地址
dubbo.registry.address=zookeeper://127.0.0.1:2181
#那些要被注册
dubbo.scan.base-packages=com.jj.proviser.service

依赖

<!--dubbo依赖-->
        <!-- https://mvnrepository.com/artifact/org.apache.dubbo/dubbo-spring-boot-starter -->
        <dependency>
            <groupId>org.apache.dubbo</groupId>
            <artifactId>dubbo-spring-boot-starter</artifactId>
            <version>2.7.6</version>
        </dependency>
        <!--zookeeper客户端依赖-->
        <!-- https://mvnrepository.com/artifact/com.github.sgroschupf/zkclient -->
        <dependency>
            <groupId>com.github.sgroschupf</groupId>
            <artifactId>zkclient</artifactId>
            <version>0.1</version>``
        </dependency>
        <!--日志冲突-->
        <!-- 引入zookeeper -->
        <dependency>
            <groupId>org.apache.curator</groupId>
            <artifactId>curator-framework</artifactId>
            <version>2.12.0</version>
        </dependency>
        <dependency>
            <groupId>org.apache.curator</groupId>
            <artifactId>curator-recipes</artifactId>
            <version>2.12.0</version>
        </dependency>
        <dependency>
            <groupId>org.apache.zookeeper</groupId>
            <artifactId>zookeeper</artifactId>
            <version>3.4.14</version>
            <!--排除这个slf4j-log4j12-->
            <exclusions>
                <exclusion>
                    <groupId>org.slf4j</groupId>
                    <artifactId>slf4j-log4j12</artifactId>
                </exclusion>
            </exclusions>
        </dependency>

启动项目 在dubbo 上可以看到我们自己写的提供者,查看详情 在这里插入图片描述 在这里插入图片描述 配置消费者 在这里插入图片描述

package com.jj.proviser.service;

import org.apache.dubbo.config.annotation.Reference;
import org.springframework.stereotype.Service;

@Service
public class Comsumer {

//想要拿到 提供者的,需要去注册中心拿到
    @Reference //引用 pom 坐标可以, 也可以定义路径相同的接口
    proviser proviser;
    public void buy()
    {

        String demo = proviser.demo();
        System.out.println("我是娇娇的第一个demo = " + demo);
    }
}

yml

#配置端口号
server.port=8082
#消费者取哪里拿到需要
dubbo.application.name=consumer
#注册中心的地址
dubbo.registry.address=zookeeper://127.0.0.1:2181

测试效果 在这里插入图片描述