Spring Cloud - 负载均衡器

简介

在分布式环境中,服务需要相互通信。 通信可以同步或异步发生。 现在,当服务同步通信时,这些服务最好在工作人员之间对请求进行负载平衡,以免单个工作人员不堪重负。 有两种方法可以对请求进行负载均衡

  • 服务器端 LB − 工作人员的前端是一个软件,该软件在工作人员之间分配传入的请求。

  • 客户端 LB − 调用服务本身在工作人员之间分发请求。 客户端负载均衡的好处是我们不需要负载均衡器形式的单独组件。 我们不需要负载均衡器等的高可用性。此外,我们避免了从客户端到 LB 到工作人员的额外跃点来满足请求。 因此,我们节省了延迟、基础设施和维护成本。

Spring Cloud load balancer (SLB) 和 Netflix Ribbon 是两个著名的客户端负载均衡器,用于处理这种情况。 在本教程中,我们将使用 Spring Cloud Load Balancer。


负载均衡器依赖设置

让我们以我们在前几章中使用的餐厅为例。 让我们重用包含餐厅所有信息的餐厅服务。 请注意,我们将 Feign Client 与负载均衡器一起使用。

首先,让我们使用以下依赖项更新服务的 pom.xml

<dependency>
      <groupId>org.springframework.cloud</groupId>
      <artifactId>spring-cloud-starter-openfeign</artifactId>
</dependency>
<dependency>
      <groupId>org.springframework.cloud</groupId>
      <artifactId>spring-cloud-starter-loadbalancer</artifactId>
</dependency>
<dependency>
      <groupId>org.springframework.cloud</groupId>
      <artifactId>spring-cloud-starter-netflix-eureka-client</artifactId>
</dependency>
<dependency>
      <groupId>org.springframework.boot</groupId>
      <artifactId>spring-boot-starter-web</artifactId>
</dependency>

我们的负载均衡器将使用 Eureka 作为发现客户端来获取有关工作实例的信息。 为此,我们将不得不使用 @EnableDiscoveryClient 注解。

package com.tutorialspoint;
import org.springframework.boot.SpringApplication;
import org.springframework.boot.autoconfigure.SpringBootApplication;
import org.springframework.cloud.client.discovery.EnableDiscoveryClient;
import org.springframework.cloud.openfeign.EnableFeignClients;
@SpringBootApplication
@EnableFeignClients
@EnableDiscoveryClient
public class RestaurantService{
   public static void main(String[] args) {
      SpringApplication.run(RestaurantService.class, args);
   }
}

使用带有 Feign 的 Spring 负载均衡器

我们在 Feign 中使用的 @FeignClient 注解实际上包含了负载均衡器客户端的默认设置,该设置循环我们的请求。 让我们测试一下。 这是我们之前的 Feign 部分的同一个 Feign 客户端。

package com.tutorialspoint;
import org.springframework.cloud.openfeign.FeignClient;
import org.springframework.web.bind.annotation.PathVariable;
import org.springframework.web.bind.annotation.RequestMapping;
@FeignClient(name = "customer-service")
public interface CustomerService {
   @RequestMapping("/customer/{id}")
   public Customer getCustomerById(@PathVariable("id") Long id);
}

这是我们将使用的控制器。 同样,这没有改变。

package com.tutorialspoint;
import java.util.HashMap;
import java.util.List;
import java.util.stream.Collectors;
import org.springframework.beans.factory.annotation.Autowired;
import org.springframework.web.bind.annotation.PathVariable;
import org.springframework.web.bind.annotation.RequestMapping;
import org.springframework.web.bind.annotation.RestController;
@RestController
class RestaurantController {
   @Autowired
   CustomerService customerService;
   static HashMap<Long, Restaurant> mockRestaurantData = new HashMap();
   static{
      mockRestaurantData.put(1L, new Restaurant(1, "Pandas", "DC"));
      mockRestaurantData.put(2L, new Restaurant(2, "Indies", "SFO"));
      mockRestaurantData.put(3L, new Restaurant(3, "Little Italy", "DC"));
      mockRestaurantData.put(4L, new Restaurant(4, "Pizeeria", "NY"));
   }
   @RequestMapping("/restaurant/customer/{id}")
   public List<Restaurant> getRestaurantForCustomer(@PathVariable("id") Long
id) {
      System.out.println("Got request for customer with id: " + id);
      String customerCity = customerService.getCustomerById(id).getCity();
      return mockRestaurantData.entrySet().stream().filter(
         entry -> entry.getValue().getCity().equals(customerCity))
         .map(entry -> entry.getValue())
         .collect(Collectors.toList());
   }
}

现在我们已经完成了设置,让我们试一试。 这里只是一点背景,我们要做的是以下 −

  • 启动 Eureka 服务。

  • 启动 Customer 服务的两个实例。

  • 启动内部调用客户服务并使用 Spring Cloud 负载均衡器的 Restaurant 餐厅服务

  • 对 Restaurant 餐厅服务进行四次 API 调用。 理想情况下,每个客户服务将处理两个请求。

假设我们已经启动了 Eureka 服务器和客户服务实例,现在让我们编译餐厅服务代码并使用以下命令执行 −

java -Dapp_port=8082 -jar .\target\spring-cloud-feign-client-1.0.jar

现在,让我们通过访问以下 API http://localhost:8082/restaurant/customer/1 为位于 DC 的 Jane 找到餐馆,然后让我们再次访问相同的 API 三次。您会从客户服务的日志中注意到两个实例都服务于 2 个请求。 每个客户服务 shell 都会打印以下内容 −

Querying customer for id with: 1
Querying customer for id with: 1

这实际上意味着请求是循环的。


配置 Spring 负载均衡器

我们可以配置负载均衡器来改变算法的类型,也可以提供自定义算法。 让我们看看如何调整我们的负载均衡器,以便为请求选择相同的客户端。

For that purpose, let us update our Feign Client to contain load balancer definition.

package com.tutorialspoint;
import org.springframework.cloud.loadbalancer.annotation.LoadBalancerClient;
import org.springframework.cloud.openfeign.FeignClient;
import org.springframework.web.bind.annotation.PathVariable;
import org.springframework.web.bind.annotation.RequestMapping;
@FeignClient(name = "customer-service")
@LoadBalancerClient(name = "customer-service",
configuration=LoadBalancerConfiguration.class)
public interface CustomerService {
   @RequestMapping("/customer/{id}")
   public Customer getCustomerById(@PathVariable("id") Long id);
}

如果你注意到了,我们已经添加了 @LoadBalancerClient 注解,它指定了用于这个 Feign 客户端的负载均衡器的类型。我们可以为负载均衡器创建一个配置类,并将该类传递给注解本身。 现在让我们定义 LoadBalancerConfiguratio.java

package com.tutorialspoint;
import org.springframework.cloud.loadbalancer.core.ServiceInstanceListSupplier;
import org.springframework.context.ConfigurableApplicationContext;
import org.springframework.context.annotation.Bean;
import org.springframework.context.annotation.Configuration;
@Configuration
public class LoadBalancerConfiguration {
   @Bean
   public ServiceInstanceListSupplier
discoveryClientServiceInstanceListSupplier(
         ConfigurableApplicationContext context) {
      System.out.println("Configuring Load balancer to prefer same instance");
      return ServiceInstanceListSupplier.builder()
               .withBlockingDiscoveryClient()
               .withSameInstancePreference()
               .build(context);
      }
}

现在,如您所见,我们已将客户端负载平衡设置为每次都使用相同的实例。 现在我们已经完成了设置,让我们试一试。 这里只是一点背景,我们要做的是以下 −

  • 启动 Eureka 服务。

  • 启动 Customer 服务的两个实例。

  • 启动内部调用客户服务并使用 Spring Cloud 负载均衡器的 Restaurant 餐厅服务

  • 对 Restaurant 餐厅服务进行 4 次 API 调用。 理想情况下,所有四个请求都将由相同的客户服务提供。

假设我们已经启动了 Eureka 服务器和客户服务实例,现在让我们编译餐厅服务代码,现在使用以下命令执行 −

java -Dapp_port=8082 -jar .\target\spring-cloud-feign-client-1.0.jar

现在,让我们通过访问以下 API http://localhost:8082/restaurant/customer/1 为位于 DC 的 Jane 找到餐馆,然后让我们再次访问相同的 API 三次。您会从客户服务的日志中注意到,单个实例服务于所有 4 个请求 −

Querying customer for id with: 1
Querying customer for id with: 1
Querying customer for id with: 1
Querying customer for id with: 1

这实际上意味着请求首选相同的客户服务代理。

在类似的线路上,我们可以有各种其他负载平衡算法来使用粘性会话、基于提示的负载平衡、区域偏好负载平衡等。