# xDS服务
Istio 的部署分为控制平面和数据平面。传统的数据平面通常使用带有网络代理的 Sidecar 容器(如 Envoy),这会增加微服务调用的网络延时。在 Kubernetes 场景下,Sermant 基于 xDS 协议直接与 Istiod 通信,实现了服务发现功能。使用基于 Istio+Sermant 的无代理服务网格,可以显著降低微服务调用延时,并简化系统部署。本文介绍在开发中插件如何使用Sermant提供的xDS服务。
# 基于xDS协议的服务发现
# 功能介绍
基于xDS协议的服务发现允许Sermant对接Istio的控制平面获取Kubernetes Service信息和其对应的具体服务实例信息。
说明:使用Sermant的xDS服务发现能力需服务部署在Kubernetes容器环境并运行Istio。
# 开发示例
本开发示例基于创建首个插件文档中创建的工程,演示插件如何通过Sermant框架提供的xDS服务发现能力获取服务实例:
在工程中
template/template-plugin
下的io.sermant.template.TemplateDeclarer
类中新增变量xdsServiceDiscovery
获取Sermant框架提供的xDS服务发现服务,用于获取服务实例:XdsServiceDiscovery xdsServiceDiscovery = ServiceManager.getService(XdsCoreService.class).getXdsServiceDiscovery();
获取服务发现实例之后,可以调用
XdsServiceDiscovery
提供的API进行相应的动作。本示例以服务实例的直接获取为例,获取名称为service-test
的服务实例信息,可通过如下代码来实现:@Override public ExecuteContext before(ExecuteContext context) throws Exception { Set<ServiceInstance> serviceInstance = xdsServiceDiscovery.getServiceInstance("service-test"); Iterator<ServiceInstance> iterator = serviceInstance.iterator(); while (iterator.hasNext()) { ServiceInstance instance = iterator.next(); System.out.println("ServiceInstance: [" + instance.getHost() + " : " + instance.getPort() + "]"); } }
说明:
service-test
必须是Kubernetes Service的名称,获取的服务实例信息为该Service对应的Pod实例数据,示例Kubernetes Service如下所示:apiVersion: v1 kind: Service metadata: name: service-test spec: type: ClusterIP ports: - name: http port: 8080 targetPort: 8080 protocol: TCP selector: app: service-test
开发完成后,可参照创建首个插件时的打包构建流程,在工程根目录下执行 mvn package后生成构建产物。
开启xDS服务并且在
agent/config/config.properties
中设置开启xDS服务,配置示例如下:# xDS service switch agent.service.xds.service.enable=true
执行完成后打包Sermant镜像和宿主微服务镜像。在k8s环境中启动名称为
service-test
的Service,并创建相应的服务实例(用户自行实现)。最后在Kubernetes启动宿主应用并挂载Sermant。Kubernetes环境打包Sermant和宿主镜像以及宿主微服务挂载Sermant启动的指导请参考Sermant Injector使用手册宿主微服务挂载Sermant的Pod启动成功后,可以执行以下命令获取宿主微服务日志,查看通过xDS服务发现能力获取的服务实例
$ kubectl logs -f ${POD_NAME} ServiceInstance: [xxx.xxx.xxx.xxx : xxxx]
说明:
${POD_NAME}
必须是宿主微服务运行的pod名称,可通过kubectl get pod
命令查看。
# xDS服务发现API
获取xDS服务发现服务:
XdsServiceDiscovery xdsServiceDiscovery = ServiceManager.getService(XdsCoreService.class).getXdsServiceDiscovery();
xDS服务发现服务共有三个接口方法,分别用于直接获取服务实例、通过订阅方式获取服务实例和通过Cluster获取服务实例:
Set<ServiceInstance> getServiceInstance(String serviceName);
void subscribeServiceInstance(String serviceName, XdsServiceDiscoveryListener listener);
Optional<XdsClusterLoadAssigment> getClusterServiceInstance(String clusterName);
# 直接获取服务实例
获取Kubernetes service的服务实例信息,返回值为
java.util.Set
类型,包含该service的所有服务实例xdsServiceDiscovery.getServiceInstance("service-test");
# 订阅方式获取服务实例
订阅Kubernetes service的服务实例信息,并注册服务发现监听器,监听器的
process
函数可在监听到服务实例发生变化后执行自定义操作xdsServiceDiscovery.subscribeServiceInstance("service-test", new XdsServiceDiscoveryListener() { @Override public void process(Set<ServiceInstance> instances) { // do something } });
服务发现监听器XdsServiceDiscoveryListener (opens new window),其中包含的接口方法如下:
方法 描述 void process(Set<ServiceInstance> instances)
处理最新服务实例信息的回调接口 服务实例ServiceInstance (opens new window),其方法如下:
方法名 返回值类型 描述 getClusterName() String
获取服务实例所属的istio cluster名称 getServiceName() String
获取服务实例所属的Kubernetes service名称 getHost() String
获取服务实例的Pod IP getPort() int
获取服务实例的端口 getMetaData() Map<String, String>
获取服务实例的元数据 isHealthy() boolean
服务是否健康
# 通过Cluster获取服务实例
获取Service Cluster的服务实例信息,返回值为
Optional<XdsClusterLoadAssigment>
类型,包含该Cluster的所有服务实例:xdsServiceDiscovery.getClusterServiceInstance("outbound|8080||service-test.default.svc.cluster.local");
Cluster服务实例XdsClusterLoadAssigment (opens new window),其字段如下:
字段名称 字段类型 描述 serviceName String
Cluster服务实例所属的服务名称 clusterName String
Cluster名称 localityInstances Map<XdsLocality, Set<ServiceInstance>>
Cluster的服务实例,由不同区域的服务实例组成 区域信息XdsLocality (opens new window),其字段如下:
字段名称 字段类型 描述 region String
区域信息 zone String
区域信息 subZone String
区域信息 loadBalanceWeight int
负载均衡权重 localityPriority int
区域优先级
# 基于xDS协议的路由配置服务
# 功能介绍
基于xDS协议的路由配置服务允许Sermant对接Istio的控制平面获取Kubernetes Service的路由配置信息。
说明:使用Sermant的xDS路由配置服务能力需服务部署在Kubernetes容器环境并运行Istio。
# 开发示例
本开发示例基于创建首个插件文档中创建的工程,演示插件如何通过Sermant框架提供的xDS路由配置服务获取服务的路由配置信息:
在工程中
template/template-plugin
下的io.sermant.template.TemplateDeclarer
类中新增变量xdsRouteService
获取Sermant框架提供的xDS路由配置服务,用于获取服务的路由配置信息:XdsRouteService xdsRouteService = ServiceManager.getService(XdsCoreService.class).getXdsRouteService();
获取路由配置服务实例之后,可以调用
xdsRouteService
提供的API调用指定服务的路由配置信息:List<XdsRoute> serviceRoute = xdsRouteService.getServiceRoute("spring-test"); System.out.println("The size of routing config: " + serviceRoute.size());
说明:
service-test
必须是Kubernetes Service的名称,获取的路由配置通过Istio提供的DestinationRule (opens new window)和VirtualService (opens new window)下发,Sermant具体支持的路由配置字段和配置模版请参考基于xDS服务的路由能力一节。开发完成后,可参照创建首个插件时的打包构建流程,在工程根目录下执行 mvn package后生成构建产物。
开启xDS服务并且在
agent/config/config.properties
中设置开启xDS服务,配置示例如下:# xDS service switch agent.service.xds.service.enable=true
执行完成后打包Sermant镜像和宿主微服务镜像。在Kubernetes启动宿主应用并挂载Sermant。Kubernetes环境打包Sermant和宿主镜像以及宿主微服务挂载Sermant启动的指导请参考Sermant Injector使用手册。根据Sermant提供的路由配置模版下发DestinationRule (opens new window)和VirtualService (opens new window)规则。
宿主微服务挂载Sermant的Pod启动成功后,可以执行以下命令获取宿主微服务日志,查看通过xDS路由配置服务获取的路由配置数量
$ kubectl logs -f ${POD_NAME} The size of routing config: 1
说明:
${POD_NAME}
必须是宿主微服务运行的pod名称,可通过kubectl get pod
命令查看。
# xDS路由配置服务API
获取xDS路由配置服务:
XdsRouteService xdsRouteService = ServiceManager.getService(XdsCoreService.class).getXdsRouteService();
xDS路由配置服务服务共有两个接口方法,分别用于获取Service的路由配置信息、Cluster是否开启同AZ路由:
List<XdsRoute> getServiceRoute(String serviceName);
boolean isLocalityRoute(String clusterName);
# 获取服务的路由配置信息
获取Kubernetes Service的路由配置信息,返回值为
List<XdsRoute>
类型,包含该Service的所有路由配置信息xdsRouteService.getServiceRoute("service-test");
路由配置XdsRoute (opens new window),其字段如下:
字段名称 字段类型 描述 name String
路由配置的名称 routeMatch XdsRouteMatch
路由匹配的匹配规则 routeAction XdsRouteAction
路由匹配的路由目的地
# ClusterAZ路由
获取Service的Cluster是否开启同AZ路由,返回值为
boolean
类型xdsRouteService.isLocalityRoute("outbound|8080||service-test.default.svc.cluster.local");
# 基于xDS协议的负载均衡配置服务
# 功能介绍
基于xDS协议的负载均衡配置服务允许Sermant对接Istio的控制平面获取Kubernetes Service的负载均衡规则。
说明:使用Sermant的xDS负载均衡配置服务需服务部署在Kubernetes容器环境并运行Istio。
# 开发示例
本开发示例基于创建首个插件文档中创建的工程,演示插件如何通过Sermant框架提供的xDS负载均衡配置服务获取服务的负载均衡规则:
在工程中
template/template-plugin
下的io.sermant.template.TemplateDeclarer
类中新增变量loadBalanceService
获取Sermant框架提供的xDS负载均衡配置服务,用于获取服务的负载均衡规则:XdsLoadBalanceService loadBalanceService = ServiceManager.getService(XdsCoreService.class).getLoadBalanceService();
获取负载均衡配置服务之后,可以调用
loadBalanceService
提供的API获取服务的负载均衡策略:XdsLbPolicy serviceLbPolicy = loadBalanceService.getBaseLbPolicyOfService("spring-test"); System.out.println("service lb policy: " + serviceLbPolicy);
说明:
service-test
必须是Kubernetes Service的名称,获取的负载均衡配置通过Istio提供的DestinationRule (opens new window)下发,Sermant具体支持的负载均配置字段、支持配置的负载均衡规则和配置模版请参考基于xDS服务的负载均衡能力一节。开发完成后,可参照创建首个插件时的打包构建流程,在工程根目录下执行 mvn package后生成构建产物。
开启xDS服务并且在
agent/config/config.properties
中设置开启xDS服务,配置示例如下:# xDS service switch agent.service.xds.service.enable=true
执行完成后打包Sermant镜像和宿主微服务镜像。在Kubernetes启动宿主微服务并挂载Sermant。Kubernetes环境打包Sermant和宿主镜像以及宿主微服务挂载Sermant启动的指导请参考Sermant Injector使用手册。根据Sermant提供的负载均衡配置模版下发DestinationRule (opens new window)。
宿主微服务挂载Sermant的Pod启动成功后,可以执行以下命令获取宿主微服务日志,查看通过xDS负载均衡配置服务获取的服务负载均衡策略
$ kubectl logs -f ${POD_NAME} service lb policy: ROUND_ROBIN
说明:
${POD_NAME}
必须是宿主微服务运行的pod名称,可通过kubectl get pod
命令查看。
# xDS负载均衡配置服务API
获取xDS负载均衡配置服务:
XdsLoadBalanceService loadBalanceService =
ServiceManager.getService(XdsCoreService.class).getLoadBalanceService();
xDS负载均衡配置服务共有两个接口方法,分别用于获取Service的负载均衡规则、Cluster的负载均衡规则:
XdsLbPolicy getLbPolicyOfCluster(String clusterName);
XdsLbPolicy getBaseLbPolicyOfService(String serviceName);
# 获取Service的负载均衡规则
获取Service的负载均衡规则,返回值为
XdsLbPolicy
类型loadBalanceService.getBaseLbPolicyOfService("service-test");
负载均衡规则实体类XdsLbPolicy (opens new window)为枚举类型
负载均衡规则 描述 XdsLbPolicy.RANDOM 随机负载均衡规则 XdsLbPolicy.ROUND_ROBIN 轮训负载均衡规则 XdsLbPolicy.LEAST_REQUEST 最小请求负载均衡规则 XdsLbPolicy.UNRECOGNIZED 未识别的负载均衡规则
# 获取Cluster的负载均衡规则
获取Service Cluster的负载均衡规则,返回值为
XdsLbPolicy
类型loadBalanceService.getLbPolicyOfCluster("outbound|8080||service-test.default.svc.cluster.local");
# 基于xDS协议的流控服务
# 功能介绍
基于xDS协议的流控服务允许Sermant对接Istio的控制平面获取Kubernetes Service的流控配置。
说明:使用Sermant的xDS流控服务需服务部署在Kubernetes容器环境并运行Istio。
# 开发示例
本开发示例基于创建首个插件文档中创建的工程,演示插件如何通过Sermant框架提供的xDS流控服务获取服务的流控规则:
在工程中
template/template-plugin
下的io.sermant.template.TemplateDeclarer
类中新增变量xdsFlowControlService
获取Sermant框架提供的xDS流控服务,用于获取服务的流控规则:XdsFlowControlService xdsFlowControlService = ServiceManager.getService(XdsCoreService.class).getXdsFlowControlService();
获取xDS流控服务之后,可以调用
xdsFlowControlService
提供的API获取服务的流控规则:Optional<XdsInstanceCircuitBreakers> circuitBreakersOptional = xdsFlowControlService.getInstanceCircuitBreakers("spring-test", "v1"); System.out.println("circuitBreaker : " + circuitBreakersOptional.get().getInterval());
说明:
service-test
必须是Kubernetes Service的名称,v1是Kubernetes Service的集群名称,获取的流控规则通过Istio提供的DestinationRule (opens new window)、VirtualService (opens new window)和EnvoyFilter (opens new window)下发,Sermant具体支持的流控规则字段、支持配置的流控规则和配置模版请参考基于xDS服务的流控能力一节。开发完成后,可参照创建首个插件时的打包构建流程,在工程根目录下执行 mvn package后生成构建产物。
开启xDS服务并且在
agent/config/config.properties
中设置开启xDS服务,配置示例如下:# xDS service switch agent.service.xds.service.enable=true
执行完成后打包Sermant镜像和宿主微服务镜像。在Kubernetes启动宿主微服务并挂载Sermant。Kubernetes环境打包Sermant和宿主镜像以及宿主微服务挂载Sermant启动的指导请参考Sermant Injector使用手册。根据Sermant提供的流控配置字段支持中的配置模板下发配置。
宿主微服务挂载Sermant的Pod启动成功后,可以执行
kubectl logs -f ${POD_NAME}
命令获取宿主微服务日志,查看通过xDS流控服务获取的熔断规则信息circuitBreaker: 300
说明:
${POD_NAME}
必须是宿主微服务运行的pod名称,可通过kubectl get pod
命令查看。
# xDS流控服务API
获取xDS流控服务:
XdsFlowControlService xdsFlowControlService = ServiceManager.getService(XdsCoreService.class).getXdsFlowControlService();
xDS流控服务共有5个接口方法,分别用于获取请求熔断规则、实例熔断规则、重试规则、错误注入规则、限流规则:
Optional<XdsRequestCircuitBreakers> getRequestCircuitBreakers(String serviceName, String clusterName);
Optional<XdsInstanceCircuitBreakers> getInstanceCircuitBreakers(String serviceName, String clusterName);
Optional<XdsRetryPolicy> getRetryPolicy(String serviceName, String routeName);
Optional<XdsRateLimit> getRateLimit(String serviceName, String routeName, String port);
Optional<XdsHttpFault> getHttpFault(String serviceName, String routeName);
# 获取请求熔断规则
获取请求熔断规则,返回值为
Optional<XdsRequestCircuitBreakers>
类型xdsFlowControlService.getRequestCircuitBreakers("service-test", "v1");
请求熔断配置XdsRequestCircuitBreakers (opens new window),其字段如下:
字段名称 | 字段类型 | 描述 |
---|---|---|
maxRequests | int | 最大活跃请求数 |
# 获取实例熔断规则
获取实例熔断规则,返回值为
Optional<XdsRequestCircuitBreakers>
类型xdsFlowControlService.getInstanceCircuitBreakers("service-test", "v1");
实例熔断配置XdsInstanceCircuitBreakers (opens new window),其字段如下:
字段名称 字段类型 描述 splitExternalLocalOriginErrors boolean
是否区分本地来源错误和外部错误,设置为true时使用
consecutiveLocalOriginFailures来检测实例的失败次数是否达到阈值consecutive5xxFailure int
实例被熔断之前可以发生的5xx错误次数,连接超时、连接错误/失败和请求失败均被视为 5xx 错误 consecutiveLocalOriginFailure int
实例被熔断之前可以发生的本地来源错误次数 consecutiveGatewayFailure int
实例被熔断之前可以发生的网关错误次数,响应码为502、503、504时视为网关错误 interval long
检测的时间间隔,在时间间隔内错误次数达到阈值则会触发实例熔断 baseEjectionTime long
实例的最小熔断时间,实例保持熔断状态的时间等于熔断次数*最小熔断时间 maxEjectionPercent int
驱逐的实例占可选实例的最大百分比 minHealthPercent double
健康实例的最小百分比,至少有minHealthPercent的实例处于健康状态,才会进行驱逐 注意:发送字节给服务端前发生的错误视为本地来源错误,发送字节给服务端后发生的错误视为外部错误
# 获取重试规则
获取重试规则,返回值为
Optional<XdsRetryPolicy>
类型xdsFlowControlService.getRetryPolicy("service-test", "v1-routes");
重试配置XdsRetryPolicy (opens new window),其字段如下:
字段名称 字段类型 描述 maxAttempts long
允许的最大重试次数 perTryTimeout long
重试的时间间隔 retryConditions List<String>
重试条件,支持5xx、gateway-error、connect-failure、retriable-4xx、
retriable-status-codes、retriable-headers
# 获取错误注入规则
获取错误注入规则,返回值为
Optional<XdsHttpFault>
类型xdsFlowControlService.getHttpFault("service-test", "v1-routes");
错误注入配置XdsHttpFault (opens new window),其字段如下:
字段名称 字段类型 描述 delay XdsDelay
请求延时配置 abort XdsAbort
请求终止配置 请求延时配置XdsDelay (opens new window),其字段如下:
字段名称 字段类型 描述 fixedDelay long
延迟时间 percentage FractionalPercent
触发请求延时的概率, 包含numerator:概率的分子 denominator:概率的分母 请求终止配置XdsAbort (opens new window),其字段如下:
字段名称 字段类型 描述 httpStatus int
触发请求中止时返回的状态码 percentage FractionalPercent
触发请求中止的概率, 包含numerator:概率的分子 denominator:概率的分母
# 获取限流规则
获取限流规则,返回值为
Optional<XdsRateLimit>
类型xdsFlowControlService.getRateLimit("service-test", "v1-routes", "8003");
限流配置XdsRateLimit (opens new window),其字段如下:
字段名称 字段类型 描述 tokenBucket XdsTokenBucket
令牌桶配置 responseHeaderOption List<XdsHeaderOption>
响应头的操作配置 percent FractionalPercent
请求触发限流规则的概率, 包含numerator:概率的分子
denominator:概率的分母令牌桶配置XdsTokenBucket (opens new window),其字段如下:
字段名称 字段类型 描述 maxTokens int
令牌的最大数量 tokensPerFill int
每次填充的令牌数量 fillInterval long
填充的时间间隔 响应头的操作配置XdsHeaderOption (opens new window),其字段如下:
字段名称 字段类型 描述 header XdsHeader
响应头信息 包含String字段key:响应头的名称, value:响应头的值 enabledAppend boolean
是否拼接响应头,为true时,如果存在相同的响应头,则将值与原先的值拼接到一起,
为false或者响应头不存在时添加响应头
# xDS服务配置
在Sermant Agent的产品包agent/config/config.properties
,可通过agent.service.xds.service.enable
配置项开启xDS服务,xDS服务的其他配置也在该文件进行配置:
# xDS服务开关
agent.service.xds.service.enable=false
← 动态配置功能 HTTP Server服务 →