• KubeCon2024：Karmda和Istio提高分布式云的负载与流量韧性的最佳实践

    calendar Aug 21, 2024 · 2 min read · Kubecon Istio Karmada Kubernetes 演讲 韧性 最佳实践  ·
    Share on: linkedin copy

    记录在2024年8月21日在香港Kubecon上发表的技术演讲《Best Practice: Karmada & Istio Improve Workload & Traffic Resilience of Production Distributed Cloud》 议题： The Distributed cloud offers better resilience by providing redundancy, scalability and flexibility, especially for cloud native applications. However the complexity of …


    Read More

  • KubeCon2023：基于实际案例解析Istio访问日志ResponseFlag系列

    calendar Oct 15, 2023 · 2 min read · KubeCon 访问日志 服务网格 演讲 最佳实践  ·
    Share on: linkedin copy

    记录在2023年9月27日在上海Kubecon上发表的技术演讲《Detailed Parse and Reproduce Response Flags of Istio Access Log Based on Production Use Case 》 议题： 服务网格的访问日志在运维工作中发挥着非常关键的作用。特别是访问日志在HTTP响应码外提供应答标记Response Flags，通过针对性的标记提供有用的额外信息，帮助运维人员提高故障诊断的效率。但是Envoy社区官方文档中对应答标记的介绍非常简单，Istio社区也没有资料介绍这部分内容。在实际使用中当用户遇到包含DC、UF、UH等应答标记的日志时，很难找到权威材料参考来解决具 …


    Read More

  • RL(服务限流)--Istio访问日志ResponseFlag重现与解析14

    calendar Oct 11, 2023 · 1 min read · KubeCon 访问日志 ResponseFlags RL 演讲  ·
    Share on: linkedin copy

    KubeCon 2023在上海做的一个关于Istio访问日志的演讲。解析和重现了在当时解决客户问题时碰到的各种应答日志。 第14个关注的Response Flag还是RL，全称是RateLimited，官方定义表示The request was ratelimited locally by the HTTP rate limit filter in addition to 429 response code. 不同于前一个RL的重现了服务端限流，本文将聚焦基于客户端限流重现RL。 含义： **RL **表示触发服务限流。限流是保障服务韧性的重要手段，防止系统过载，保障服务总体的可用性。在网格中配置了本地限流或者全局限流策略，若在单位 …


    Read More

  • RL(服务限流)--Istio访问日志ResponseFlag重现与解析13

    calendar Oct 10, 2023 · 1 min read · KubeCon 访问日志 ResponseFlags RL 演讲  ·
    Share on: linkedin copy

    KubeCon 2023在上海做的一个关于Istio访问日志的演讲。解析和重现了在当时解决客户问题时碰到的各种应答日志。 第13个关注的Response Flag是RL，全称是RateLimited，官方定义表示The request was ratelimited locally by the HTTP rate limit filter in addition to 429 response code. 含义： **RL **表示触发服务限流。限流是保障服务韧性的重要手段，防止系统过载，保障服务总体的可用性。在网格中配置了本地限流或者全局限流策略，若在单位时间内请求数超过配置的阈值，则触发限流。访问日志记录RL，一般会伴随返 …


    Read More

  • UC(上游连接中断)--Istio访问日志ResponseFlag重现与解析12

    calendar Oct 9, 2023 · 1 min read · KubeCon 访问日志 ResponseFlags UC 演讲  ·
    Share on: linkedin copy

    KubeCon 2023在上海做的一个关于Istio访问日志的演讲。解析和重现了在当时解决客户问题时碰到的各种应答日志。 第12个关注的Response Flag是UC，全称是UpstreamConnectionTermination，官方定义表示Upstream connection termination in addition to 503 response code. 含义： UC表示上游连接中断，常见的一种现象是上游连接在返回应答前已经关闭。 重现环境： UC是一个不太好构建的场景，环境和前面的大多数略有不同。 客户端Pod，这里是特别写了一个Python程序。因为观测点在服务端代理，客户端是否注入Sidecar都可以。 …


    Read More

  • UT(上游请求超时)--Istio访问日志ResponseFlag重现与解析11

    calendar Oct 8, 2023 · 1 min read · KubeCon 访问日志 ResponseFlags UT 演讲  ·
    Share on: linkedin copy

    KubeCon 2023在上海做的一个关于Istio访问日志的演讲。解析和重现了在当时解决客户问题时碰到的各种应答日志。 第11个关注的Response Flag是UT，全称是UpstreamRequestTimeout，官方定义表示Upstream request timeout in addition to 504 response code. 含义： UT表示表示上游请求超时，一般伴随返回“504”的HTTP状态码。如典型场景在VirtualService中给目标服务配置了超时时间，当服务请求超过配置的超时时间，客户端代理自动超时，取消请求。 重现环境： 客户端Pod，注入了Sidecar。 目标服务，为了模拟一个慢的服务，我 …


    Read More

  • FI(注入错误故障)--Istio访问日志ResponseFlag重现与解析10

    calendar Oct 7, 2023 · 1 min read · KubeCon 访问日志 ResponseFlags FI 演讲  ·
    Share on: linkedin copy

    KubeCon 2023在上海做的一个关于Istio访问日志的演讲。解析和重现了在当时解决客户问题时碰到的各种应答日志。 第10个关注的Response Flag是DI，全称是FaultInjected，官方定义表示The request was aborted with a response code specified via fault injection. 含义： FI 表示故障注入错误。通过VirtualService给目标服务注入了一个特定状态码的故障。在客户端的访问日志中会返回配置的HTTP状态码，并记录FI。 重现环境： 客户端Pod，注入了Sidecar。 目标服务，一个Cluster类型的Kubernetes服 …


    Read More

  • DI(注入延时故障)--Istio访问日志ResponseFlag重现与解析09

    calendar Oct 6, 2023 · 1 min read · KubeCon 访问日志 ResponseFlags DI 演讲  ·
    Share on: linkedin copy

    KubeCon 2023在上海做的一个关于Istio访问日志的演讲。解析和重现了在当时解决客户问题时碰到的各种应答日志。 第九个关注的Response Flag是DI，全称是DelayInjected，官方定义表示The request processing was delayed for a period specified via fault injection. 含义： DI表示请求中注入了一个延时故障。在VirtualService中配置了延时故障注入时，会在服务请求时产生配置的延时，并在访问日志中会记录DI的应答标记。 重现环境： 客户端Pod，注入了Sidecar。 目标服务，一个Cluster类型的Kubernetes …


    Read More

  • NR(没有匹配的路由)--Istio访问日志ResponseFlag重现与解析08

    calendar Oct 5, 2023 · 1 min read · KubeCon 访问日志 ResponseFlags NR 演讲  ·
    Share on: linkedin copy

    KubeCon 2023在上海做的一个关于Istio访问日志的演讲。解析和重现了在当时解决客户问题时碰到的各种应答日志。 第八个关注的Response Flag是NR，全称是NoRouteFound，官方定义表示No route configured for a given request in addition to 404 response code or no matching filter chain for a downstream connection. 含义： NR表示没有匹配的路由来处理请求的流量，一般伴随“404”状态码。比如实际的访问流量的特征不匹配VirtualService中定义的路由条件，因而没有找到匹配的 …


    Read More

  • NC(没有上游集群)--Istio访问日志ResponseFlag重现与解析07

    calendar Oct 4, 2023 · 1 min read · KubeCon 访问日志 ResponseFlags NC 演讲  ·
    Share on: linkedin copy

    KubeCon 2023在上海做的一个关于Istio访问日志的演讲。解析和重现了在当时解决客户问题时碰到的各种应答日志。 第七个关注的Response Flag是NC，全称是NoClusterFound，官方定义表示Upstream cluster not found" 含义： NC表示没有上游集群，即在网格流量路由中定义的目标服务后端不存在。Istio中比较典型的场景如分流策略中流量发送给V2标识的服务子集，但是DestinationRule中并没有定义该版本标识的服务子集。 重现环境： 客户端Pod，注入了Sidecar。 目标服务，一个Cluster类型的Kubernetes服务，多个服务实例。服务端Pod可以注 …


    Read More