场景描述
接收到 P99 超时告警,定位到某接口导致,接口是由同事实现的,逻辑较简单,是一个 MySQL 的 INSERT OR UPDATE 逻辑, 一个请求过来,判断某个非主键字段是否存在,不存在则 INSERT 插入,存在则按该字段 UPDATE 更新其他字段。
超时告警在触发与恢复之间反复触发,平均耗时 6 秒,接口最近无改动,已上线一段时间运行正常。随后而来的是大面积的接口超时告警,情况开始变得紧急起来。
一次购买,获得3套出海全栈模板:通用SaaS模板、AI生图网站模板、导航站模板。
接收到 P99 超时告警,定位到某接口导致,接口是由同事实现的,逻辑较简单,是一个 MySQL 的 INSERT OR UPDATE 逻辑, 一个请求过来,判断某个非主键字段是否存在,不存在则 INSERT 插入,存在则按该字段 UPDATE 更新其他字段。
超时告警在触发与恢复之间反复触发,平均耗时 6 秒,接口最近无改动,已上线一段时间运行正常。随后而来的是大面积的接口超时告警,情况开始变得紧急起来。
好几年没有记录过年终总结了,今年发生了太多改变,觉得有必要记录一下。
年度关键词:转折。
在实际开发中,Golang 常用于构建高性能 API 接口。在返回 JSON 结果时,特别是涉及包含特殊字符的 URL 字段,开发者可能会遇到字符被自动转义的情况。常见的是 &
符号被转义为 \u0026
,导致客户端无法正常解析该链接的参数,进而影响请求的正确性。
在 Golang 的 JSON 序列化过程中,遇到除数为零的情况可能会导致返回 Inf
(无穷大)。这是 Golang 实现了 IEEE 754 标准的结果,当除数在运行时动态为零时,返回的是 +Inf
或 -Inf
,而不是 panic。但这种情况在 JSON 序列化时,Inf
值会触发错误:
json: unsupported value: +Inf
Traefik 是一个现代化的开源反向代理和负载均衡工具,专为微服务架构而设计。它不仅支持动态服务发现,还支持自动更新路由规则,这使得它与传统的 Nginx 等需要手动配置的反向代理有所不同。Traefik 会通过集成的 Provider(如 Docker、Kubernetes 等)实时感知服务的变化,并自动配置路由。
《投资最重要的事》(The Most Important Thing)是霍华德·马克斯(Howard Marks)撰写的一本经典投资书籍。霍华德·马克斯是著名的投资者和 Oaktree Capital 的联合创始人,他在这本书中分享了自己的投资哲学和经验,旨在帮助读者理解投资过程中的核心原则。
在现代数据处理和搜索引擎应用中,Elasticsearch 已成为高效检索和分析数据的重要工具。然而,随着数据量的增长和查询请求的增加,性能问题也随之显现。如何有效优化 Elasticsearch 的性能,确保查询迅速且资源使用均衡,是每位开发者和运维人员面临的挑战。本文将介绍几种实用的 Elasticsearch 性能优化实践,包括节点负载均衡、慢查询处理、合理使用 filter 子句等,帮助您提升 Elasticsearch 的整体性能,实现更快的响应速度和更低的系统负载。
使用 GitHub Actions 实现自动部署,可以简化将 Golang 应用从代码提交到 VPS 服务器的整个流程。本文将详细介绍如何配置 GitHub Actions,以在每次提交代码后自动编译和部署应用,无需使用 Docker,直接通过 supervisord 启动二进制文件。以下是详细的配置步骤和流程。
在 web 开发中,日志记录是保证系统稳定和维护的重要一环。Gin 作为一个流行的 Go Web 框架,提供了灵活的中间件机制,允许开发者自定义日志记录策略。本篇文章将深入探讨如何实现自定义的 Gin Logger 中间件,详细介绍 Gin 中间件的原理,官方 Logger 的配置,以及如何利用 logging 包实现功能丰富的日志中间件。
在一台线上服务器上,部署了两个服务 A 和 B,A 服务通过 Nginx 处理外部请求,并向本地的 B 服务请求数据。同时,B 服务也接收大量的直接请求。在某些时段内,Nginx 会偶发性地返回 504 请求超时和少量的 502 连接被断开。在此期间,机器的 CPU、内存和 IO 等基础指标均正常,QPS(每秒请求数)仅有微小波动,未超过 100,远低于高峰期的 2800。
通过分析日志,发现从 A 服务到 B 服务的请求链路中,A 服务最后一条日志到 B 服务第一条日志之间的时间间隔长达 10 多秒,暗示请求处理过程中可能出现了超时问题。
在 Golang 并发编程中,goroutine 是轻量级的执行线程,为高效地处理数据提供了强大的支持。Slice 作为一种动态数组,为数据存储提供了灵活性。然而,当多个 goroutine 并发地使用 append 操作向同一个 slice 添加元素时,可能会出现 data race 和数据不一致的情况。这是因为多个 goroutine 会竞争同一个底层数组的内存空间,导致同一个数组下标的元素被多次覆盖。 本文将深入探讨 Golang 并发 append slice 的安全问题,分析其背后的原因,并提供使用加锁机制等解决方案,确保数据安全和程序稳定性。 通过学习本文,您将更好地理解 Golang 并发编程中的潜在陷阱,并掌握编写安全高效代码的技巧。
令牌桶算法(Token Bucket)作为一种高效的限流机制,能够帮助开发者有效控制流量,保护系统免受过载。在使用 Nginx、Lua 和 Redis 的组合中,实现令牌桶算法不仅提升了性能,还确保了高并发环境下的安全性。本文将深入探讨如何通过这三者的结合来实现基础的令牌桶算法限流,提供具体的实现步骤和代码示例,助力开发者轻松上手并优化 API 调用。在接下来的内容中,将详细分析令牌桶的工作原理,以及在实际应用中的关键注意事项,确保您的系统能够在高流量情况下依然保持稳定。
在 Go 语言的单元测试中,打桩(stubbing)是一种常用的技术,可以帮助开发者更好地控制测试环境并提高测试的有效性。以下将深入探讨 gostub 库的使用方法以及其他相关工具,为您的 Go 测试提供实用指导。
在项目中,我们通常会记录 Error 级别的日志,以便于追踪和排查问题。然而,依赖于日志采集的方式,在面对偶发性或非必现的错误时,我们依然很难及时发现和响应。尽管目前的告警机制主要基于指标的阈值设置,对于一些不易察觉的错误仍然存在盲点。
使用 Sentry 可以有效解决这些问题。通过在可能产生错误的代码块中,不仅记录 Error 日志,还能将严重的错误事件上报至 Sentry。Sentry 会详细记录相关问题并提供实时告警通知,从而大幅提高错误监控和处理的效率。
在 Golang 项目中,选择 zap 作为日志组件,综合考虑了易用性、性能以及流行程度。zap 能够高效地记录日志,并通过其丰富的功能满足各种需求。
2019 年国庆和 5 位小伙伴一起去了英国旅游,行程结束后自己懒得整理游记,于是转载好友蕾酱拌饭笔下的游记并适当添加修改~