链滴 一次线上 java 应用响应时间过长问题的排查 作者：xinzhongtianxia 原文链接：https://ld246.com/article/1569574881351 来源网站：链滴 许可协议：署名-相同方式共享 4.0 国际 (CC BY-SA 4.0)

看监控

看监控平台，有问题的机器，cpu 占用很高，这。。。更不科学了。理论上，这应用 cpu 能到 1 就不错了，现在居然 80%，吓得我赶紧跑到机器上，top 了一把，确实是 java 应用占用 cpu 很高。 /p>

看垃圾回收日志，发现一直在进行 Full GC，但是几乎没啥效果，GC 完了，老年代依然是几乎 满的状态。
即使是 CMS，也不能避免传说中的 stop the world，所以响应时间变长了。
但是，现在问题来了，Full GC 回收不掉的对象都是啥啥啥？

分析 java 堆内存

先把线上流量从这台机器切走，然后 dump，分析后发现，一共 160

安装 Python 配置数据库 删除旧版本的 Django 安装 Django 验证安装 安装完成 你需要先安装 Django 才可以使用它。我们有一份完整安装指南，它涵盖了所有可能遇到的问题。 本指南将会帮助你完成一个简单、最小化的安装。 作为一个 Python Web 框架，Django 依赖 Python。从 Django 适用于哪些版本的 Python可 以获取更多信息。较新版本的 趣，这是最简单的选择。SQLite 内嵌在 Python 里，所以你不用再安装其他东西来支持你的数据 库。但是当你开始做第一个实际的项目时，你也许想使用一个可扩展的数据库，比如 PostgreSQL 来避免令人头痛地切换数据库问题。 如果你希望使用其他数据库，你需要安装合适的 database bingings 和在 DATABASES ‘default’ 默认项里改变一些键值，以匹配你的数据库设置： 引擎（ENGINE） 记录，Django 可以通过滚动更新数据库来匹配你当前的模型。 在这个简单的投票应用中，我们将创建两个模型：问题 Question 和选项 Choice。Question 模 型包括问题描述和发布时间。Choice 模型有两个字段：选项描述和当前票数。每个 选项 属于一个 问题。 这些概念可以通过一个简单的 Python 类来表示。像下面那样编辑 polls/models.py 文件：

通过使用 Rust 生态系统中丰富的工具，开发者在编写系统级代码时可以更加高效。 学生 Rust 适合学生群体，也适合有兴趣学习系统概念的人。许多人通过 Rust 学习了操作系统开发 等主题。社区对学生问题非常欢迎并乐于回答。通过类似这本书以及其他内容的努力，Rust 团队希望使系统概念能为更多人所易于理解，特别是编程新手。 公司 数百家大小规模的公司在生产环境中使用 Rust 完成各种任务，包括命令行工具、Web Ruby，Python，JavaScript 实现（运行 时环境，VM）。不过在这些语言中，只需要一句命令就可以编译和运行程序。这一切都是语言 设计上的权衡取舍。 仅仅使用 rustc 编译简单程序是没问题的，不过随着项目的增长，你可能需要管理你项目的方 方面面，并让代码易于分享。接下来，我们要介绍一个叫做 Cargo 的工具，它会帮助你编写 真实世界中的 Rust 程序。 17/562Rust 程序设计语言 let、match、方法（methods）、关联函数 （associated functions）、外部 crate 等知识！后续章节会深入探讨这些概念的细节。在这一 章，我们将主要练习基础内容。 我们会实现一个经典的新手编程问题：猜数字游戏。游戏的规则如下：程序将会生成一个 1 到 100 之间的随机整数。然后提示玩家输入一个猜测值。输入后，程序会指示该猜测是太低还是 太高。如果猜对了，游戏会打印祝贺信息并退出。 准备一个新项目

通过使用 Rust 生态系统中丰富的工具，开发者在编写系统级代码时可以更加高效。 学生 Rust 适合学生群体，也适合有兴趣学习系统概念的人。许多人通过 Rust 学习了操作系统开发 等主题。社区对学生问题非常欢迎并乐于回答。通过类似这本书以及其他内容的努力，Rust 团队希望使系统概念能为更多人所易于理解，特别是编程新手。 公司 数百家大小规模的公司在生产环境中使用 Rust 完成各种任务，包括命令行工具、Web 17/600 Rust 程序设计语言 简体中文版 时环境，VM）。不过在这些语言中，只需要一句命令就可以编译和运行程序。这一切都是语言 设计上的权衡取舍。 仅仅使用 rustc 编译简单程序是没问题的，不过随着项目的增长，你可能需要管理你项目的 方方面面，并让代码易于分享。接下来，我们要介绍一个叫做 Cargo 的工具，它会帮助你编 写真实世界中的 Rust 程序。 18/600 Rust 、方法（method）、关联函数 （associated function）、外部 crate 等知识！后续章节会深入探讨这些概念的细节。在这一 章，我们将练习基础内容。 我们会实现一个经典的新手编程问题：猜猜看游戏。它是这么工作的：程序将会随机生成一个 1 到 100 之间的随机整数。接着它会请玩家猜一个数并输入，然后提示猜测是大了还是小了。 如果猜对了，它会打印祝贺信息并退出。 准备一个新项目

thumb_media_id, title=None, description=None, kf_account=None) 发送音乐消息。 注意如果你遇到了缩略图不能正常显示的问题， 不要慌 张； 目前来看是微信服务器端的问题。 对此我们也无能为力 ( #197 [https://github.com/whtsky/WeRoBot/issues/197] ) user_id – 用户 ID 。 就是你收到的 WeRoBot QQ 群(283206829) 帮助解答问题 把 WeRoBot 安利给你周围的人 :) 贡献代码 如果你希望为 WeRoBot 贡献代码， 请现在 GitHub 上 Fork [https://github.com/whtsky/WeRoBot] WeRoBot 仓库， 然后在 master 分支上开一个新的 分支。 如果你的贡献的代码是修复 Bug ， 请确认这个 Bug 已经有了对应的 可以发 Pull Request 到 develop 分支, 我们会为你的代码 做 Review。同时 CI 也会自动运行测试。 注解 我们只会 Merge 通过了测试的代码。 如果一切没有问题, 我们将合并你的代码到 develop 分支, 并最终发布在 master 分支的稳定版本。 参数: 参数: 参数: 返回: API 应用对象 class werobot.robot

thumb_media_id, title=None, description=None, kf_account=None) 发送音乐消息。 注意如果你遇到了缩略图不能正常显示的问题， 不要慌 张； 目前来看是微信服务器端的问题。 对此我们也无能为力 ( #197 [https://github.com/whtsky/WeRoBot/issues/197] ) user_id – 用户 ID 。 就是你收到的 WeRoBot QQ 群(283206829) 帮助解答问题 把 WeRoBot 安利给你周围的人 :) 贡献代码 如果你希望为 WeRoBot 贡献代码， 请现在 GitHub 上 Fork [https://github.com/whtsky/WeRoBot] WeRoBot 仓库， 然后在 master 分支上开一个新的 分支。 如果你的贡献的代码是修复 Bug ， 请确认这个 Bug 已经有了对应的 com/offu/WeRoBot/pull/539] ) 停止了对 SAE 相关代码的测试。 ( #539 [https://github.com/offu/WeRoBot/pull/539] ) Version 1.10.1 修复 群发接口 的 docstring 样式。 Version 1.10.0 在 Client 中增加对 上传图文消息素材 的支持 ( #493 [https://github.com/offu/WeRoBot/pull/493]

thumb_media_id, title=None, description=None, kf_account=None) 发送音乐消息。 注意如果你遇到了缩略图不能正常显示的问题， 不要慌 张； 目前来看是微信服务器端的问题。 对此我们也无能为力 ( #197 [https://github.com/whtsky/WeRoBot/issues/197] ) user_id – 用户 ID 。 就是你收到的 WeRoBot QQ 群(283206829) 帮助解答问题 把 WeRoBot 安利给你周围的人 :) 贡献代码 如果你希望为 WeRoBot 贡献代码， 请现在 GitHub 上 Fork [https://github.com/whtsky/WeRoBot] WeRoBot 仓库， 然后在 master 分支上开一个新的 分支。 如果你的贡献的代码是修复 Bug ， 请确认这个 Bug 已经有了对应的 level='info') 按照配置开启 log 的格式化优化。 logger – 配置的 logger 对象 level – 要为 logger 设置的等级 Changelog Version 1.10.1 修复 群发接口 的 docstring 样式。 Version 1.10.0 在 Client 中增加对 上传图文消息素材 的支持 ( #493 [https://github.com/offu/WeRoBot/pull/493]

thumb_media_id, title=None, description=None, kf_account=None) 发送音乐消息。 注意如果你遇到了缩略图不能正常显示的问题， 不要慌 张； 目前来看是微信服务器端的问题。 对此我们也无能为力 ( #197 [https://github.com/whtsky/WeRoBot/issues/197] ) user_id – 用户 ID 。 就是你收到的 WeRoBot QQ 群(283206829) 帮助解答问题 把 WeRoBot 安利给你周围的人 :) 贡献代码 如果你希望为 WeRoBot 贡献代码， 请现在 GitHub 上 Fork [https://github.com/whtsky/WeRoBot] WeRoBot 仓库， 然后在 master 分支上开一个新的 分支。 如果你的贡献的代码是修复 Bug ， 请确认这个 Bug 已经有了对应的 com/offu/WeRoBot/pull/539] ) 停止了对 SAE 相关代码的测试。 ( #539 [https://github.com/offu/WeRoBot/pull/539] ) Version 1.10.1 修复 群发接口 的 docstring 样式。 Version 1.10.0 在 Client 中增加对 上传图文消息素材 的支持 ( #493 [https://github.com/offu/WeRoBot/pull/493]

thumb_media_id, title=None, description=None, kf_account=None) 发送音乐消息。 注意如果你遇到了缩略图不能正常显示的问题， 不要慌 张； 目前来看是微信服务器端的问题。 对此我们也无能为力 ( #197 [https://github.com/whtsky/WeRoBot/issues/197] ) user_id – 用户 ID 。 就是你收到的 WeRoBot QQ 群(283206829) 帮助解答问题 把 WeRoBot 安利给你周围的人 :) 贡献代码 如果你希望为 WeRoBot 贡献代码， 请现在 GitHub 上 Fork [https://github.com/whtsky/WeRoBot] WeRoBot 仓库， 然后在 master 分支上开一个新的 分支。 如果你的贡献的代码是修复 Bug ， 请确认这个 Bug 已经有了对应的 com/offu/WeRoBot/pull/539] ) 停止了对 SAE 相关代码的测试。 ( #539 [https://github.com/offu/WeRoBot/pull/539] ) Version 1.10.1 修复 群发接口 的 docstring 样式。 Version 1.10.0 在 Client 中增加对 上传图文消息素材 的支持 ( #493 [https://github.com/offu/WeRoBot/pull/493]