95% 召回率的虚假繁荣
“Perfection is finally attained not when there is no longer anything to add but when there is no longer anything to take away.” — Antoine de Saint-Exupéry
此文是作者英文原文的翻译文章,英文原文在:http://todzhang.com/posts/2018-06-10-jvm-warm-up/
“低延迟”的Java虚拟机应用在一些应用场景下是对系统至关重要对一个指标。比如说在外汇交易系统等金融业核心系统中。此文就是探讨一下如何运用Java虚拟机预热来提高系统效率。
优化几调整JVM中每个进程过程称为预热
请记住,对于低延迟的应用程序,我们需要预先缓存所有类-以便在运行时访问它们时立即可用。
逃逸分析是Java Hotspot Server编译器可以用来分析新对象使用范围并决定是否在Java堆上分配它的一种技术。 根据逃逸分析,对象的转义状态可能是以下之一:
GlobalEscape –对象转义方法和线程。例如,对象存储在静态字段中,或者存储在转义对象的字段中,或者作为当前方法的结果返回。
ArgEscape –作为参数传递或由参数引用但在调用过程中不会全局转义的对象。通过分析被调用方法的字节码确定此状态。
NoEscape –标量可替换对象,意味着可以从生成的代码中删除其分配。
经过逃逸分析后,服务器编译器从生成的代码中消除了标量可替换对象分配和关联的锁。服务器编译器还消除了对所有非全局转义对象的锁定。它不会用非全局转义对象的堆栈分配替换堆分配。
JIT积极地内联方法,从而消除了方法调用的开销。可以内联的方法包括静态,私有或最终方法,但如果可以确定它们没有被覆盖,则还可以包括公共方法。因此,后续的类加载可能会使先前生成的代码无效。因为在每个地方对每个方法进行内联都会花费时间,并且会生成不合理的大二进制文件,所以JIT编译器首先对热方法进行内联,直到达到阈值为止。为了确定哪些方法是热门的,JVM会保留计数器以查看方法被调用了多少次以及已执行了多少次循环迭代。这意味着内联仅在达到稳定状态后才发生,因此您需要重复进行一定次数的操作,然后才能有足够的概要分析信息供JIT编译器执行其工作。
您可以尝试打开Java命令行标志来窥视正在发生的事情,而不必试图猜测JIT在做什么:-XX:+ PrintCompilation -XX:+ UnlockDiagnosticVMOptions -XX:+ PrintInlining 这是他们的工作:
-XX:+ PrintCompilation:JIT编译发生时记录
-XX:+ UnlockDiagnosticVMOptions:启用其他标志,例如-XX:+ PrintInlining
GlobalEscape和ArgEscape对象必须在堆上分配,但是对于ArgEscape对象,可以删除一些锁定和内存同步开销,因为这些对象仅在调用线程中可见。
NoEscape对象可以自由分配,例如在堆栈上而不是堆上。实际上,在某些情况下,甚至根本不需要构造一个对象,而是仅构造该对象的标量值,例如对象Integer的int。同步也可能会被删除,因为我们知道只有这个线程会使用对象。例如,如果我们使用有些古老的StringBuffer(与StringBuilder相反,它具有同步方法),则可以安全地删除这些同步。
EA当前仅在C2 HotSpot编译器下可用,因此我们必须确保以-server模式运行。
从理论上讲,可以使用EA将NoEscape对象对象分配在堆栈上,甚至可以分配给CPU寄存器,从而可以非常快速地执行。
当我们在堆上分配对象时,我们开始消耗CPU缓存,因为对象被放置在堆上的不同地址上,彼此之间可能相距很远。这样,我们将快速耗尽L1 CPU缓存,并且性能会下降。另一方面,通过EA和堆栈分配,我们正在使用(很可能)已经在L1高速缓存中的内存。因此,EA和堆栈分配将改善我们的数据本地化。从性能的角度来看,这是很好的。
显然,当我们使用带有堆栈分配的EA时,垃圾收集的运行频率要低得多。这也许是最大的性能优势。回想一下,每次JVM运行一次完整的堆扫描时,我们都会从我们的CPU中获取性能,并且CPU高速缓存将很快耗尽。更不用说我们是否在服务器上调出了虚拟内存,从而导致GC破坏了性能。
EA的最重要优势不是性能。 EA允许我们使用Lambda,函数,流,迭代器等局部抽象,而不会造成任何明显的性能损失,从而使我们可以编写更好,更易读的代码。描述我们在做什么而不是如何完成的代码。
GC清理堆,而不是栈。当方法返回其调用方时,堆栈会自动清理,从而将堆栈指针重置为其以前的值。因此,GC将在执行EA / C2编译之前清理最终在堆栈中的对象。实际实例(或更确切地说,它们的相应表示形式)位于堆栈上,在EA优化的上下文中,堆栈上没有引用的对象。
内联是Java HotSpot VM使用的最常见的JIT编译技术之一,它是将方法的主体替换为调用该方法的位置的实践。内联节省了调用方法的成本;无需创建新的堆栈框架。默认情况下,Java HotSpot VM将尝试内联包含少于35个字节JVM字节码的方法。
Java HotSpot VM进行的另一种常见优化是单态调度,它依赖于观察到的事实,即通常情况下,没有一种方法会导致对象引用在大多数情况下属于一种类型,而在另一种类型中却存在另一种类型的路径。次。
您可能会认为Java的静态类型会排除通过不同代码路径具有不同类型的情况,但是请记住,子类型的实例始终是超类型的有效实例(在Barbara Liskov之后,该原理称为Liskov替换原理)。这种情况意味着方法可能有两条路径(例如,一条路径传递一个超类型的实例,而一条路径传递一个子类型的实例),这在Java的静态类型定义中是合法的(并且确实会在实践)。
但是,在通常情况下(单态情况),不会发生具有不同的依赖于路径的类型。因此,我们知道在传递的对象上调用方法时将调用的确切方法定义,因为我们无需检查实际上使用了哪个替代。这意味着我们可以消除执行虚拟方法查找的开销,因此JIT编译器可以发出优化的机器代码,通常比等效的C ++调用要快(因为在C ++情况下,无法轻松消除虚拟查找)。
两种Java HotSpot VM编译器模式使用不同的JIT编译技术,并且对于相同的Java方法,它们可以输出非常不同的机器代码。但是,现代Java应用程序通常可以同时使用两种编译模式。
Java HotSpot VM使用许多其他技术来优化JIT编译生成的代码。循环优化,类型锐化,死代码消除和内在函数只是Java HotSpot VM尝试尽可能多地优化代码的其他方式。技术通常是一层一层地放在另一层之上,因此一旦应用了一种优化,编译器便可能能够看到更多可以执行的优化。
在Java HotSpot VM内部,实际上有两个单独的JIT编译器模式,分别称为C1和C2。 C1用于需要快速启动和坚如磐石的优化的应用; GUI应用程序通常是此编译器的理想选择。另一方面,C2最初是用于长时间运行的(主要是服务器端)应用程序。在某些Java SE 7更高版本之前,分别使用-client和-server开关可以使用这两种模式。
两种编译器模式使用不同的技术进行JIT编译,并且对于相同的Java方法,它们可以输出非常不同的机器代码。但是,现代Java应用程序通常可以同时使用两种编译模式。为了利用这一事实,从某些Java SE 7更高版本开始,提供了称为分层编译的新功能。此功能在开始时使用C1编译器模式以提供更好的启动性能。一旦对应用程序进行了适当的预热,C2编译器模式将接管其工作,以提供更具攻击性的优化,并且通常提供更好的性能。随着Java SE 8的到来,分层编译现已成为默认行为。
pemi$ jps | grep Main
50903 Main
pemi$ jmap -histo 50903 | head
num #instances #bytes class name
----------------------------------------------
1: 95 42952184 [I
2: 1079 101120 [C
3: 485 55272 java.lang.Class
4: 526 25936 [Ljava.lang.Object;
5: 13 25664 [B
6: 1057 25368 java.lang.String
7: 74 5328 java.lang.reflect.Field
工具或选项的说明和用法 Java任务控制
是用于HotSpot JVM的新JDK分析和诊断工具平台。它是一个具有高性能的工具套件,用于基本的监视,管理和生产时间分析以及诊断。 Java Mission Control最大限度地减少了性能分析开销,而性能开销通常是性能分析工具遇到的问题。请参阅Java Mission Control。
jcmd实用程序用于将诊断命令请求发送到JVM,这些请求对于控制Java Flight Records很有用。 JFR用于通过飞行记录事件对JVM和Java应用程序进行故障排除和诊断。请参见jcmd实用程序。
该实用程序提供了一个可视界面,用于在Java应用程序在Java虚拟机上运行时查看有关Java应用程序的详细信息。此信息可用于对本地和远程应用程序进行故障排除,以及对本地应用程序进行性能分析。请参阅Java VisualVM。 JConsole实用程序
该实用程序是基于Java管理扩展(JMX)的监视工具。该工具使用Java虚拟机中的内置JMX工具来提供有关正在运行的应用程序的性能和资源消耗的信息。请参见JConsole。 jmap实用程序
该实用程序可以从Java进程,核心文件或远程调试服务器获取内存映射信息,包括堆直方图。请参阅jmap实用程序。 jps实用程序
该实用程序列出了目标系统上已检测到的Java HotSpot VM。该实用程序在嵌入式VM的环境中非常有用,也就是说,它是使用JNI Invocation API而不是Java启动器启动的。请参阅jps实用程序。 jstack实用程序
该实用程序可以从Java进程获取Java和本机堆栈信息。在Oracle Solaris和Linux操作系统上,该实用程序可以从核心文件或远程调试服务器中获取信息。请参阅jstack实用程序。 jstat实用程序
该实用程序使用Java中的内置工具来提供有关正在运行的应用程序的性能和资源消耗的信息。诊断性能问题(尤其是与堆大小和垃圾回收相关的问题)时可以使用该工具。请参见jstat实用程序。 jstatd守护程序
该工具是一个远程方法调用(RMI)服务器应用程序,它监视已检测Java虚拟机的创建和终止,并提供一个接口,以允许远程监视工具连接到在本地主机上运行的VM。请参见jstatd守护程序。 visualgc实用程序
该实用程序提供了垃圾收集系统的图形视图。与jstat一样,它使用Java HotSpot VM的内置工具。请参阅visualgc工具。 本机工具
$ jps
16217 MyApplication
16342 jps
The utility lists the virtual machines for which the user has access rights. This is determined by access-control mechanisms specific to the operating system. On Oracle Solaris operating system, for example, if a non-root user executes the jps utility, then the output is a list of the virtual machines that were started with that user's uid.
In addition to listing the PID, the utility provides options to output the arguments passed to the application's main method, the complete list of VM arguments, and the full package name of the application's main class. The jps utility can also list processes on a remote system if the remote system is running the jstatd daemon.
没有GC的Java开发 Coral Blocks开发的所有产品都具有非常重要的功能,可以将零垃圾抛在后面。由于Java垃圾收集器(即GC)施加的延迟对于高性能系统是不可接受的,并且由于无法关闭GC,因此Java实时系统的最佳选择是根本不产生任何垃圾。想象一下,GC永远不会启动。想象一下一个高性能匹配引擎,其运行时间为微秒级,每秒发送和接收数十万条消息。如果GC在任何给定时间决定以1毫秒以上的延迟开始运行,则系统中的中断将是巨大的。因此,如果要使用Java开发具有最小方差和延迟的实时系统,最好的选择是正确执行此操作,而不会为GC创建任何垃圾。
确保您的系统不产生任何垃圾的关键是从开始到完成数百万次预热您的关键路径,然后再检查数百万次内存分配。如果它随着迭代次数的增加而线性地分配内存,则很可能会产生垃圾,您应该使用堆栈跟踪
–end–
“Perfection is finally attained not when there is no longer anything to add but when there is no longer anything to take away.” — Antoine de Saint-Exupéry
“图难于其易,为大于其细。” — 《老子》
“We measure what we value, and we value what we measure. In the silent expanse of artificial intelligence, an unobserved failure is not merely a technical...
不要照搬资源拓扑与网段划分,去拆解它的环境状态机与合规约束。
“It is a capital mistake to theorize before one has data. Insensibly one begins to twist facts to suit theories, instead of theories to suit facts.” — Art...
横看成岭侧成峰,远近高低各不同。——苏轼《题西林壁》
“测试只能证明缺陷存在,不能证明缺陷不存在。” — Edsger W. Dijkstra “信任,但要验证。” — 罗纳德·里根(常用于强调安全控制的验证原则)
为什么是 LiteLLM,而不是企业 API 网关 买方以为在采购聊天体验,但生产环境真正稀缺的,是按团队、按美元计费的控制面。
“Don’t find fault. Find a remedy.” — Henry Ford
为什么顶尖团队的 CI 脚本里总有这样一条 Docker 命令?
明明只有一个分支,为什么 Git 报错 Cannot fast-forward to multiple branches?
三招破解Pip与Debian系统更新的生死战
“空谈廉价,拿出代码。” — Linus Torvalds
「无恃其不来,恃吾有以待也。」——《孙子兵法·九变》
“简单是可靠性的先决条件。” — Edsger W. Dijkstra
“调试代码的难度是写代码的两倍。因此,如果你在写代码时发挥了全部聪明才智,你又怎么可能聪明到去调试它?” — Brian Kernighan
DeleteEnvironment 比 UpdateEnvironment 更诚实
“程序必须写得让人读懂,偶尔才需要让机器执行。” — Donald Knuth
“Talk is cheap. Show me the code.” — Linus Torvalds
别再给 Windows 配端口转发了:把 WSL2 变成独立的 Tailnet 节点
“类比是思考的燃料与火花。” —— 侯世达(Douglas Hofstadter)
“空谈无用,给我看代码。” — Linus Torvalds
“君子不器。” — 孔子
“The first principle is that you must not fool yourself — and you are the easiest person to fool.” — Richard Feynman,《Cargo Cult Science》,1974 年加州理工毕业演讲
“知人者智,自知者明。” — 老子《道德经》
“Git 已跟踪的文件不受影响。”—— Git 官方文档 gitignore(5)
“Git 是一个愚蠢的内容跟踪器。” — Linus Torvalds
“Transform screen-time to family-time.” — Unknown
“试着成为别人乌云里的一道彩虹。” — 玛雅·安吉罗 (Maya Angelou)
“纸上得来终觉浅,绝知此事要躬行。” — 陆游《冬夜读书示子聿》
“Imagination is the key ingredient to a happy life.” — Unknown
“我们知道我们是什么,但不知道我们可能成为什么。” — 威廉·莎士比亚
“Whatever is worth doing is worth doing well.” —— 某位不愿透露姓名的硅谷架构师(作者早期文章)
“The best way to predict the future is to create it.” — Alan Kay
“Be the Sun of your solar system.” — Unknown
“彼节者有间,而刀刃者无厚;以无厚入有间,恢恢乎其于游刃必有余地矣。” — 庄子
“Unix 从未被设计成阻止用户做蠢事,因为那也会阻止他们做聪明事。” — Doug McIlroy
图难于其易,为大于其细。——《老子》
“错误永远不应该悄无声息地过去,除非它被明确地消音。” —— Tim Peters,《Python 之禅》
“计算机科学领域的任何问题都可以通过增加一个间接的中间层来解决。” — David Wheeler
名不正,则言不顺;言不顺,则事不成。——《论语·子路》
鸟儿在天空飞过时,是不会在乎地面上的栅栏的
“知而不行,只是未知。” —— 王阳明
| Cognitive Scaffolding: The Unseen Clockwork of AI Memory and Skills | 认知脚手架:揭秘大模型“记忆”与“技能”的幕后黑盒 |
“Simple can be harder than complex: you have to work hard to get your thinking clean to make it simple.” — Steve Jobs
“此心光明,亦复何言。” —— 王阳明,临终遗言
“The chain is only as strong as its weakest link.” - Thomas Reid
Life is what happens while you’re busy making other plans. - John Lennon
Your time is limited, don’t waste it living someone else’s life. - Steve Jobs
You are never too old to set another goal or to dream a new dream. - C.S. Lewis 学习的最好方法是教授,理解的最好方法是解释。 如果你不能简单地解释它,说明你理解得还不够深刻
A person who never made a mistake never tried anything new. - Albert Einstein 苏格拉底的名言:”未经审视的生活不值得过” 数学家高斯所说:”数学是科学的女王,而数论是数学的女王。” 亚里士多德所说:”整体大于部分之和 物理学家费曼...
Change your thoughts and you change your world. - Norman Vincent Peale “预测未来的最好方法就是实现它。” - 改编自 Alan Kay “算法必须被看见才能被相信。”
It is never too late to be what you might have been. - George Eliot
The best way to predict the future is to create it. - Peter Drucker
“最深刻的洞察,往往来自最痛苦的打脸时刻。” - 某位被算法折磨过的工程师
To live is the rarest thing in the world. Most people exist, that is all. - Oscar Wilde
Strive not to be a success, but rather to be of value. - Albert Einstein
Great minds discuss ideas; average minds discuss events; small minds discuss people. - Eleanor Roosevelt
Everything has beauty, but not everyone sees it. - Confucius 技术面试的”照妖镜”:一道删除括号题,瞬间暴露普通程序员与资深开发者的思维差距
真正的大师不是拥有最多学生的人,而是创造出最多大师的人。 - 老子 真正的智慧不在于知道答案,而在于理解问题的本质。” —— 苏格拉底 “Simple can be harder than complex: you have to work hard to get your thinking clean t...
The future belongs to those who believe in the beauty of their dreams. - Eleanor Roosevelt
从Meta Principal的视角拆解LIS算法:不是背公式,而是修炼从第一性原理到工程直觉的思维武功。一个扑克牌游戏如何启发O(n log n)优化?普通工程师vs资深工程师的思维差距到底在哪里?
Happiness is not something ready made. It comes from your own actions. - Dalai Lama
本文系统讲解 5 个被忽视但极其高效的 Bash/Shell 命令行技巧:进程替换 <()>、tee、xargs -P 并行、/dev/tcp、参数扩展,含实战用法、兼容性与性能边界。
Everything you want is on the other side of fear. - Jack Canfield
Don’t count the days, make the days count. - Muhammad Ali
The question isn’t who is going to let me; it’s who is going to stop me. - Ayn Rand
所谓的良知,是被动一方的说辞。掌握主动权的一方,通常是不以良知而行动的。 ——摘自当年威尼斯外交官的报告”
The question isn’t who is going to let me; it’s who is going to stop me. - Ayn Rand
The only true wisdom is in knowing you know nothing. - Socrates
When one door of happiness closes, another opens. - Helen Keller 当一扇幸福之门关闭时,另一扇就会打开。但我们往往长时间地凝视着那扇关闭的门,而忽略了为我们打开的那扇门。 - 海伦·凯勒
Life shrinks or expands in proportion to one’s courage. - Anais Nin 收拾东西最好的方式,就是扔。东西是,人也是。
Your time is limited, don’t waste it living someone else’s life. - Steve Jobs
subject参数引发的血案
You must be the change you wish to see in the world. - Mahatma Gandhi
Those who cannot change their minds cannot change anything. - George Bernard Shaw 爱情,和袜子中的一只,总有一天会消失.
The best revenge is massive success. - Frank Sinatra
Nothing is impossible, the word itself says ‘I’m possible’! - Audrey Hepburn 我不斷往上爬,不是為了被世界看見,而是想看見整個世界啊
The power of imagination makes us infinite. - John Muir
Leadership is not about being the best. Leadership is about making everyone else better. - Unknown
Change your thoughts and you change your world. - Norman Vincent Peale
人生的意义不在于最终获得什么,而在于曾经努力所求过什么.
The difference between ordinary and extraordinary is that little extra. - Jimmy Johnson “生活不是等待暴风雨过去,而是学会在雨中翩翩起舞。” —— 维多利亚·施特劳斯
host.docker.internal,99%的开发者只知其一,不知其二的深层真相
The only way to do great work is to love what you do. - Steve Jobs
Everything you’ve ever wanted is on the other side of fear. - George Addair
Great minds discuss ideas; average minds discuss events; small minds discuss people. - Eleanor Roosevelt
使唐僧成为唐僧的,不是经书,是那条取经的路。——詹青云
“知之者不如好之者,好之者不如乐之者。” - 孔子
“光焰愈盛,其衰愈速。”——老子 当天堂燃烧:现代火灾的悖论 当2025年人们刚刚从庆祝2024年美国大选胜利的日子里和期待新的一年会更好时,洛杉矶突然发生了一场火灾。
一旦你知道答案,一切都会变得简单。” —— 戴夫·梅吉(Dave Magee)
One must learn by doing the thing; for though you think you know it, you have no certainty, until you try. —Sophocles
大堡礁的一些知识
紹介 私は、私のOppo Androidスマートフォンのアプリ「Googleマップ」で奇妙な問題が発生していることに気づきました。Googleマップで特定の場所(例えば「中央公園」)を検索すると、通常、このアプリは公園の写真やコメントリストを表示するはずです。例えば、誰かが公園の芝生や川の写真を投稿し、便利な場所...
枝上柳棉吹又少, 天涯何处无芳草. –苏轼
Stay focused, believe that you can achieve at the highest level, surround yourself with others who believe in you and do not stray from your goals.
If you’d like to view solution in YouTube, check out at https://youtu.be/ICiwuqJ-yU8
此文是作者英文原文的翻译文章,英文原文在:http://todzhang.com/posts/2018-06-10-jvm-warm-up/
你就会发现只要涉及递归的问题,都是 树的问题。
JDK Versions JDK 1.5 in 2005 JDK 1.6 in 2006 JDK 1.7 in 2011 JDK 1.8 in 2014 Sun之前风光无限,但是在2010年1月27号被Oracle收购。 在被Oracle收购后对外承诺要回到每2年一个realse的节奏。但是20...
用10几行代码自己写个人脸识别程序
引言 有句话说有人的地方就有江湖,同样,有江湖的地方就有恩怨。在软件行业历史长河(虽然相对于其他行业来说,软件行业的历史实在太短了,但是确是充满了智慧的碰撞也是十分的精彩)中有一些恩怨情愁,分分合合的小故事,比如类似的有,从一套代码发展出来后面由于合同到期就分道扬镳,然后各自发展成独门产品的Sybase DB和微...
使用Solidity创建以太坊(Ethereum)智能合约(Smart Contract)
大家都知道,在软件测试特别是在单元测试时,必用的一个功能就是“断言”(Assert),可能有些人觉得不就一个Assert语句,没啥花头,也有很多人用起来也是懵懵懂懂,认为只要是Assert开头的方法,拿过来就用。一个偶然的机会跟人聊到此功能,觉得还是有必要在此整理一下如何使用以及对“断言”的理解。希望可以帮助大家...
深入浅出区块链系统:第一章. what you should know about blockchain
Kubernetes 和Docker Swarm 可能是使用最广泛的工具,用于在集群环境中部署容器。但是这两个工具还是有很大的差别。
在开发设计中有一些常用原则或者潜规则,根据笔者的经验,这里稍微总结一下最最常用的,以飨读者。
可以想像一下,之前的传统应用系统,像是一个大办公室里面,有各个部门,销售部,采购部,财务部。办一件事情效率比较高。但是也有一些弊端,首先,各部门都在一个房间里。
Purpose of BA 带来一些商业价值(收益) 解决业务痛点
concepts