猜您喜欢:
JD hotkey是一个十分精准的京东轻量级热key探测框架,适用的场景涵盖mysql热数据本地缓存、redis热数据本地缓存、单机接口/用户维度限流限流、黑名单用户本地缓存、爬虫用户限流、集群用户维度限流、集群接口维度限流等,进行毫秒级精准探测,需要的用户一定不要错过哦!
JD-hotkey是京东APP后台热数据探测框架,历经多次高压压测和2020年京东618大促考验。在上线运行的这段时间内,每天探测的key数量数十亿计,精准捕获了大量爬虫、刷子用户,另准确探测大量热门商品并毫秒级推送到各个服务端内存,大幅降低了热数据对数据层的查询压力,提升了应用性能。
对任意突发性的无法预先感知的热点请求,包括并不限于热点数据(如突发大量请求同一个商品)、热用户(如爬虫、刷子)、热接口(突发海量请求同一个接口)等,进行毫秒级精准探测到。 然后对这些热数据、热用户等,推送到该应用部署的所有机器JVM内存中,以大幅减轻对后端数据存储层的冲击,并可以由客户端决定如何使用这些热key(譬如对热商品做本地缓存、对热用户进行拒绝访问、对热接口进行熔断或返回默认值)。 这些热key在整个应用集群内保持一致性。
核心功能:热数据探测并推送至集群各个服务器
该框架历经多次压测,性能指标主要有两个:
1 探测性能:8核单机worker端每秒可接收处理16万个key探测任务,16核单机至少每秒平稳处理30万以上,实际压测达到37万,CPU平稳支撑,框架无异常。
2 推送性能:在高并发写入的同时,对外推送目前性能约平稳推送每秒10-12万次,譬如有1千台server,一台worker上每秒产生了100个热key,那么这1秒会平稳推送100 * 1000 = 10万次,10万次推送会明确在1s内全部送达。如果是写入少,推送多,以纯推送来计数的话,该框架每秒可稳定对外推送40-60万次平稳,80万次极限可撑几秒。
每秒单机吞吐量(写入+对外推送)目前在70万左右稳定。
在真实业务场景中,可用1:1000的比例,即1台worker支撑1000台业务服务端的key探测任务,即可带来极大的数据存储资源节省(如对redis集群的扩充)。
1、mysql热数据本地缓存
2、redis热数据本地缓存
3、黑名单用户本地缓存
4、爬虫用户限流
5、接口、用户维度限流
6、单机接口、用户维度限流限流
7、集群用户维度限流
8、集群接口维度限流
能够对任意突发性的无法预先感知的热点数据
包括并不限于热点数据、热用户、热接口等
好了,今天的JD hotkey(京东轻量级热key探测框架)分享就到这里了,想要下载更多软件就来非凡软件站,快快收藏吧,更多精彩不容错过!
网页辅助 会上网的朋友每天几乎都离不开浏览各类页面,而网页中内容多样复杂,很多时候也给我们带来了一些麻烦,或者可能没有自己想要的那般效率,网页辅助专题提供新全的网页辅助工具、网页模板软件、网站屏蔽器、网页特效、下载器、采集、发帖等各网页辅助软件免费下载。
HoneyTab标签页管理v1.3 HoneyTab标签页管理专注于帮助用户更有效地管理和组织浏...详情>>
mSearch(网页多开下载软件)v1.0.8 我们在网上找各种素材的时候需要开启十几甚至数十个页面,各个页...详情>>
近日,科技圈又有关于iphone17系列的新消息传来,这让广大果粉们再次将目光聚焦。据悉,iphone17系列在设计方面可能会延续苹果一贯的高品质与精致风格。外观上,预计会在材质和工艺上进行进一步升级,比如采用更坚固耐用且质感上乘的材料,让手机握持起来更加舒适
ios16带来了许多令人惊喜的新功能,其中实况文本更是让人眼前一亮。它就像一个贴心的小助手,能为你的手机使用体验增添不少乐趣和便利。那么,ios16实况文本究竟该怎么使用呢?让我们一起来揭开它的神秘面纱。轻松识别文字当你看到一段文字时,只需长按屏幕上的文字内容
苹果14pro功能强大,其中分屏功能更是能让你高效multitask。下面就为你详细介绍苹果14pro分屏怎么设置。准备工作首先,确保你的苹果14pro运行的是最新系统版本,这能保证分屏功能的稳定性和最佳体验。开启分屏当你打开一个应用程序后,比如正在浏览网页,
近日,我的b站账号竟被禁封了整整一年,这突如其来的打击让我陷入了深深的困惑与反思之中。回想起被禁封的那一刻,内心满是错愕与不解。仔细思索,或许是之前发布的某个视频触及了平台的规则红线。当时,那只是一个我满怀热情制作的普通作品,却未曾料到其中某些内容不符合b站的
在网络浏览成为日常必备活动的当下,一款好的浏览器至关重要。360安全浏览器便是众多用户关注的对象,那它究竟怎么样呢?强大的安全防护360安全浏览器在安全方面表现卓越。它具备实时防护功能,能有效拦截各类网络攻击、恶意软件以及钓鱼网站。当你在浏览网页时,它会时刻为
在数字化的时代,邮箱成为了我们沟通、工作和生活中不可或缺的工具。微软邮箱以其强大的功能和广泛的应用,受到了众多用户的青睐。那么,微软邮箱的正确格式究竟是怎样的呢?今天,就让我们一起来揭开它的神秘面纱。什么是微软邮箱格式微软邮箱格式通常由用户名和域名两部分组成。
本站所有资源(含游戏)均是软件作者、开发商投稿,任何涉及商业盈利目的均不得使用,否则产生的一切后果将由您自己承担!本站将不对任何资源负法律责任,所有资源请在下载后24小时内删除。
如侵犯了您的版权、商标等,请立刻联系我们并具体说明情况后,本站将尽快处理删除,联系
(版权说明注意事项)。若有关在线投稿、无法下载等问题,请与本站客服人员联系
!
用户可自行按线路选择相应的下载点,可以直接点击下载/另存为,若直接点击下载速度太慢,请尝试使用高速下载器。为确保下载的文件能正常使用,请使用WinRAR最新版本解压本站软件。
建议大家谨慎对待所下载的文件,大家在安装的时候务必留意每一步!关于360安全卫士或QQ电脑管家的有关提示,请自行注意选择操作。