双十一京东技术也来送福利啦!第一篇活动仍未结束,快快写留言领福利~【京东技术双十一】记一次线上问题引发的对 Mysql 锁机制分析;本篇文章是【京东技术双十一】福利文章的第二篇哦~
获奖基本条件:关注京东技术公众号并转发本文至朋友圈
截至11月21日10:00
转发本文至朋友圈集赞50个及以上,将有机会获京东京造加湿器
集赞30个及以上,将有机会获JOY法兰绒毯子
集赞10个及以上,将有机会获JOY毛绒公仔
请于11月21日10:00前将集赞截图私信给本公众号
奖品数量有限,先到先得!
注:每人仅可获奖一次;领奖方式将另行通知。
在今年的敏捷团队建设中,我通过Suite执行器实现了一键自动化单元测试。Juint除了Suite执行器还有哪些执行器呢?由此我的Runner探索之旅开始了!大家好,我是王蒙恩,一名“整顿职场”的00后。作为一名去年刚刚加入京东的JDS校招生,我有幸成为本次CDP平台的双十一备战负责人。虽然早在实习的时候就经历过大促,但是真正组织整个部门的备战还是很难忘的。于是提起笔,给自己做一个大促总结,记录下双十一大促期间的经历、感受、收获。
双十一认知变化
理解,首先 MCube 会依据模板缓存状态判断是否需要网络获取最新模板,当获取到模板后进行模板加载,加载阶段会将产物转换为视图树的结构,转换完成后将通过表达式引擎解析表达式并取得正确的值,通过事件解析引擎解析用户自定义事件并完成事件的绑定,完成解析赋值以及事件绑定后进行视图的渲染,最终将目标页面展示到屏幕。记得我还在上大学的时候对双十一的印象就是和室友熬夜在整点的时候疯狂下单,本人有幸成为过哈尔滨南岗区剁手榜前500名。一年前,我正式入职京东,告别了校园生活。那时候在双十一这一天,大家都很忙碌,加班到很晚。对我来说,双十一意味着免费的晚餐,还有非常多的美食(真香警告⚠️)。在今年的618大促期间,我(打酱油的)参与了我们部门的备战工作。我负责其中一个接口的压测,以及一些配置报警和统计数据的工作。得知本次大促由我来负责这个消息后,我充满了兴奋和动力,同时也意识到会面临巨大的技术压力和挑战。但这也是一次非常宝贵的技术锻炼和成长机会。
CDP平台是什么
理解,首先 MCube 会依据模板缓存状态判断是否需要网络获取最新模板,当获取到模板后进行模板加载,加载阶段会将产物转换为视图树的结构,转换完成后将通过表达式引擎解析表达式并取得正确的值,通过事件解析引擎解析用户自定义事件并完成事件的绑定,完成解析赋值以及事件绑定后进行视图的渲染,最终将目标页面展示到屏幕。我本次所备战的系统人群画像(CDP)是一个以“用户为中心”,围绕数据融合、标签生产、群体数据服务(人群命中、标签取值、人群下载)、人群分析与洞察、人群应用与服务全链路提供产品能力,赋能业务完成精细化营销与深度运营,实现数据驱动全域运营智能增长,是京东科技超p0级系统,最核心的底层服务之一,是科技侧最重要的实现精准营销的手段。目前画像平台支持了16+跨BGBU二级部门,日均调用量100亿+次,它被应用到支付、消金、财富等各种核心业务的用户拉新、交易转化、促活等核心链路中。
图1.
1、黄金链路服务,支持超过16+跨BGBU二级部门,日均调用量100亿+次。2、为鹰眼、Molo、京音、乐高等提供营销推荐服务。5、收银台、商详、购物车、结算页通过下载群体数据,本地化支撑营销决策场景的数据服务。
图2. 如何组织备战理解,首先 MCube 会依据模板缓存状态判断是否需要网络获取最新模板,当获取到模板后进行模板加载,加载阶段会将产物转换为视图树的结构,转换完成后将通过表达式引擎解析表达式并取得正确的值,通过事件解析引擎解析用户自定义事件并完成事件的绑定,完成解析赋值以及事件绑定后进行视图的渲染,最终将目从大促启动会开始后我就开始计划我们本次备战的整体节奏。
图3.
以上内容介绍了CDP平台有多么重要,那么画像系统备战的核心挑战在“如何保障在大流量高并发情况下系统稳定提供高性能服务”,主要表现在:稳定性、性能两项上。稳定性:
1.在系统遇到紧急情况时,如何容灾快速恢复。
2.在大流量情况下,如何做好系统的流量管控,保障系统的可用。性能:在大数据量近百万级TPS流量下如何保障系统性能(TP999:50ms以下)。流量:黄金流程最底层环节,预估流量会被放大,整体流量备战预估到98wTPS其实观察我们每天日常的流量就会发现,每天我们都在进行“大促”,并且日常也会存在流量激增。
图4.
系统梳理
这一阶段主要是梳理参加大促的核心应用,我觉得最重要的一点就是梳理出来618之后都有哪些变化?因为系统总是在不断的迭代升级,一是要确保这些变化项不会影响系统的性能,二是如果有不能按照之前大促的经验评估的新的备战接口要重点去做流量收集。梳理出系统后就要进行单机压测根据压测的结果评估性能是否达标,也是对这半年的迭代交一份答卷。最后还要根据压测结果配置JSF单机限流(前置单机接口层)——稳定性保障。容量规划
我针对容量规划主要分为两个方面,一是重新进行应用的单机压测明确我们目前单机的承载量最大是多少,二是收集上下游业务方的流量,根据这两个方面进行评估算出这次大促要扩容多少资源。在根据收集上来的业务方流量提报进行应用限流,目的是保证大部分流量可控)——稳定性保障。容灾备案
梳理出所有的系统降级预案,系统核心节点灾备做到一键切换,明确操作手册,快速操作——稳定性保障。降级预案
让你的系统“坚挺不到”的最后一个大招——降级,我用一句话来概括就是将有限的资源最大化。比如我们的系统在峰值点就会暂停群体、标签的加工,也会暂停上游非重保的MQ作业,就是为了腾出更多资源给核心程序使用,以最大化保证核心业务的可用性。军演压测
在这个阶段集团会组织多次的线上集群统一压测,(在这期间进行所有的降级演练、确保所有的降级开关可用)——稳定性保障。实时监控
重新梳理并配置系统关键链路的报警配置(电话、内部办公app报警),并且我还会安排专人备战系统各个核心服务,专人专服,提升处置效率。“惊悚时刻”
11.4日13:51分接到报警电话。
11.4日13:52分查看命中接口SGM的tp999激增,同时我马上给R2M运维老师打电话沟通得知原因。
11.4日13:53分我快速操作系统的灾备开关将系统切换到备链路,在这里我给大家的建议就是一定不要犹豫,不要上来就一直追查原因快速的做出反应和判断,最小化的减少对线上用户的影响。
以下这张图可以看到在两分钟内系统就恢复了正常
图5.
在大促期间的稳定性保障一般属于应急策略,因为在前期梳理系统时我详细的梳理了系统的降级预案明确操作手册,系统核心节点也有灾备能力并且在集团组织压测阶段也进行了降级演练,所以在出现问题时我们快速操作降级,在最短时间内解决了接口的性能问题。
图6. 总结与感悟理解,首先 MCube 会依据模板缓存状态判断是否需要网络获取最新模板,当获取到模板后进行模板加载,加载阶段会将产物转换为视图树的结构,转换完成后将通过表达式引擎解析表达式并取得正确的值,通过事件解析引擎解析用户自定义事件并完成事件的绑定,完成解析赋值以及事件绑定后进行视图的渲染,最终将目备战2023京东双十一是一次非常宝贵的学习和成长机会。1.在这次备战初期梳理阶段,我学到了很多专业知识,也锻炼了自己的团队协作和问题解决能力。尤其在梳理系统架构变化点阶段能从各个角度(稳定、成本、运维)来了解为什么会这样变化。2. 在大促当天大家都会在会议室里集中备战,我确实很紧张,但是我会组织大家再一次巡检所有的系统,核对降级列表、对其他系统的限流配置。对于我来说在晚上8点前后10分钟这个时间段是度过的最慢的并且也是最最最紧张的时候。在这20分钟里,我要进行通知用户降级、操作系统降级、观测线上系统监控、恢复降级,并且要列张表格让团队每位小伙伴都有专门的监控项确保实时保障系统的稳定性。3.最后当系统在峰值点运行正常,并顺利应对高并发压力时,我也会感受到巨大的成就感和满足感。大促确实很累,需要准备2个月左右的时间,大促期间还要有好几天到后半夜甚至通宵。但从某种角度上来讲大促更像是一次技术大考,一次全体人员的节日,未经历过是无法体会的,不经历多次是无法全面了解的,所以尽情享受吧。
最后最后理解,首先 MCube 会依据模板缓存状态判断是否需要网络获取最新模板,当获取到模板后进行模板加载,加载阶段会将产物转换为视图树的结构,转换完成后将通过表达式引擎解析表达式并取得正确的值,通过事件解析引擎解析用户自定义事件并完成事件的绑定,完成解析赋值以及事件绑定后进行视图的渲染,最终将目
图7.战斗战斗,只做第一! 集赞赢福利理解,首先 MCube 会依据模板缓存状态判断是否需要网络获取最新模板,当获取到模板后进行模板加载,加载阶段会将产物转换为视图树的结构,转换完成后将通过表达式引擎解析表达式并取得正确的值,通过事件解析引擎解析用户自定义事件并完成事件的绑定,完成解析赋值以及事件绑定后进行视图的渲染,最终将目再次介绍本文对应【京东技术双十一】福利的获取方式
基本条件:关注京东技术公众号并转发本文至朋友圈
截至11月21日10:00
转发本文至朋友圈集赞50个及以上,将有机会获京东京造加湿器
集赞30个及以上,将有机会获JOY法兰绒毯子
集赞10个及以上,将有机会获JOY毛绒公仔
请注意:请于11月21日10:00前将集赞截图私信给本公众号!
奖品数量有限,先到先得!
注:每人仅可获奖一次;领奖方式将另行通知;奖品图片仅供参考。

打造SAAS化服务的会员徽章体系,可以作为标准的产品化方案统一对外输出。结合现有平台的通用能力,实现会员行为全路径覆盖,并能结合企业自身业务特点,规划相应的会员精准营销活动,提升会员忠诚度和业务的持续增长。底层能力:维护用户基础数据、行为数据建模、用户画像分析、精准营销策略的制定▪功能支撑:会员成长体系、等级计算策略、权益体系、营销底层能力支持
▪用户活跃:会员关怀、用户触达、活跃活动、业务线交叉获客、拉新促活