这两天的六轮练习合成一篇。第一天是并发标记、多指拖拽、HTTP 范围请求和消息队列,第二天接着把 G1 往下挖(RSet、Full GC、IHOP),前端讲长列表的复用与滚动,数据库那边是 ack 时机和 InnoDB 行锁。中间有一处我当时答错了,文里已经改过来。
并发收集为什么还非得停两次
上次我只答出「增量更新把代价压到重新标记阶段」,没回答那个阶段停不停业务线程。答案是停:remark 本身就是 STW 的,所谓「把代价压到 remark」,不是省掉停顿,而是把原本散在整个并发过程里的麻烦攒成一次很短的停顿。
CMS 的 remark 前面还有一个并发预清理,让应用线程先跑一段、提前把卡表和引用变更加工一部分,减少要重扫的量。但它最后仍然要在 STW 里收尾,只是把活提前做了一部分。
初始标记只标 GC Root 直接引用的那批对象,量小,快,但它必须 STW,因为要拿到一致的对象图起点,不停的话根集合会在标记过程中变。
整个并发标记里最长的活儿是遍历整个对象图,这一段是在并发里跑的。这期间新 new 出来的对象算黑,因为活对象分配出来的东西天然可达,直接当活的处理就不会漏标。
收不完的垃圾去哪儿了
SATB 记下旧引用,代价是产生浮动垃圾:这批对象本轮被判成活,等下一轮 GC 再判一次,那时已经不可达就变白被回收。G1 这轮 Mixed GC 收的那批老年代 Region 里就含着它们。它不是内存泄漏,只是延迟回收。
更糟的情况是并发标记还没跑完,业务线程 new 得太猛,老年代被填满,收集器腾不出空间。CMS 里叫 Concurrent Mode Failure,G1 里对应晋升失败或者 to-space exhausted,常被称作 Evacuation Failure。一旦发生就兜底跑 Full GC,停顿会非常长。
G1 凭什么估得出这块收起来要多久
估算靠历史数据:每个 Region 上次实际回收花了多久、里面活了多少对象,用衰减平均这类统计去推。之所以只能估,是因为这一轮每块里活多少、对象图有多深,只有真扫了才知道,业务本身也在变。
所以 -XX:MaxGCPauseMillis 是目标值不是保证值。设成 10ms 这种很小的数,它只能在「收多少块」上让步,收得很少,GC 频率变高,收不赢垃圾就触发 Full GC 兜底,停顿反而更长。
RSet:只收几个 Region,凭什么不用扫全堆
Young GC 只挑十几个 Eden Region 收,可老年代里可能有字段正指着这些块里的对象。只扫这十几块,那个引用就看不见,对象会被当成垃圾回收掉。G1 的做法是让每个 Region 自带一份 RSet(记忆集),记的是「谁引用了我」,GC 时把它当成额外的一组根一起扫。
不能图省事每次 Young GC 都扫一遍老年代,因为老年代可能好几个 G,为了十几个 Eden Region 把整片老年代扫一遍太不划算。
这份记忆集是应用线程改引用那一刻写进去的,靠写屏障插手记一笔。它不是每条引用都记那么细,主流粒度有三种:coarse 是卡精度,细到卡片;fine 是稀疏,用较小的数组存卡索引;full 只记到 Region 一级,标记整个源 Region。
代价是 RSet 自己占内存,跨 Region 引用越多它就越大,维护它也吃 CPU。不过整堆 Full GC 的时候用不上它,因为那本来就要扫全堆。
掉进 Full GC 之后怎么爬回来
G1 兜底的 Full GC 早期是单线程串行地整堆标记-整理,一直被诟病,JDK 10 之后才并行。它跑完之后会做几件事:重新统计每个 Region 的存活率,知道哪些活得多、哪些活得少;按存活率挑回收价值高的 Region 给后续 Mixed GC 做准备;做标记-整理把碎片压掉;处理 Humongous 大对象区域;重置 RSet 这类辅助结构,好回到正常的 Young GC 和并发标记周期。
线上真看到 Full GC,先看跑完之后老年代占用降没降回来。降回来了,比如从 90% 掉到 30%,说明大部分对象是可回收的,问题在分配太快、晋升太快,或者堆与新生代偏小,对象还没在新生代死掉就涌进了老年代;降不回来,大概率是泄漏,有对象被不该持有的引用链卡着,得 dump 堆查引用链。
这种情况下先动的旋钮是新生代大小(-Xmn 或 -XX:NewRatio)和晋升阈值(-XX:MaxTenuringThreshold),短命对象过早晋升时,加大新生代或调高阈值比一上来猛加 -Xmx 对症。
并发周期什么时候开始:IHOP
G1 不等老年代满了才开始并发标记,它有个提前量参数 -XX:InitiatingHeapOccupancyPercent,缩写 IHOP,默认 45。它数的是老年代占用占整个堆的比例。设太高,会出现标记还没跑完老年代就满了的情况,接上之前说的 Concurrent Mode Failure 或晋升失败,兜底就是 Full GC。
JDK 9 之后这个阈值会自己动。G1 观察每次并发周期里老年代分配掉多少、标记周期多长、存活对象增长成什么样,如果按当前节奏标记跑不完老年代就要满,或者标记期间居然发生了 Full GC,就把 IHOP 往下调,让下一次更早开始标记。
两根手指按同一个滑块怎么防
这格上次只说对了现象,这次给了代码。pointerdown 进来第一件事看 activePointerId 有没有值,有就直接 return 忽略这根手指;pointermove、pointerup、pointercancel 三个回调都先比 e.pointerId !== activePointerId,不等就跳过。
真要做双指缩放或双指拖动,单个 id 就不够了,要换成按 pointerId 管理的 Map:pointerdown 存进去,pointermove 更新对应 id 的坐标,pointerup 和 pointercancel 删掉,两个指针之间算距离做缩放。
收尾的两个事件顺序是 pointercancel 先到,表示这条指针的交互被浏览器抢走(滚动或手势导航接管、元素被移除),随后释放指针捕获并派发 lostpointercapture。被 cancel 打断之后,除了清 activePointerId,还要撤销未提交的临时位移、清理临时状态和 rAF,别留个半拉子 UI。
只动 transform 的好处是怎么丢掉的
拖拽过程中顺手改 width、top 这类布局属性,好处立刻没了,因为又回到重排。给元素加 filter、opacity 动画、box-shadow 动画,或者在 transform 元素内部频繁改文字和背景,也会新建层或改变合成链。
will-change: transform 给一大堆元素常驻加上,每个元素都被提成合成层,显存占满、合成线程要维护的层变多,低端设备会掉帧。它该在动画开始前加、结束后撤,不是常驻属性。
想确认某个元素有没有被单独提层,开 DevTools 的 Layers 面板看合成层列表和尺寸,或者 Rendering 里的 Layer borders,Performance 面板也有 compositing 轨道。
提层之后的副作用是里面的文字可能发虚:元素被非整数像素定位(比如 translate3d(0.5px, ...))、transform: scale 放大导致栅格化位图被拉伸、3D 变换后分辨率没跟上,还有动画结束没撤 will-change、层还在但内容变了。
十万行列表不可能真渲染十万行
直接 v-for 全渲染,DOM 节点几十万个,首次渲染、每次更新的 diff、内存占用、滚动帧率全跟着崩。我自己做系统时三千条左右就扛不住了,滑动列表卡,甚至点按钮都能卡到崩溃。
虚拟滚动只渲染视口内会显示的那几行,十万条和一百条的成本就差不多。该渲染第几条到第几条,靠滚动容器的 scrollTop 除以行高算,但行高不固定时不能这么直接除。
行高不固定的难点是没渲染过就不知道它多高,只能先估、渲染完再量、量到的结果缓存下来并在失效时重测;滚动到未知位置时不知道对应哪一行,要靠高度缓存加二分查找定位。滚动条长度则用一个按估算总高度撑开的占位容器来维持,不然滚动条长度和位置会跳。
虚拟滚动:省下来的成本又被什么吃回去
滚动时那几十行 DOM 不是销毁重建,而是一批节点换个内容继续用。销毁或者新建的开销太大,滚动一快就卡死。
这里有个坑:模板里 key 绑的是相对下标(0 到几十循环)时,往前滚一格,真实数据整体错了一位,可 key 没变,Vue 认为还是同一行,只去 patch 内容。结果就是输入框里没提交的值、图片的加载状态、动画和焦点,跟着串到别的行去了。key 该绑唯一业务标识,比如数据本身的 id。
行内有输入框或展开状态时还漏一个麻烦:滚出可视区被回收的节点,组件的本地状态就没了,得把状态提到列表数据里或者单独缓存起来。
overscan 是视口上下多渲染几行的缓冲。不设它、严格只渲染视口那几行,快速滑动时新行还没渲染出来,用户先看到白底或空白闪烁。缓冲区调大也有代价,多渲染的 DOM 占内存,滚动时每次 patch 的量上升,合成与布局成本跟着涨,调得过大就退化成渲染很多行,省下来的成本又还回去一部分。
scroll 回调里直接改渲染范围要降频,滚动事件每帧可能触发多次,在 rAF 里一帧只更新一次,别在事件里同步读写布局。
浏览器自带的「先别渲染」开关
一个长页面,下半部分好几屏都在视口外,但还是被老老实实渲染、布局、绘制了。CSS 里有个 content-visibility: auto,让元素不在视口附近时跳过这些工作,滚到跟前再补上,省的是渲染、布局和绘制,DOM 与样式还在。
它和虚拟滚动最大的不同是节点还在 DOM 里,不用自己写算范围的代码。
用了之后容易碰到滚动条长度乱跳或者页面高度一开始算错,因为被跳过的元素没有实际渲染高度,浏览器不知道该占多少空间。contain-intrinsic-size 就是给它一个预估尺寸,让跳过阶段也能算出合理的页面高度和滚动条长度。
content-visibility: hidden 和 display: none 不同:前者只是跳过内容渲染,元素的盒子还在、占位保留、布局计算被跳过;后者直接从渲染树消失,不占空间也不可访问。
列表往上长,视口为什么会自己往下跳
聊天记录那种滚到顶部加载更多历史消息的场景,新内容插在前面,scrollTop 的数值没变,但它对应的内容变了,上面变高了,用户正在看的那条就被顶下去。
最稳的补偿办法是插入前后各量一次 scrollHeight,差多少就把 scrollTop 加上多少,视口还停在同一段内容上。
图片异步加载完高度突然变大,是同一类跳动。提前给它留好位置,用 aspect-ratio 或已知宽高比预排,图片加载完就不改容器尺寸。
浏览器其实自带滚动锚定,CSS 属性是 overflow-anchor,默认开着,会挑一个锚点元素,上方内容变化时自动调整滚动位置保持它不动。但它有失效和要关掉的场景:Safari 不支持;自己已经做了手动补偿时,两边各调一次 scrollTop 会双重补偿反而抖动,要设 overflow-anchor: none;希望新内容把下方推开、优先展示新内容而不是锚在原处时,也该关掉。
多段 Range 的响应体
一次要两段,客户端发 Range: bytes=0-499,1000-1499。服务端回 206,Content-Type 写成 multipart/byteranges; boundary=THIS_STRING_SEPARATES,每一段前面各自带自己的 Content-Type 和 Content-Range,段与段之间用 --boundary 隔开,整个响应体用 --boundary-- 收尾。
只请求一段时不搞 multipart,因为没有要分隔的东西,响应体直接就是那段裸字节,头里用 Content-Range 说明范围就够。
If-Range:校验不过到底回什么
第一天的复盘里我写的是「文件变了回 412」,这是错的。按 RFC 9110,If-Range 校验不过要忽略 Range 头、回 200 加完整的当前文件。
为什么这么定:412 的话客户端还得再发一次不带 Range 的请求才能拿到整份文件,多跑一趟;412 属于 If-Match、If-Unmodified-Since 那一族,语义是前置条件不满足、这个请求作废,而 If-Range 想表达的是「别给我半截」,不是「别给我」。
和 If-None-Match 的分工也理清了:If-Range 管这次给部分还是给整份,文件没变给 206、变了给 200;If-None-Match 管缓存新鲜度,没变回 304 让客户端用本地缓存。它的值只能是一个 entity-tag 或者一个 HTTP-date,两个都写不合法。
2G 文件切八段并发拉,怎么不拼坏
八个请求同时飞出去,回来的顺序肯定不是发出去的顺序,不能谁先回来谁往后追加。要靠每段 Content-Range 里的 bytes start-end/total 认出位置,按偏移写进文件的对应位置,或者先落成临时分片最后按序号合并。
拼完之后校验,整份算 hash 跟服务端 ETag 或官方 checksum 比对,或者每段各自校验加总长核对。某一段失败只重试那一段,不用整份重下,设个重试次数和退避,多次失败再降级。
到了 CDN 或 Nginx 那层,如果节点已经缓存了完整文件,它可以在本地按 Range 切段返回;没命中才回源取对应范围,或者回源拿整份再缓存。具体怎么走取决于那层支持不支持 Range。
消息队列到底为了什么
下单接口里扣库存、写订单、发短信、加积分串着做,用户得转圈等全部完成。把这些非核心步骤挪到消息队列后面,省掉的是同步等待的总耗时,接口从「全部做完才返回」变成「核心几件做完就返回」,短信和积分失败了还能重试补偿。
另外两个常被提的用途是解耦和削峰:下单服务不用直接调短信、积分服务,只发消息,谁需要谁订阅;流量高峰先堆到队列,后端按自己的能力消费,不直接把数据库和第三方接口打垮。
代价也得认:消息可能重复投递,消费端要幂等;本地事务和发消息不在一个事务里,可能库改了消息没发出去,要用事务消息、本地消息表或 outbox 兜;多分区多消费者下顺序会乱,得按 key 分区或者业务上容忍;还有积压要监控、集群要运维、数据变成最终一致、链路变长排查更麻烦。
所以它不是默认就该加的东西。有明确的异步、解耦、削峰需求,下游有慢操作或第三方接口,流量有峰值需要缓冲,这几条同时成立时才划算。
消费完才 ack,图的是什么
消费者拿到消息、业务处理成功之后告诉 broker 这条处理完了,这个动作叫 ack,RabbitMQ 里是 basic.ack,Kafka 那边是提交 offset。
如果图省事,消息一拉下来就先自动 ack,然后才去写库,中途进程被 kill 了,broker 认为已经消费完、消息删掉,那笔业务就永远没人做了。
处理失败时的常规做法是不 ack 让它重投,或者进重试;重试几次还不行,扔进死信队列或重试主题,由人工或者补偿任务接手。
既然注定会被重投,同一条消息处理两遍时就要靠幂等挡住双份数据:用业务唯一键(订单号、流水号)做数据库唯一约束,重复插入直接冲突;或者用 Redis 或库记录已处理的业务 ID,处理前先查,处理过就跳过。
InnoDB 的行锁,锁在什么上面
InnoDB 的行锁锁的不是行数据本身,而是索引记录,聚簇索引和二级索引上的记录都算。
UPDATE t SET a = 1 WHERE name = '张三' 这句,如果 name 上压根没建索引,它没办法通过索引定位到那一行,只好全表扫描,扫到的每一行都得加锁,效果等于把整张表锁了。
线上「一条 UPDATE 把别人全堵住」最常见的原因就是过滤条件没走索引。上线前用 EXPLAIN 看执行计划,type 列是 ALL 说明全表扫描,是危险信号,确保 WHERE 条件走索引,UPDATE 和 DELETE 尤其要确认。
真出事了看锁等待关系:MySQL 8.0 之前查 information_schema.INNODB_LOCK_WAITS 和 INNODB_LOCKS,8.0 之后对应 performance_schema.data_locks 与 data_lock_waits,能看到它到底锁了几行。