用weakref实现内存感知型快照缓存,核心是WeakValueDictionary兜底、内存阈值触发降级、语义化淘汰策略协同;快照对象需避免强引用源数据,配合内存水位监控、finalize清理、__slots__压缩及摘要元数据存储。
用 weakref 实现“内存感知型”快照缓存,核心不是单纯存对象,而是让缓存不阻碍回收、并在内存紧张时主动让步。关键在于三层协同:弱引用兜底 + 内存阈值触发 + 语义化淘汰策略。
避免传统字典把快照对象“钉死”在内存里。WeakValueDictionary 的值是弱引用,只要快照对象外部强引用消失,它自动从缓存中剔除,无需手动清理。
SnapshotWrapper 类实例),再将其放入 WeakValueDictionary
仅靠弱引用不够——它被动等待销毁,而你需主动响应内存压力。结合 psutil.Process().memory_info().rss 实时监控,设定多级响应动作:
gc.collect(2) 强制回收老年代,尤其清理残留的循环引用快照WeakValueDictionary 中仍存活的快照,按“最后访问时间 + 对象大小”加权排序,批量调用 del 显式移除低热度项(此时弱引用未失效,但主动放弃)很多快照长期驻留,不是因为被使用,而是因为被某个闭包、回调或日志模块悄悄持有了强引用。解决方法:
__del__ 或注册 weakref.finalize,记录销毁事件并同步清理关联资源(如临时文件、GPU 张量句柄)weakref.ref 替代普通回调函数中的组件引用,防止快照缓存意外延长组件生命周期ttl(如 max_age=60 秒)和 priority(如 “high”/“low”),后台线程定期扫描,对超时且低优先级的快照提前 del 其弱引用键WeakValueDictionary 只解决“引用不阻塞”,但快照对象本身可能很胖。进一步减负:
__slots__,禁用 __dict__,减少单个实例内存开销 30–50%