网易首页 > 网易号 > 正文 申请入驻

6000个文件装2.53秒,uv新解包后端快在哪

0
分享至

一个包含 6000 个小文件的源码分发包,用 uv 安装,五次运行的中位耗时是 2.53 秒。同一个二进制文件切回旧的解包代码,中位数是 3.55 秒;换成改动前的正式版本 0.12.8,则是 3.76 秒。


这不是单独测 tar 解包的微基准,而是真实安装跑出来的数字。测试包叫 bigpkg,6000 个文本文件,未压缩共 48MB,打成 gzip 压缩包后 36MB,配一个最简的 pyproject.toml,用 setuptools 后端构建,每次安装都加 --no-deps,并且每次都用全新的虚拟环境和全新的缓存目录。

uv 是 Astral 用 Rust 写的工具,用来替代 pip、venv 这一套。2026 年 10 月 9 日发布的 0.13.0 版本,把解压 .tar.gz 的库从 astral-tokio-tar 换成了 tar-codec。发布说明里写,新后端“在读取归档时执行更严格的校验”,并提醒旧版本能接受的、带硬链接或不受支持的 tar 扩展的归档,现在可能被拒绝。留了一个后门:设置 UV_LEGACY_TAR_BACKEND=1 就能回到旧代码路径。正因为有这个环境变量,测试才能保持二进制不变,只切换后端。

对比同一二进制下旧标志的中位耗时,降幅是 29%;对比真正的旧版本 0.12.8,降幅是 33%。如果只看最快的一次,差距没那么夸张——2.50 秒对 3.07 秒和 3.21 秒,大约 18% 到 22%,因为旧路径里最慢的离群值把中位数抬得比最小值更多。但十五次运行方向一致:在这个负载上,tar-codec 没有输给旧路径。

测试刻意选了小文件多的包,而不是一个大文件,因为 tar 的逐条目开销正是在这种场景下显形。最初用 400 个文件、8MB 数据的包试,三种配置的耗时落在噪声范围内,0.96 秒到 2.6 秒,没有清晰排序——启动 Python 子进程跑 setuptools 构建后端的固定成本,盖过了解包时间。放大到 6000 个文件,效果才看得出来。自己复现时如果觉得“没差别”,很可能是负载太小,而不是这个特性没生效。

它拒绝什么,旧版又悄悄做了什么

用 Python 的 tarfile 模块造了四个对抗性归档:一个硬链接指向 ../../../../../../etc/passwd,一个绝对路径符号链接指向 /etc/passwd,一个缺少必需头部的 GNU 稀疏文件条目,还有一个字符设备节点。

四个里有三个结果一样。这一点其实不利于标题里的结论:针对硬链接和符号链接的路径逃逸防护并不是 0.13 才有的。旧后端早就拒绝了,措辞几乎相同。差别在报错信息——新后端会指出具体的字节偏移,直说哪里不对,而不是抛出一个操作系统层面的“Invalid argument”。如果指望 0.13 堵上 0.12 留下的硬链接逃逸口子,那本来就不需要堵,门一直是关的。

真正的差别在字符设备。安装一个内嵌字符设备的包,新后端直接报错:在字节 2560 处,无法解压不支持的成员类型 CharacterDevice。而加上旧标志、或者用 0.12.8,同一个归档能干净装完,“Resolved 1 package”“Installed 1 package”,没有任何警告。去 site-packages 里找那个设备节点,也不存在——旧后端没有创建它,只是把这条 tar 条目丢在地上,没告诉任何人。两种情况安装都报告成功。

这才是实际的行为变化:不是新增了对危险内容的拒绝,而是把一次静默的、没有文档说明的包内容截断,换成了响亮的失败。对于一个本就不该含设备节点的包,这没问题;对于一个出于某种原因带了不寻常内容的包,新行为至少会告诉你,装上的东西和你以为的不一样。

升级的一次性成本

0.13.0 的更新日志说缓存条目格式变了,升级后 uv“可能重新下载或重建依赖”。先用 0.12.8 填满一个缓存目录,再让 0.13.6 指向同一目录安装同一个归档:新版本把它当成未缓存,重新构建了一遍。缓存目录从 52MB 涨到 104MB,而不是保持不变。这是升级后第一次运行的一次性成本,不是持续开销,但在刚升完 uv 就去给 CI 流水线计时之前值得知道——升级后的第一次运行不会反映稳态数字。

另外两个小检查。0.13 稳定了一项改动:在 Python 3.10 及以上版本,不再往新建虚拟环境里写 _virtualenv.py 和 _virtualenv.pth,与 virtualenv 自身从 21.6.0 起的做法一致。直接验证过:0.12.8 在 Python 3.11 上创建的环境有 15 个文件,包含那两个;0.13.6 是 13 个。每个新环境都少两个文件。

还用八个 uv pip install 进程并发安装同一个大归档、共享一个缓存目录,看新解包路径处理竞争是否更差。八个全部成功,没有锁错误,没有损坏的安装,总墙钟时间 25 秒。这里没发现什么值得展开的东西,就一行带过。

如果 CI 里装的是源码分发包——自己的私有包、vendor 进来的依赖,任何不是预构建 wheel 的东西——升到 0.13 在安装时间上是直接的收益,普通归档上没发现副作用。唯一值得先查的,是构建流水线里有没有东西依赖非普通文件、符号链接或常规硬链接之外的 tar 条目;那些现在会硬失败,而不是留下静默的空缺。这大概率正是你想要的结果,但它会以一个新错误的形式出现在下一次构建里,而不是读 diff 就能注意到的差异。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
APEC会议近700辆红旗车全流程接待,“豪华车队”亮相深圳,网友感慨:简直是一支“外交跑腿天团”

APEC会议近700辆红旗车全流程接待,“豪华车队”亮相深圳,网友感慨:简直是一支“外交跑腿天团”

极目新闻
2026-11-18 10:24:16
世界领先!新加坡全面拆除公路收费站,改用“卫星定位”隔空扣费

世界领先!新加坡全面拆除公路收费站,改用“卫星定位”隔空扣费

三言四拍
2026-11-18 18:40:16
普京、特朗普等多国领导人抵达深圳

普京、特朗普等多国领导人抵达深圳

大风新闻
2026-11-18 20:53:16
杨瀚森又遭弃用:本季第6次DNP 央视播一半中途弃播比赛表态度

杨瀚森又遭弃用:本季第6次DNP 央视播一半中途弃播比赛表态度

醉卧浮生
2026-11-18 11:38:39
美国、俄罗斯、欧洲猛然发现一件头疼事:低估了中国,高估了自己

美国、俄罗斯、欧洲猛然发现一件头疼事:低估了中国,高估了自己

文史达观
2025-03-27 12:59:20
梅西接班人!22岁小巨星狂舞:左右脚世界波 万人高歌致敬

梅西接班人!22岁小巨星狂舞:左右脚世界波 万人高歌致敬

叶青足球世界
2026-11-18 09:02:40
为什么说以张维迎为代表的一批所谓新自由主义经济学家本质上是资本、富豪和权贵的代言人呢?

为什么说以张维迎为代表的一批所谓新自由主义经济学家本质上是资本、富豪和权贵的代言人呢?

回京历史梦
2026-11-18 10:06:16
普京盼了好几年的主桌,特朗普却掐着表想走,这饭局有意思

普京盼了好几年的主桌,特朗普却掐着表想走,这饭局有意思

远方风林
2026-11-17 19:05:17
山姆兼职员工“上二休五”,月收入从5000降到800

山姆兼职员工“上二休五”,月收入从5000降到800

蓝鲨消费
2026-11-18 10:07:11
清华教师直言“不会上课了”!当大学生通过AI工具,可以高效完成基础学习工作,传统课堂正在被颠覆!

清华教师直言“不会上课了”!当大学生通过AI工具,可以高效完成基础学习工作,传统课堂正在被颠覆!

学术眺望
2026-11-18 15:55:03
泰国总理回到祖籍地广东太激动!飙粤语"猴开森"

泰国总理回到祖籍地广东太激动!飙粤语"猴开森"

看看新闻Knews
2026-11-18 17:20:13
西方国家再怎么刻意疏远俄罗斯,到了深圳,还是要顾及中国的面子!卡尼出发来中国前,被问到会不会在深圳和普京同框拍照,他给出答复

西方国家再怎么刻意疏远俄罗斯,到了深圳,还是要顾及中国的面子!卡尼出发来中国前,被问到会不会在深圳和普京同框拍照,他给出答复

扶苏聊历史
2026-11-18 14:57:40
女子和2个男友缠绵“爽翻天”,打胎多次怀恨在心,2019年让他俩互相残杀

女子和2个男友缠绵“爽翻天”,打胎多次怀恨在心,2019年让他俩互相残杀

汉史趣闻
2026-11-18 18:40:10
“感谢中方特殊安排”,特朗普又带着高规格代表团来了

“感谢中方特殊安排”,特朗普又带着高规格代表团来了

中国新闻周刊
2026-11-18 20:22:08
又是湘雅二院?挂着5项科研基金的论文拿虾滑冒充肿瘤!国家科研经费拿去给AI充会员了?

又是湘雅二院?挂着5项科研基金的论文拿虾滑冒充肿瘤!国家科研经费拿去给AI充会员了?

聊斋新志
2026-11-18 16:53:43
加纳政党代表:社会主义、共产主义思潮正在全球复苏,中国人民正引领这一进程

加纳政党代表:社会主义、共产主义思潮正在全球复苏,中国人民正引领这一进程

极目新闻
2026-11-18 14:20:01
克里米亚大桥被炸塌,对俄罗斯意味着什么?

克里米亚大桥被炸塌,对俄罗斯意味着什么?

山河路口
2026-11-18 18:00:20
普京见到最想见的人,在中国主场上,说出掏心窝子的话

普京见到最想见的人,在中国主场上,说出掏心窝子的话

听风看局
2026-11-18 17:06:26
高盛对2027年中国经济判断:中国房地产最坏时刻,可能已经过去了

高盛对2027年中国经济判断:中国房地产最坏时刻,可能已经过去了

城事堂
2026-11-17 09:03:52
武汉32岁女子和丈夫摆摊卖馄饨还债,此前开牛肉饭店9个月亏40万元,每周不定时收到催债电话,当事人:一步一个脚印总能翻身

武汉32岁女子和丈夫摆摊卖馄饨还债,此前开牛肉饭店9个月亏40万元,每周不定时收到催债电话,当事人:一步一个脚印总能翻身

极目新闻
2026-11-18 22:11:29
2026-11-19 01:12:49
报错免疫体
报错免疫体
一名在需求评审和数据异常中反复横跳的产品运营。
241文章数 87关注度
往期回顾 全部

科技要闻

离职后首份声明!黄仁勋认错愿回归

头条要闻

“感谢中方特殊安排” 特朗普又带着高规格代表团来了

头条要闻

“感谢中方特殊安排” 特朗普又带着高规格代表团来了

体育要闻

“中超卡里乌斯”,成了大连的夺冠英雄

娱乐要闻

主持人张泉灵被曝猛料,公司成老赖

财经要闻

黄仁勋留下的高分成绩单,能延续吗?

汽车要闻

全新红旗H9最有意思的地方,是它开始有自己的豪华逻辑了

态度原创

数码
艺术
手机
亲子
军事航空

数码要闻

铭凡5L台式机T5 Max-388上市:48GB + 1TB,到手价9699元

艺术要闻

洛阳发现唐代墓志,将魏碑、唐楷精髓融于一体,比欧颜柳赵的字更耐看!

手机要闻

2nm双芯悬案!vivo X Fold7不跟风阔折叠,先把散热账算明白了

亲子要闻

当婴配市场进入存量博弈,有机赛道如何破局突围?

军事要闻

美军再袭伊朗格什姆岛

无障碍浏览 进入关怀版