pnpm对npm及yarn降维打击详解


Posted in Javascript onAugust 05, 2022

正文

大家最近是不是经常听到 pnpm,我也一样。今天研究了一下它的机制,确实厉害,对 yarn 和 npm 可以说是降维打击。

那具体好在哪里呢? 我们一起来看一下。

我们按照包管理工具的发展历史,从 npm2 开始讲起:

npm2

用 node 版本管理工具把 node 版本降到 4,那 npm 版本就是 2.x 了。

pnpm对npm及yarn降维打击详解

然后找个目录,执行下 npm init -y,快速创建个 package.json。

然后执行 npm install express,那么 express 包和它的依赖都会被下载下来:

pnpm对npm及yarn降维打击详解

展开 express,它也有 node_modules:

pnpm对npm及yarn降维打击详解

再展开几层,每个依赖都有自己的 node_modules:

pnpm对npm及yarn降维打击详解

也就是说 npm2 的 node_modules 是嵌套的。

这很正常呀?有什么不对么?

这样其实是有问题的,多个包之间难免会有公共的依赖,这样嵌套的话,同样的依赖会复制很多次,会占据比较大的磁盘空间。

这个还不是最大的问题,致命问题是 windows 的文件路径最长是 260 多个字符,这样嵌套是会超过 windows 路径的长度限制的。

当时 npm 还没解决,社区就出来新的解决方案了,就是 yarn:

yarn

yarn 是怎么解决依赖重复很多次,嵌套路径过长的问题的呢?

铺平。所有的依赖不再一层层嵌套了,而是全部在同一层,这样也就没有依赖重复多次的问题了,也就没有路径过长的问题了。

我们把 node_modules 删了,用 yarn 再重新安装下,执行 yarn add express:

这时候 node_modules 就是这样了:

pnpm对npm及yarn降维打击详解

全部铺平在了一层,展开下面的包大部分是没有二层 node_modules 的:

pnpm对npm及yarn降维打击详解

当然也有的包还是有 node_modules 的,比如这样:

pnpm对npm及yarn降维打击详解

为什么还有嵌套呢?

因为一个包是可能有多个版本的,提升只能提升一个,所以后面再遇到相同包的不同版本,依然还是用嵌套的方式。

npm 后来升级到 3 之后,也是采用这种铺平的方案了,和 yarn 很类似:

pnpm对npm及yarn降维打击详解

当然,yarn 还实现了 yarn.lock 来锁定依赖版本的功能,不过这个 npm 也实现了。

yarn 和 npm 都采用了铺平的方案,这种方案就没有问题了么?

并不是,扁平化的方案也有相应的问题。

最主要的一个问题是幽灵依赖,也就是你明明没有声明在 dependencies 里的依赖,但在代码里却可以 require 进来。

这个也很容易理解,因为都铺平了嘛,那依赖的依赖也是可以找到的。

但是这样是有隐患的,因为没有显式依赖,万一有一天别的包不依赖这个包了,那你的代码也就不能跑了,因为你依赖这个包,但是现在不会被安装了。

这就是幽灵依赖的问题。

而且还有一个问题,就是上面提到的依赖包有多个版本的时候,只会提升一个,那其余版本的包不还是复制了很多次么,依然有浪费磁盘空间的问题。

那社区有没有解决这俩问题的思路呢?

当然有,这不是 pnpm 就出来了嘛。

那 pnpm 是怎么解决这俩问题的呢?

pnpm

回想下 npm3 和 yarn 为什么要做 node_modules 扁平化?不就是因为同样的依赖会复制多次,并且路径过长在 windows 下有问题么?

那如果不复制呢,比如通过 link。

首先介绍下 link,也就是软硬连接,这是操作系统提供的机制,硬连接就是同一个文件的不同引用,而软链接是新建一个文件,文件内容指向另一个路径。当然,这俩链接使用起来是差不多的。

如果不复制文件,只在全局仓库保存一份 npm 包的内容,其余的地方都 link 过去呢?

这样不会有复制多次的磁盘空间浪费,而且也不会有路径过长的问题。因为路径过长的限制本质上是不能有太深的目录层级,现在都是各个位置的目录的 link,并不是同一个目录,所以也不会有长度限制。

没错,pnpm 就是通过这种思路来实现的。

再把 node_modules 删掉,然后用 pnpm 重新装一遍,执行 pnpm install。

你会发现它打印了这样一句话:

pnpm对npm及yarn降维打击详解

包是从全局 store 硬连接到虚拟 store 的,这里的虚拟 store 就是 node_modules/.pnpm。

我们打开 node_modules 看一下:

pnpm对npm及yarn降维打击详解

确实不是扁平化的了,依赖了 express,那 node_modules 下就只有 express,没有幽灵依赖。

展开 .pnpm 看一下:

pnpm对npm及yarn降维打击详解

所有的依赖都在这里铺平了,都是从全局 store 硬连接过来的,然后包和包之间的依赖关系是通过软链接组织的。

比如 .pnpm 下的 expresss,这些都是软链接,

pnpm对npm及yarn降维打击详解

也就是说,所有的依赖都是从全局 store 硬连接到了 node_modules/.pnpm 下,然后之间通过软链接来相互依赖。

官方给了一张原理图,配合着看一下就明白了:

pnpm对npm及yarn降维打击详解

这就是 pnpm 的实现原理。

那么回过头来看一下,pnpm 为什么优秀呢?

首先,最大的优点是节省磁盘空间呀,一个包全局只保存一份,剩下的都是软硬连接,这得节省多少磁盘空间呀。

其次就是快,因为通过链接的方式而不是复制,自然会快。

这也是它所标榜的优点:

pnpm对npm及yarn降维打击详解

相比 npm2 的优点就是不会进行同样依赖的多次复制。

相比 yarn 和 npm3+ 呢,那就是没有幽灵依赖,也不会有没有被提升的依赖依然复制多份的问题。

这就已经足够优秀了,对 yarn 和 npm 可以说是降维打击。

总结

pnpm 最近经常会听到,可以说是爆火。本文我们梳理了下它爆火的原因:

npm2 是通过嵌套的方式管理 node_modules 的,会有同样的依赖复制多次的问题。

npm3+ 和 yarn 是通过铺平的扁平化的方式来管理 node_modules,解决了嵌套方式的部分问题,但是引入了幽灵依赖的问题,并且同名的包只会提升一个版本的,其余的版本依然会复制多次。

pnpm 则是用了另一种方式,不再是复制了,而是都从全局 store 硬连接到 node_modules/.pnpm,然后之间通过软链接来组织依赖关系。

这样不但节省磁盘空间,也没有幽灵依赖问题,安装速度还快,从机制上来说完胜 npm 和 yarn。

pnpm 就是凭借这个对 npm 和 yarn 降维打击的,更多关于pnpm降维打击npm yarn的资料请关注三水点靠木其它相关文章!

Javascript 相关文章推荐
JavaScript对象的property属性详解
Apr 01 Javascript
node.js中的events.emitter.removeAllListeners方法使用说明
Dec 10 Javascript
原生js和jquery实现图片轮播特效
Apr 23 Javascript
几种经典排序算法的JS实现方法
Mar 25 Javascript
jQuery的层级查找方式分析
Jun 16 Javascript
Angular.js实现注册系统的实例详解
Dec 18 Javascript
微信小程序引用公共js里的方法的实例详解
Aug 17 Javascript
jQuery实现右侧抽屉式在线客服功能
Dec 25 jQuery
再谈Angular4 脏值检测(性能优化)
Apr 23 Javascript
js隐式转换的知识实例讲解
Sep 28 Javascript
JS选取DOM元素常见操作方法实例分析
Dec 10 Javascript
使用axios请求时,发送formData请求的示例
Oct 29 Javascript
JS前端可视化canvas动画原理及其推导实现
Aug 05 #Javascript
JS前端使用canvas实现扩展物体类和事件派发
Aug 05 #Javascript
JS前端canvas交互实现拖拽旋转及缩放示例
Aug 05 #Javascript
canvas 中如何实现物体的框选
Aug 05 #Javascript
JS前端使用canvas实现物体的点选示例
Aug 05 #Javascript
前端canvas中物体边框和控制点的实现示例
Aug 05 #Javascript
JS前端轻量fabric.js系列物体基类
Aug 05 #Javascript
You might like
PHP define函数的使用说明
2008/08/27 PHP
将CMYK颜色值和RGB颜色相互转换的PHP代码
2014/07/28 PHP
php获取数据库中数据的实现方法
2017/06/01 PHP
jQuery textarea的长度进行验证
2009/05/06 Javascript
jquery中focus()函数实现当对象获得焦点后自动把光标移到内容最后
2013/09/29 Javascript
JS通过分析userAgent属性来判断浏览器的类型及版本
2014/03/28 Javascript
node.js中的buffer.write方法使用说明
2014/12/10 Javascript
jquery实现相册一下滑动两次的方法
2015/02/09 Javascript
JQuery选择器、过滤器大整理
2015/05/26 Javascript
基于bootstrap实现多个下拉框同时搜索功能
2017/07/19 Javascript
利用原生js实现html5小游戏之打砖块(附源码)
2018/01/03 Javascript
Webpack中publicPath路径问题详解
2018/05/03 Javascript
koa上传excel文件并解析的实现方法
2018/08/09 Javascript
react组件从搭建脚手架到在npm发布的步骤实现
2019/01/09 Javascript
利用vue重构有赞商城的思路以及总结整理
2019/02/21 Javascript
深入解析vue 源码目录及构建过程分析
2019/04/24 Javascript
关于AOP在JS中的实现与应用详解
2019/05/06 Javascript
JQuery animate动画应用示例
2019/05/14 jQuery
如何解决js函数防抖、节流出现的问题
2019/06/17 Javascript
在 Vue 中编写 SVG 图标组件的方法
2020/02/24 Javascript
vue3.0实现插件封装
2020/12/14 Vue.js
Python获取文件ssdeep值的方法
2014/10/05 Python
Python压缩和解压缩zip文件
2015/02/14 Python
python从子线程中获得返回值的方法
2019/01/30 Python
postman和python mock测试过程图解
2020/02/22 Python
Python递归实现打印多重列表代码
2020/02/27 Python
Python第三方库安装缓慢的解决方法
2021/02/06 Python
法国一家多品牌成衣精品中/高档商店:Graduate Store
2019/08/28 全球购物
俄罗斯童装网上商店:BebaKids
2020/06/06 全球购物
.NET程序员的几道面试题
2012/06/01 面试题
知识就是力量演讲稿
2014/09/13 职场文书
2014年团队工作总结
2014/11/24 职场文书
2014年销售助理工作总结
2014/12/01 职场文书
2015年艾滋病宣传活动总结
2015/03/27 职场文书
爱国之歌(8首)
2019/09/29 职场文书
Go 在 MongoDB 中常用查询与修改的操作
2021/05/07 Golang