90 行代码的webpack,你肯定不学吗?

掘金引流终版.gif

构建专栏系列目录入口javascript

陈恒,微医前端技术部平台支撑组,最帅的架构师~前端

在前端社区里,webpack 能够说是一个经久不衰的话题。其强大、灵活的功能曾极大地促进了前端工程化进程的发展,伴随了无数前端项目的起与落。其纷繁复杂的配置也曾让无数前端人望而却步,笑称须要一个新工种"webpack 配置工程师"。做为一个历史悠久,最多见、最经典的打包工具,webpack 极具讨论价值。理解 webpack,掌握 webpack,不管是在面试环节,仍是在平常项目搭建、开发、优化环节,都能带来很多的收益。那么本文将从核心理念出发,带各位读者拨开 webpack 的外衣,看透其本质。 image.pngjava

到底是啥

其实这个问题在 webpack 官网的第一段就给出了明确的定义:node

At its core, webpack is a static module bundler for modern JavaScript applications. When webpack processes your application, it internally builds a dependency graph which maps every module your project needs and generates one or more bundles.webpack

其意为:git

webpack 的核心是用于现代 JavaScript 应用程序的静态模块打包器。 当 webpack 处理您的应用程序时,它会在内部构建一个依赖关系图,该图映射您项目所需的每一个模块并生成一个或多个包github

要素察觉:静态模块打包器依赖关系图生成一个或多个包。虽然现在的前端项目中,webpack 扮演着重要的角色,囊括了诸多功能,但从其本质上来说,其仍然是一个“模块打包器”,将开发者的 JavaScript 模块打包成一个或多个 JavaScript 文件。web

要干什么

那么,为何须要一个模块打包器呢?webpack 仓库早年的 README 也给出了答案:面试

As developer you want to reuse existing code. As with node.js and web all file are already in the same language, but it is extra work to use your code with the node.js module system and the browser. The goal of webpack is to bundle CommonJs modules into javascript files which can be loaded by <script>-tags.npm

能够看到,node.js 生态中积累了大量的 JavaScript 写的代码,却由于 node.js 端遵循的 CommonJS 模块化规范与浏览器端格格不入,致使代码没法获得复用,这是一个巨大的损失。因而 webpack 要作的就是将这些模块打包成能够在浏览器端使用 <script> 标签加载并运行的JavaScript 文件。

或许这并非惟一解释 webpack 存在的缘由,但足以给咱们很大的启发——把 CommonJS 规范的代码转换成可在浏览器运行的 JavaScript 代码

怎么干的

既然浏览器端没有 CommonJS 规范,那就实现一个好了。从 webpack 打包出的产物,咱们能看出思路。 ​

新建三个文件观察其打包产物:

src/index.js

const printA = require('./a')
printA()
复制代码

src/a.js

const printB = require('./b')

module.exports = function printA() {
  console.log('module a!')
  printB()
}
复制代码

src/b.js

module.exports = function printB() {
  console.log('module b!')
}
复制代码

执行 npx webpack --mode development 打包产出 dist/main.js 文件

dist.png

上图中,使用了 webpack 打包 3 个简单的 js 文件 index.js/a.js/b.js, 其中 index.js 中依赖了 a.js, 而 a.js 中又依赖了 b.js, 造成一个完整依赖关系。

那么,webpack 又是如何知道文件之间的依赖关系的呢,如何收集被依赖的文件保证不遗漏呢?咱们依然能从官方文档找到答案:

When webpack processes your application, it starts from a list of modules defined on the command line or in its configuration file. Starting from these entry points, webpack recursively builds a dependency graph that includes every module your application needs, then bundles all of those modules into a small number of bundles - often, just one - to be loaded by the browser.

也就是说,webpack 会从配置的入口开始,递归的构建一个应用程序所须要的模块的依赖树。咱们知道,CommonJS 规范里,依赖某一个文件时,只须要使用 require 关键字将其引入便可,那么只要咱们遇到require关键字,就去解析这个依赖,而这个依赖中可能又使用了 require 关键字继续引用另外一个依赖,因而,就能够递归的根据 require 关键字找到全部的被依赖的文件,从而完成依赖树的构建了。

能够看到上图最终输出里,三个文件被以键值对的形式保存到 __webpack_modules__ 对象上, 对象的 key 为模块路径名,value 为一个被包装过的模块函数。函数拥有 module, module.exports, __webpack_require__ 三个参数。这使得每一个模块都拥有使用 module.exports 导出本模块和使用 __webpack_require__ 引入其余模块的能力,同时保证了每一个模块都处于一个隔离的函数做用域范围。

为何 webpack要修改require关键字和require的路径?咱们知道requirenode环境自带的环境变量,能够直接使用,而在其余环境则没有这样一个变量,因而须要webpack提供这样的能力。只要提供了类似的能力,变量名叫 require仍是 __webpack_require__其实无所谓。至于重写路径,固然是由于在node端系统会根据文件的路径加载,而在 webpack打包的文件中,使用原路径行不通,因而须要将路径重写为 __webpack_modules__ 的键,从而找到相应模块。 ​

而下面的 __webpack_require__函数与 __webpack_module_cache__ 对象则完成了模块加载的职责。使用 __webpack_require__ 函数加载完成的模块被缓存到 __webpack_module_cache__ 对象上,以便下次若是有其余模块依赖此模块时,不须要从新运行模块的包装函数,减小执行效率的消耗。同时,若是多个文件之间存在循环依赖,好比 a.js 依赖了 b.js 文件, b.js 又依赖了 a.js,那么在 b.js 使用 __webpack_require__加载 a.js 时,会直接走进 if(cachedModule !== undefined) 分支而后 return已缓存过的 a.js 的引用,不会进一步执行 a.js 文件加载,从而避免了循环依赖无限递归的出现

不能说这个由 webpack 实现的模块加载器与 CommonJS 规范一毛同样,只能说八九不离十吧。这样一来,打包后的 JavaScript 文件能够被 <script> 标签加载且运行在浏览器端了。

简易实现

了解了 webpack 处理后的 JavaScript 长成什么样子,咱们梳理一下思路,依葫芦画瓢手动实现一个简易的打包器,帮助理解。

要作的事情有这么些:

  1. 读取入口文件,并收集依赖信息
  2. 递归地读取全部依赖模块,产出完整的依赖列表
  3. 将各模块内容打包成一块完整的可运行代码

话很少说,建立一个项目,并安装所需依赖

npm init -y
npm i @babel/core @babel/parser @babel/traverse webpack webpack-cli -D
复制代码

其中:

  • @babel/parser 用于解析源代码,产出 AST
  • @babel/traverse 用于遍历 AST,找到 require 语句并修改为 _require_,将引入路径改造为相对根的路径
  • @babel/core 用于将修改后的 AST 转换成新的代码输出

建立一个入口文件 myPack.js 并引入依赖

const fs = require('fs')
const path = require('path')
const parser = require('@babel/parser')
const traverse = require('@babel/traverse').default
const babel = require('@babel/core')
复制代码

紧接着,咱们须要对某一个模块进行解析,并产出其模块信息,包括:模块路径、模块依赖、模块转换后代码

// 保存根路径,全部模块根据根路径产出相对路径
let root = process.cwd()

function readModuleInfo(filePath) {
  // 准备好相对路径做为 module 的 key
  filePath =
    './' + path.relative(root, path.resolve(filePath)).replace(/\\+/g, '/')
  // 读取源码
  const content = fs.readFileSync(filePath, 'utf-8')
  // 转换出 AST
  const ast = parser.parse(content)
  // 遍历模块 AST,将依赖收集到 deps 数组中
  const deps = []
  traverse(ast, {
    CallExpression: ({ node }) => {
      // 若是是 require 语句,则收集依赖
      if (node.callee.name === 'require') {
        // 改造 require 关键字
        node.callee.name = '_require_'
        let moduleName = node.arguments[0].value
        moduleName += path.extname(moduleName) ? '' : '.js'
        moduleName = path.join(path.dirname(filePath), moduleName)
        moduleName = './' + path.relative(root, moduleName).replace(/\\+/g, '/')
        deps.push(moduleName)
        // 改造依赖的路径
        node.arguments[0].value = moduleName
      }
    },
  })
  // 编译回代码
  const { code } = babel.transformFromAstSync(ast)
  return {
    filePath,
    deps,
    code,
  }
}
复制代码

接下来,咱们从入口出发递归地找到全部被依赖的模块,并构建成依赖树

function buildDependencyGraph(entry) {
  // 获取入口模块信息
  const entryInfo = readModuleInfo(entry)
  // 项目依赖树
  const graphArr = []
  graphArr.push(entryInfo)
  // 从入口模块触发,递归地找每一个模块的依赖,并将每一个模块信息保存到 graphArr
  for (const module of graphArr) {
    module.deps.forEach((depPath) => {
      const moduleInfo = readModuleInfo(path.resolve(depPath))
      graphArr.push(moduleInfo)
    })
  }
  return graphArr
}
复制代码

通过上面一步,咱们已经获得依赖树可以描述整个应用的依赖状况,最后咱们只须要按照目标格式进行打包输出便可

function pack(graph, entry) {
  const moduleArr = graph.map((module) => {
    return (
      `"${module.filePath}": function(module, exports, _require_) { eval(\`` +
      module.code +
      `\`) }`
    )
  })
  const output = `;(() => { var modules = { ${moduleArr.join(',\n')} } var modules_cache = {} var _require_ = function(moduleId) { if (modules_cache[moduleId]) return modules_cache[moduleId].exports var module = modules_cache[moduleId] = { exports: {} } modules[moduleId](module, module.exports, _require_) return module.exports } _require_('${entry}') })()`
  return output
}
复制代码

直接使用字符串模板拼接成类 CommonJS 规范的模板,自动加载入口模块,并使用 IIFE 将代码包装,保证代码模块不会影响到全局做用域。

最后,编写一个入口函数 main 用以启动打包过程

function main(entry = './src/index.js', output = './dist.js') {
  fs.writeFileSync(output, pack(buildDependencyGraph(entry), entry))
}

main()
复制代码

执行并验证结果

node myPack.js
复制代码

至此,咱们使用了总共不到 90 行代码(包含注释),完成了一个极简的模块打包工具。虽然没有涉及任何 Webpack 源码, 但咱们从打包器的设计原理入手,走过了打包工具的核心步骤,简易却不失完整。

总结

本文从 webpack 的设计理念和最终实现出发,梳理了其做为一个打包工具的核心能力,并使用一个简易版本实现帮助更直观的理解其本质。总的来讲,webpack 做为打包工具无非是从应用入口出发,递归的找到全部依赖模块,并将他们解析输出成一个具有类 CommonJS 模块化规范的模块加载能力的 JavaScript 文件

因其优秀的设计,在实际生产环节中,webapck 还能扩展出诸多强大的功能。然而其本质还是模块打包器。不管是什么样的新特性或新能力,只要咱们把握住打包工具的核心思想,任何问题终将迎刃而解。

打嗝.gif

参考

Concepts

modules-webpack

Dependency Graph

Build Your Own Webpack

构建专栏系列目录入口

相关文章
相关标签/搜索