原文地址:https://segmentfault.com/a/1190000020310371

  • HMR是什么
  • 配置使用HMR
  • HMR原理
  • debug服务端源码
  • debug客户端源码
  • 问题
  • 总结

    HMR是什么

    HMRHot Module Replacement是指当你对代码修改并保存后,webpack将会对代码进行重新打包,并将改动的模块发送到浏览器端,浏览器用新的模块替换掉旧的模块,去实现局部更新页面而非整体刷新页面。接下来将从使用到实现一版简易功能带领大家深入浅出HMR
    文章首发于@careteen/webpack-hmr,转载请注明来源即可。

    使用场景

    2. 彻底搞懂并实现webpack热更新原理 - 图1
    如上图所示,一个注册页面包含用户名密码邮箱三个必填输入框,以及一个提交按钮,当你在调试邮箱模块改动了代码时,没做任何处理情况下是会刷新整个页面,频繁的改动代码会浪费你大量时间去重新填写内容。预期是保留用户名密码的输入内容,而只替换邮箱这一模块。这一诉求就需要借助webpack-dev-server的热模块更新功能。
    相对于live reload整体刷新页面的方案,HMR的优点在于可以保存应用的状态,提高开发效率。

    配置使用HMR

    配置webpack

    首先借助webpack搭建项目

  • 初识化项目并导入依赖

    1. mkdir webpack-hmr && cd webpack-hmr
    2. npm i -y
    3. npm i -S webpack webpack-cli webpack-dev-server html-webpack-plugin
  • 配置文件webpack.config.js

    1. const path = require('path')
    2. const webpack = require('webpack')
    3. const htmlWebpackPlugin = require('html-webpack-plugin')
    4. module.exports = {
    5. mode: 'development', // 开发模式不压缩代码,方便调试
    6. entry: './src/index.js', // 入口文件
    7. output: {
    8. path: path.join(__dirname, 'dist'),
    9. filename: 'main.js'
    10. },
    11. devServer: {
    12. contentBase: path.join(__dirname, 'dist')
    13. },
    14. plugins: [
    15. new htmlWebpackPlugin({
    16. template: './src/index.html',
    17. filename: 'index.html'
    18. })
    19. ]
    20. }
  • 新建src/index.html模板文件

    1. <!DOCTYPE html>
    2. <html lang="en">
    3. <head>
    4. <meta charset="UTF-8">
    5. <meta name="viewport" content="width=device-width, initial-scale=1.0">
    6. <meta http-equiv="X-UA-Compatible" content="ie=edge">
    7. <title>Webpack Hot Module Replacement</title>
    8. </head>
    9. <body>
    10. <div id="root"></div>
    11. </body>
    12. </html>
  • 新建src/index.js入口文件编写简单逻辑

    1. var root = document.getElementById('root')
    2. function render () {
    3. root.innerHTML = require('./content.js')
    4. }
    5. render()
  • 新建依赖文件src/content.js导出字符供index渲染页面

    1. var ret = 'Hello Webpack Hot Module Replacement'
    2. module.exports = ret
    3. // export default ret
  • 配置package.json

    1. "scripts": {
    2. "dev": "webpack-dev-server",
    3. "build": "webpack"
    4. }
  • 然后npm run dev即可启动项目

  • 通过npm run build打包生成静态资源到dist目录

接下来先分析下dist目录中的文件

解析webpack打包后的文件内容

  • webpack自己实现的一套commonjs规范讲解
  • 区分commonjs和esmodule

dist目录结构

  1. .
  2. ├── index.html
  3. └── main.js

其中index.html内容如下

  1. <!-- ... -->
  2. <div id="root"></div>
  3. <script type="text/javascript" src="main.js"></script></body>
  4. <!-- ... -->

使用html-webpack-plugin插件将入口文件及其依赖通过script标签引入

先对main.js内容去掉注释和无关内容进行分析

  1. (function (modules) { // webpackBootstrap
  2. // ...
  3. })
  4. ({
  5. "./src/content.js":
  6. (function (module, exports) {
  7. eval("var ret = 'Hello Webpack Hot Module Replacement'\n\nmodule.exports = ret\n// export default ret\n\n");
  8. }),
  9. "./src/index.js": (function (module, exports, __webpack_require__) {
  10. eval("var root = document.getElementById('root')\nfunction render () {\n root.innerHTML = __webpack_require__(/*! ./content.js */ \"./src/content.js\")\n}\nrender()\n\n\n");
  11. })
  12. });

可见webpack打包后会产出一个自执行函数,其参数为一个对象

  1. "./src/content.js": (function (module, exports) {
  2. eval("...")
  3. }

键为入口文件或依赖文件相对于根目录的相对路径,值则是一个函数,其中使用eval执行文件的内容字符。

  • 再进入自执行函数体内,可见webpack自己实现了一套commonjs规范

    1. (function (modules) {
    2. // 模块缓存
    3. var installedModules = {};
    4. function __webpack_require__(moduleId) {
    5. // 判断是否有缓存
    6. if (installedModules[moduleId]) {
    7. return installedModules[moduleId].exports;
    8. }
    9. // 没有缓存则创建一个模块对象并将其放入缓存
    10. var module = installedModules[moduleId] = {
    11. i: moduleId,
    12. l: false, // 是否已加载
    13. exports: {}
    14. };
    15. // 执行模块函数
    16. modules[moduleId].call(module.exports, module, module.exports, __webpack_require__);
    17. // 将状态置为已加载
    18. module.l = true;
    19. // 返回模块对象
    20. return module.exports;
    21. }
    22. // ...
    23. // 加载入口文件
    24. return __webpack_require__(__webpack_require__.s = "./src/index.js");
    25. })

    如果对上面> commonjs规范感兴趣可以前往我的另一篇文章> 手摸手带你实现commonjs规范 给出上面代码主要是先对webpack的产出文件混个眼熟,不要惧怕。其实任何一个不管多复杂的事物都是由更小更简单的东西组成,剖开它认识它爱上它。

    配置HMR

    接下来配置并感受一下热更新带来的便捷开发
    webpack.config.js配置

    1. // ...
    2. devServer: {
    3. hot: true
    4. }
    5. // ...

    ./src/index.js配置

    1. // ...
    2. if (module.hot) {
    3. module.hot.accept(['./content.js'], () => {
    4. render()
    5. })
    6. }

    当更改./content.js的内容并保存时,可以看到页面没有刷新,但是内容已经被替换了。
    这对提高开发效率意义重大。接下来将一层层剖开它,认识它的实现原理。

    HMR原理

    2. 彻底搞懂并实现webpack热更新原理 - 图2
    如上图所示,右侧Server端使用webpack-dev-server去启动本地服务,内部实现主要使用了webpackexpresswebsocket

  • 使用express启动本地服务,当浏览器访问资源时对此做响应。

  • 服务端和客户端使用websocket实现长连接
  • webpack监听源文件的变化,即当开发者保存文件时触发webpack的重新编译。
    • 每次编译都会生成hash值已改动模块的json文件已改动模块代码的js文件
    • 编译完成后通过socket向客户端推送当前编译的hash戳
  • 客户端的websocket监听到有文件改动推送过来的hash戳,会和上一次对比
    • 一致则走缓存
    • 不一致则通过ajaxjsonp向服务端获取最新资源
  • 使用内存文件系统去替换有修改的内容实现局部刷新

上图先只看个大概,下面将从服务端和客户端两个方面进行详细分析

debug服务端源码

2. 彻底搞懂并实现webpack热更新原理 - 图3
现在也只需要关注上图的右侧服务端部分,左侧可以暂时忽略。下面步骤主要是debug服务端源码分析其详细思路,也给出了代码所处的具体位置,感兴趣的可以先行定位到下面的代码处设置断点,然后观察数据的变化情况。也可以先跳过阅读此步骤。

  1. 启动webpack-dev-server服务器,源代码地址@webpack-dev-server/webpack-dev-server.js#L173
  2. 创建webpack实例,源代码地址@webpack-dev-server/webpack-dev-server.js#L89
  3. 创建Server服务器,源代码地址@webpack-dev-server/webpack-dev-server.js#L107
  4. 添加webpack的done事件回调,源代码地址@webpack-dev-server/Server.js#L122
    1. 编译完成向客户端发送消息,源代码地址@webpack-dev-server/Server.js#L184
  5. 创建express应用app,源代码地址@webpack-dev-server/Server.js#L123
  6. 设置文件系统为内存文件系统,源代码地址@webpack-dev-middleware/fs.js#L115
  7. 添加webpack-dev-middleware中间件,源代码地址@webpack-dev-server/Server.js#L125
    1. 中间件负责返回生成的文件,源代码地址@webpack-dev-middleware/middleware.js#L20
  8. 启动webpack编译,源代码地址@webpack-dev-middleware/index.js#L51
  9. 创建http服务器并启动服务,源代码地址@webpack-dev-server/Server.js#L135
  10. 使用sockjs在浏览器端和服务端之间建立一个 websocket 长连接,源代码地址@webpack-dev-server/Server.js#L745

    1. 创建socket服务器,源代码地址@webpack-dev-server/SockJSServer.js#L34

      服务端简易实现

      上面是我通过debug得出dev-server运行流程比较核心的几个点,下面将其抽象整合到一个文件中

      启动webpack-dev-server服务器

      先导入所有依赖
      1. const path = require('path') // 解析文件路径
      2. const express = require('express') // 启动本地服务
      3. const mime = require('mime') // 获取文件类型 实现一个静态服务器
      4. const webpack = require('webpack') // 读取配置文件进行打包
      5. const MemoryFileSystem = require('memory-fs') // 使用内存文件系统更快,文件生成在内存中而非真实文件
      6. const config = require('./webpack.config') // 获取webpack配置文件

      创建webpack实例

      1. const compiler = webpack(config)
      compiler代表整个webpack编译任务,全局只有一个

      创建Server服务器

      1. class Server {
      2. constructor(compiler) {
      3. this.compiler = compiler
      4. }
      5. listen(port) {
      6. this.server.listen(port, () => {
      7. console.log(`服务器已经在${port}端口上启动了`)
      8. })
      9. }
      10. }
      11. let server = new Server(compiler)
      12. server.listen(8000)
      在后面是通过express来当启动服务的

      添加webpack的done事件回调

      1. constructor(compiler) {
      2. let sockets = []
      3. let lasthash
      4. compiler.hooks.done.tap('webpack-dev-server', (stats) => {
      5. lasthash = stats.hash
      6. // 每当新一个编译完成后都会向客户端发送消息
      7. sockets.forEach(socket => {
      8. socket.emit('hash', stats.hash) // 先向客户端发送最新的hash值
      9. socket.emit('ok') // 再向客户端发送一个ok
      10. })
      11. })
      12. }
      webpack编译后提供提供了一系列钩子函数,以供插件能访问到它的各个生命周期节点,并对其打包内容做修改。compiler.hooks.done则是插件能修改其内容的最后一个节点。
      编译完成通过socket向客户端发送消息,推送每次编译产生的hash。另外如果是热更新的话,还会产出二个补丁文件,里面描述了从上一次结果到这一次结果都有哪些chunk和模块发生了变化。
      使用let sockets = []数组去存放当打开了多个Tab时每个Tab的socket实例

      创建express应用app

      1. let app = new express()

      设置文件系统为内存文件系统

      1. let fs = new MemoryFileSystem()
      使用MemoryFileSystemcompiler的产出文件打包到内存中。

      添加webpack-dev-middleware中间件

      1. function middleware(req, res, next) {
      2. if (req.url === '/favicon.ico') {
      3. return res.sendStatus(404)
      4. }
      5. // /index.html dist/index.html
      6. let filename = path.join(config.output.path, req.url.slice(1))
      7. let stat = fs.statSync(filename)
      8. if (stat.isFile()) { // 判断是否存在这个文件,如果在的话直接把这个读出来发给浏览器
      9. let content = fs.readFileSync(filename)
      10. let contentType = mime.getType(filename)
      11. res.setHeader('Content-Type', contentType)
      12. res.statusCode = res.statusCode || 200
      13. res.send(content)
      14. } else {
      15. return res.sendStatus(404)
      16. }
      17. }
      18. app.use(middleware)
      使用expres启动了本地开发服务后,使用中间件去为其构造一个静态服务器,并使用了内存文件系统,使读取文件后存放到内存中,提高读写效率,最终返回生成的文件。

      启动webpack编译

      1. compiler.watch({}, err => {
      2. console.log('又一次编译任务成功完成了')
      3. })
      以监控的模式启动一次webpack编译,当编译成功之后执行回调

      创建http服务器并启动服务

      1. constructor(compiler) {
      2. // ...
      3. this.server = require('http').createServer(app)
      4. // ...
      5. }
      6. listen(port) {
      7. this.server.listen(port, () => {
      8. console.log(`服务器已经在${port}端口上启动了`)
      9. })
      10. }

      使用sockjs在浏览器端和服务端之间建立一个 websocket 长连接

      1. constructor(compiler) {
      2. // ...
      3. this.server = require('http').createServer(app)
      4. let io = require('socket.io')(this.server)
      5. io.on('connection', (socket) => {
      6. sockets.push(socket)
      7. socket.emit('hash', lastHash)
      8. socket.emit('ok')
      9. })
      10. }
      启动一个 websocket服务器,然后等待连接来到,连接到来之后存进sockets池
      当有文件改动,webpack重新编译时,向客户端推送hashok两个事件

      服务端调试阶段

      感兴趣的可以根据上面debug服务端源码所带的源码位置,并在浏览器的调试模式下设置断点查看每个阶段的值。
      1. node dev-server.js
      使用我们自己编译的dev-server.js启动服务,可看到页面可以正常展示,但还没有实现热更新。
      下面将调式客户端的源代码分析其实现流程。

      debug客户端源码

      2. 彻底搞懂并实现webpack热更新原理 - 图4
      现在也只需要关注上图的左侧客户端部分,右侧可以暂时忽略。下面步骤主要是debug客户端源码分析其详细思路,也给出了代码所处的具体位置,感兴趣的可以先行定位到下面的代码处设置断点,然后观察数据的变化情况。也可以先跳过阅读此步骤。
      debug客户端源码分析其详细思路
  11. webpack-dev-server/client端会监听到此hash消息,源代码地址@webpack-dev-server/index.js#L54

  12. 客户端收到ok的消息后会执行reloadApp方法进行更新,源代码地址index.js#L101
  13. 在reloadApp中会进行判断,是否支持热更新,如果支持的话发射webpackHotUpdate事件,如果不支持则直接刷新浏览器,源代码地址reloadApp.js#L7
  14. 在webpack/hot/dev-server.js会监听webpackHotUpdate事件,源代码地址dev-server.js#L55
  15. 在check方法里会调用module.hot.check方法,源代码地址dev-server.js#L13
  16. HotModuleReplacement.runtime请求Manifest,源代码地址HotModuleReplacement.runtime.js#L180
  17. 它通过调用 JsonpMainTemplate.runtime的hotDownloadManifest方法,源代码地址JsonpMainTemplate.runtime.js#L23
  18. 调用JsonpMainTemplate.runtime的hotDownloadUpdateChunk方法通过JSONP请求获取到最新的模块代码,源代码地址JsonpMainTemplate.runtime.js#L14
  19. 补丁JS取回来后会调用JsonpMainTemplate.runtime.js的webpackHotUpdate方法,源代码地址JsonpMainTemplate.runtime.js#L8
  20. 然后会调用HotModuleReplacement.runtime.js的hotAddUpdateChunk方法动态更新模块代码,源代码地址HotModuleReplacement.runtime.js#L222
  21. 然后调用hotApply方法进行热更新,源代码地址HotModuleReplacement.runtime.js#L257HotModuleReplacement.runtime.js#L278

    客户端简易实现

    上面是我通过debug得出dev-server运行流程比较核心的几个点,下面将其抽象整合成一个文件

    webpack-dev-server/client端会监听到此hash消息

    在开发客户端功能之前,需要在src/index.html中引入socket.io
    1. <script src="/socket.io/socket.io.js"></script>
    下面连接socket并接受消息
    1. let socket = io('/')
    2. socket.on('connect', onConnected)
    3. const onConnected = () => {
    4. console.log('客户端连接成功')
    5. }
    6. let hotCurrentHash // lastHash 上一次 hash值
    7. let currentHash // 这一次的hash值
    8. socket.on('hash', (hash) => {
    9. currentHash = hash
    10. })
    将服务端webpack每次编译所产生hash进行缓存

    客户端收到ok的消息后会执行reloadApp方法进行更新

    1. socket.on('ok', () => {
    2. reloadApp(true)
    3. })

    reloadApp中判断是否支持热更新

    1. // 当收到ok事件后,会重新刷新app
    2. function reloadApp(hot) {
    3. if (hot) { // 如果hot为true 走热更新的逻辑
    4. hotEmitter.emit('webpackHotUpdate')
    5. } else { // 如果不支持热更新,则直接重新加载
    6. window.location.reload()
    7. }
    8. }
    在reloadApp中会进行判断,是否支持热更新,如果支持的话发射webpackHotUpdate事件,如果不支持则直接刷新浏览器。

    在webpack/hot/dev-server.js会监听webpackHotUpdate事件

    首先需要一个发布订阅去绑定事件并在合适的时机触发。
    1. class Emitter {
    2. constructor() {
    3. this.listeners = {}
    4. }
    5. on(type, listener) {
    6. this.listeners[type] = listener
    7. }
    8. emit(type) {
    9. this.listeners[type] && this.listeners[type]()
    10. }
    11. }
    12. let hotEmitter = new Emitter()
    13. hotEmitter.on('webpackHotUpdate', () => {
    14. if (!hotCurrentHash || hotCurrentHash == currentHash) {
    15. return hotCurrentHash = currentHash
    16. }
    17. hotCheck()
    18. })
    会判断是否为第一次进入页面和代码是否有更新。 上面的发布订阅较为简单,且只支持先发布后订阅功能。对于一些较为复杂的场景可能需要先订阅后发布,此时可以移步> @careteen/event-emitter。其实现原理也挺简单,需要维护一个离线事件栈存放还没发布就订阅的事件,等到订阅时可以取出所有事件执行。

    在check方法里会调用module.hot.check方法

    1. function hotCheck() {
    2. hotDownloadManifest().then(update => {
    3. let chunkIds = Object.keys(update.c)
    4. chunkIds.forEach(chunkId => {
    5. hotDownloadUpdateChunk(chunkId)
    6. })
    7. })
    8. }
    上面也提到过webpack每次编译都会产生hash值已改动模块的json文件已改动模块代码的js文件
    此时先使用ajax请求Manifest即服务器这一次编译相对于上一次编译改变了哪些module和chunk。
    然后再通过jsonp获取这些已改动的module和chunk的代码。

    调用hotDownloadManifest方法

    1. function hotDownloadManifest() {
    2. return new Promise(function (resolve) {
    3. let request = new XMLHttpRequest()
    4. //hot-update.json文件里存放着从上一次编译到这一次编译 取到差异
    5. let requestPath = '/' + hotCurrentHash + ".hot-update.json"
    6. request.open('GET', requestPath, true)
    7. request.onreadystatechange = function () {
    8. if (request.readyState === 4) {
    9. let update = JSON.parse(request.responseText)
    10. resolve(update)
    11. }
    12. }
    13. request.send()
    14. })
    15. }

    调用hotDownloadUpdateChunk方法通过JSONP请求获取到最新的模块代码

    1. function hotDownloadUpdateChunk(chunkId) {
    2. let script = document.createElement('script')
    3. script.charset = 'utf-8'
    4. // /main.xxxx.hot-update.js
    5. script.src = '/' + chunkId + "." + hotCurrentHash + ".hot-update.js"
    6. document.head.appendChild(script)
    7. }
    这里解释下为什么使用JSONP获取而不直接利用socket获取最新代码?主要是因为JSONP获取的代码可以直接执行。

    调用webpackHotUpdate方法

    当客户端把最新的代码拉到浏览之后
    1. window.webpackHotUpdate = function (chunkId, moreModules) {
    2. // 循环新拉来的模块
    3. for (let moduleId in moreModules) {
    4. // 从模块缓存中取到老的模块定义
    5. let oldModule = __webpack_require__.c[moduleId]
    6. // parents哪些模块引用这个模块 children这个模块引用了哪些模块
    7. // parents=['./src/index.js']
    8. let {
    9. parents,
    10. children
    11. } = oldModule
    12. // 更新缓存为最新代码 缓存进行更新
    13. let module = __webpack_require__.c[moduleId] = {
    14. i: moduleId,
    15. l: false,
    16. exports: {},
    17. parents,
    18. children,
    19. hot: window.hotCreateModule(moduleId)
    20. }
    21. moreModules[moduleId].call(module.exports, module, module.exports, __webpack_require__)
    22. module.l = true // 状态变为加载就是给module.exports 赋值了
    23. parents.forEach(parent => {
    24. // parents=['./src/index.js']
    25. let parentModule = __webpack_require__.c[parent]
    26. // _acceptedDependencies={'./src/title.js',render}
    27. parentModule && parentModule.hot && parentModule.hot._acceptedDependencies[moduleId] && parentModule.hot._acceptedDependencies[moduleId]()
    28. })
    29. hotCurrentHash = currentHash
    30. }
    31. }

    hotCreateModule的实现

    实现我们可以在业务代码中定义需要热更新的模块以及回调函数,将其存放在hot._acceptedDependencies中。
    1. window.hotCreateModule = function () {
    2. let hot = {
    3. _acceptedDependencies: {},
    4. dispose() {
    5. // 销毁老的元素
    6. },
    7. accept: function (deps, callback) {
    8. for (let i = 0; i < deps.length; i++) {
    9. // hot._acceptedDependencies={'./title': render}
    10. hot._acceptedDependencies[deps[i]] = callback
    11. }
    12. }
    13. }
    14. return hot
    15. }
    然后在webpackHotUpdate中进行调用
    1. parents.forEach(parent => {
    2. // parents=['./src/index.js']
    3. let parentModule = __webpack_require__.c[parent]
    4. // _acceptedDependencies={'./src/title.js',render}
    5. parentModule && parentModule.hot && parentModule.hot._acceptedDependencies[moduleId] && parentModule.hot._acceptedDependencies[moduleId]()
    6. })
    最后调用hotApply方法进行热更新

    客户端调试阶段

    经过上述实现了一个基本版的HMR,可更改代码保存的同时查看浏览器并非整体刷新,而是局部更新代码进而更新视图。在涉及到大量表单的需求时大大提高了开发效率。

    问题

  • 如何实现commonjs规范? 感兴趣的可前往> debug CommonJs规范了解其实现原理。

  • webpack实现流程以及各个生命周期的作用是什么? webpack主要借助了> tapable这个库所提供的一系列同步/异步钩子函数贯穿整个生命周期。> 2. 彻底搞懂并实现webpack热更新原理 - 图5基于此我实现了一版简易的> webpack,源码100+行,食用时伴着注释很容易消化,感兴趣的可前往看个思路。

  • 发布订阅的使用和实现,并且如何实现一个可先订阅后发布的机制? 上面也提到需要使用到发布订阅模式,且只支持先发布后订阅功能。对于一些较为复杂的场景可能需要先订阅后发布,此时可以移步> @careteen/event-emitter。其实现原理也挺简单,需要维护一个离线事件栈存放还没发布就订阅的事件,等到订阅时可以取出所有事件执行。

  • 为什么使用JSONP而不用socke通信获取更新过的代码? 因为通过socket通信获取的是一串字符串需要再做处理。而通过> JSONP获取的代码可以直接执行。

    引用

  • 珠峰架构课

  • 模块热替换 - webpack官网