追溯 React Hot Loader 的实现

5,687 阅读16分钟
原文链接: mp.weixin.qq.com

文:萝卜

本文原创,转载请注明作者及出处

如果你使用 React ,你可以在各个工程里面看到 Dan Abramov 的身影。他于 2015 年加入 facebook,是 React Hot Loader 、React Transform、redux-thunk、redux-devtools 等等的开发者。同样也是 React、Redux、Create-React-App 的联合开发者。从他的签名 Building tools for humans. 或许表明了他想打造高效的开发环境以及调试过程。

作为 Dan 的小迷妹,如他说 is curious where the magic comes from。这篇文章会带你们去了解 React Hot Loader 的由来,它实现的原理,以及在实现中遇到的问题对应的解决方法。也许你认为这篇文章太过于底层,对日常的业务并没有帮助,但希望你和我一样能通过了解一个实现得到乐趣,以及收获一些思路。

首先,React Hot Loader 的产生

Dan 在自己的文章里面说到。React Hot Loader 起源一个来自 stackoverflow 上的一个问题 —— what exactly is hot module replacement in webpack,这个问题解释了 webpack 的 hot module replacement(下面简称 HMR)到底是什么,以及我们可以利用它做什么,Dan 当时想到也 React 可以和 webpack hot module 以一种有趣的方式结合在一起。

于是他在 Twitter 上录制了一个简单的视频(请看下面),事实上视频中的实现依赖于它在 React 源代码里面插入了很多自己的全局变量。他本没指望到这个视频能带来多大的关注,但结果是他收到了很多点赞,并且粉丝狂增,他意识到必须以一个真正的工程去实现。

初步尝试, 直接使用 HMR

HMR 是属于 webpack 范畴内的实现,你可以在 webpack 的官方文档 看到如何开启它以及它提供的接口。如果你有印象,你会记得使用它需要 在 webpack config 或者 webpack-dev-server cli 里面指定开启 hot reloading 模式,并且在你的代码里写上 module.hot.accept(xxx)。但 HMR 到底是什么?我们可以用一句话总结:当一个 import 进来的模块发生了变化,HMR 提供了一个接口让我们使用 callback 回调去做一些事情。

一个使用 HMR 实现自动刷新的 React App 像下面这样:

  1. // index.js

  2. var App = require('./App')

  3. var React = require('react')

  4. var ReactDOM = require('react-dom')

  5. // 像通常一样 render Root Element

  6. var rootEl = document.getElementById('root')

  7. ReactDOM.render(<App />, rootEl)

  8. // 我们是不是在 dev 环境 ?

  9. if (module.hot) {

  10.  // 当 App.js 更新了

  11.  module.hot.accept('./App', function () {

  12.    // require 进来更新的 App.js 重新render

  13.    var NextApp = require('./App')

  14.    ReactDOM.render(<NextApp />, rootEl)

  15.  })

  16. }

请注意,这个实现没有使用 React Hot Loader 或者 React Transform 或者任何其他的,这仅仅是 webpack 的HMR 的 api。而这里的 callback 回调函数当然是 re-render 我们的 app。

得益于 HMR API 的设计,在嵌套的组件也能实现更新。如果一个模块没有指明如何去更新自己,那么引入这个模块的另一个模块也会被包含在热更新的 bundle 里,这些更新会”冒泡“,直到某个 import 它们的模块 "接收" 更新。如果有些模块最终没有被"接受",那么热更新失败,控制台会打印出警告。为了“接受”更新,你只需要调用 module.hot.accept('./name',callback)

因为我们在 index.js 里的接受了 App.js 的更新 ,这使得我们隐性的接受了在 App.js 里所有引入模块(component)的更新。打个比方,假如我编辑了 Button.js 组件,由于它被 UserProfile.js 以及 Navbar.js import, 而这两个模块又被 App.js import, App.js 又被 index.js import,index.js 包含了 module.hot.accept('./App',callback) ,于是 Webpack 会自动产生一个包含以上所有文件的 “updated bundle”, 并且运行我们提供的 callback。

你以为 hot reloading 就到此为止了吗,当然远远不够 😉 。

问题:组件的 state 和 DOM 被销毁。

当我们的 App.js 更新,实际上是有个新的 App.js 用 标签注入到 html, 并且重新执行了一次。此时新生成的 component 和之前的是一个组件的不同版本,它们是不同版本的同一个组件,但是 NextApp !== App。

如果你了解 React ,你会知道当下一个 component 的 type 和之前的不一样,它会 unmount 之前那个。这就是为什么 state 和 DOM 会被销毁。

在解决 state 保留的问题上,有人认为如果工程依赖一个单一的 state 树,那没有必要费大精力去保留组件自身的 state。因为在这种类型的 app 里面我们关注的更多的是全局的这个 state 树,而去保存这个全局的 state 树是很容易做到的,比如你可以把它保存到 localstorage里面,当 store 初始化的时候你去读取它,这样的话连刷新都不会丢失状态。

Dan 接受了这个意见,并且在自己的文章里面总结,如果你使用 redux ,并且主要的状态保存在 redux 的 store 上,这时也许你不需要使用 React-Hot-Loader。

但他并没有因为仅仅 有些人 可能不需要用到而放弃了 React-Hot-Loader。这才有了下文 😉 。

如何解决 state 和 DOM 销毁问题

当你从上面了解了为什么 DOM 和 state 会丢失,也许你就会 和 Dan 一样想到了两种方法。

  1. 找到一种方式把 React 的实例和 Dom nodes 以及 state 分离,每当更新的时候,创建一个新组件的新实例,然后用一种方式把它递归地和现有的 Dom 和 state 结合在一起。

  2. 另外一种,代理 component 的 type,这样能让 React 认为 type 没有变。事实上每次 hot update ,type 对应的是新的 component。

第一种方式看上去好一点,但是 React 暂时没有提供可以分离(聚合)state 以及不销毁 DOM、不运行生命周期去替换一个实例。即使深入到使用 React 的私有 API 达到这个目的,采用第一个方案任然面临着一些细微的问题。

比如,React components 经常 在 componentDidmount 时候订阅 Flux stores 或者其他数据源。即使我们做到不销毁 Dom 以及 state, 偷偷地用一个新的实例替换旧的实例,旧的实例仍然会继续保持订阅,而新的实例将不会订阅。

结论是,如果 React 的 state 的订阅是申明式,并且独立于生命周期之外,或者 React 没有那么依赖 class 和 instance, 第一个方法才可行。这些也许会出现在以后的 React 版本里,但是现在并没有。

于是 Dan 采用了第二种,这也是之后的 React Hot Loader 和 React Transform 所使用的到技巧。

为此,Dan 建立了一个独立的工程(react-proxy)去做 proxy,你可以在这里 看到它。create-proxy 只是一个底层的工程,它不依赖 wepback 也不依赖 babel。React Hot Loader 和 React Transform 依赖它,它把 React Component 包装到一个个 proxy 里面,这些 “proxy” 只是些 class, 它们表现的就像你自己的class,但是提供你一些钩子让你能对 class 注入新的实现方法,这样相当于让一个已经存在的实例表现的像新的 class,从而不会销毁 state 和 DOM。

在哪里 proxy ?

Dan 首先所做的是在 wepback 的 loader 里面 proxy。

补充,很多人认为 React Hot Loader 不是一个 “loader”,因为它只是实现 hot reloading 的。这是一个普遍的误解😀。

之所以叫 “loader” 是因为 webpack 是这么称呼它,而其他 bundlers(打包器)称呼为 “transform”。打个比方,json-loader 把JSON 文件 “transform” 成 javascript modules,style-loader 把 CSS 文件 “transform” 成 js code 然后把它们以 stylesheets 的形式注入。

而关于 React Hot Loader 你可以在这里 看到,在编译的时候它通过 export 找到 component,并且“静默” 的包裹它,然后 export 一个代理的 component 取而代之原来的。

通过 module.exports 去寻找 components 开始听上去是合理的。开发者们经常把每个组件单独储存在一个文件,自然而然组件将会被exported。然而,随着时间变化,React 社区发生了一些变化,采取了一些新的写法或者思想,这导致了一些问题。

  • 随着高阶组件变得流行,大家开始 export 出来的是一个高阶组件,而不是实际上自己写的组件。 结果导致, React Hot Loader 没有“发现” module.export 里面包裹的组件,所以没有给它们创建 proxy。它们的 DOM 以及 local state 将会被在这些文件每次修改后销毁。这尤其影响像 React JSS 一样利用高阶组件实现样式。

  • React 0.14 引进了函数式组件,并且鼓励在一个文件里面最小化拆分组件。即使React Hot Loader 能检测到导出的组件,它也“看”不到那些未被导出的本地的component。所以这些component 将不会包裹在proxy里面,所以会导致在它以及它下面的子树丢失 DOM 以及 state。

这显然是使得从 module.exports 去找组件是不可靠的。

React Transform 的出现

除了上面提到的从 module.exports 不可靠之外,第一版的 React-Hot-Loader 还存在一些其他的问题。比如 webpack 的依赖问题,Dan 想做的是一个通用的工具,而不仅限于 webpack,而现在的工具只是一个 webpack 的 loader。

虽然目前为止只有 webpack 实现了HMR, 但是一旦有其他的编译工具也实现了 HMR,那现有的 loader如何集成到新的编译工具里面 ?

基于这些问题 Dan 曾经写过一篇 React-Hot-Loader 之死的文章,文章中提到虽然 React-Hot-Loader 得到了巨大的关注,并且有很多工程也采取了他的思想,他仍然认为这不是他所想要的。

此时 Babel 如浪潮一般突然占领了整个 javascript 世界。Dan 意识到可以采用静态分析的方法去找到这些 component,而 babel 正好很适合做这些。不仅如此,Dan 同样想做一个错误处理的方式,因为当 render() 方法报错的时候,此时组件会处于一种无效状态,而此时 hot reload 是没办法工作的,Dan 想一起 fix 掉这个问题。

把 component 包裹在一个 proxy 里或者把 component render() 包裹在一个 try/catch 里,听上去都像 “一个函数接受一个component class 并且在它身上做些修改"。

那为什么不创造一个 Babel plugin 在你的基准代码里去定位 React Component 并且包裹它们,这样就可以进行随意的 transform。

React Transform 的实现

如果你在 github 去搜 React Transform ,你可以搜到 gearaon ( dan 在github上的名字,也是唯一一个不使用真名的账号哦~) 几个工程。 这是因为在开始设定 Transform 实现的时候不确定哪些想法最终会有实质作用,所以他拆分了 React Transform 为以下 5 个子工程:

  • React Proxy 实现了对 React Component 的底层代理的功能

  • React Transform HMR 为每一个传入的 component 创建了一个代理,并且在全局对象里面保持了一个代理的清单,当同一个组件再次经历 transform,它去更新这些 component

  • React Transform Catch Error 在 render() 方法外面包了一层 try/catch, 当出现错误可以显示一个自己配置的组件。

  • Babel Plugin for React Transform 会在你的基准代码里找到所有的React component ,在编译的时候提取它们的信息,并且把它们包裹在你选择使用的 Transform 里(比如,React Transform HMR)

  • React Transform Boilerplate 是个模板,展示如何将这些技术组合在一起使用

这种模块化带了好处,同时也带来了弊端,弊端就是使用者在不清楚原理的情况下,不知道这些工程到底如何关联起来使用。并且这里有太多的概念暴露给了使用者, “proxies”, “HMR”, “hot middleware”, “error catcher”, 这使得用户感到很迷惑。

问题:高阶组件还是存在问题

当你解决了这些问题,尽量避免引入由解决它们带来的新的问题。

还记得当年 React-Hot-Loader 在高阶组件上面束手无策吗,它没办法通过 module.export 导出的,包裹在高阶组件里面的组件。而 React Transform 通过静态检查这些组件的生命去“fix”这个问题,寻找继承自 React.Component 或者使用 React.createClass() 申明的 class。

  1. // React Hot Loader 找不到它

  2. // React Transform 找得到它

  3. class Counter extends Component {

  4.  constructor(props) {

  5.    super(props)

  6.    this.state = { counter: 0 }

  7.    this.handleClick = this.handleClick.bind(this)

  8.  }

  9.  handleClick() {

  10.    this.setState({

  11.      counter: this.state.counter + 1

  12.    })

  13.  }

  14.  render() {

  15.    return (

  16.      <div className={this.props.sheet.container} onClick={this.handleClick}>

  17.        {this.state.counter}

  18.      </div>

  19.    )

  20.  }

  21. }

  22. const styles = {

  23.  container: {

  24.    backgroundColor: 'yellow'

  25.  }

  26. }

  27. // React Hot Loader 找到到它

  28. // React Transform 找不到它

  29. export default useSheet(styles)(Counter)

猜猜这里我们遗漏了什么?被导出的 components! 在这个例子中,React Transform 会保留 Counter 的 state , hot reload 会改变render() 和 handleClick() 这些方法,但是任何对 styles 的改变不会体现,因为它不知道 useSheet(styles)(Counter) 正好 return 一个 React component, 这个组件也需要被 proxy。

很多人发现了这个问题,当他们注意到他们在 redux 里面 selectors 以及 action creators 不再会 hot reload。这是因为 React Transform 没有发现 connect() 返回一个组件,然后并没有一个简单的方法去识别。

问题:使用静态方法检查太过于入侵性

找到通过继承自 React.Component 或者使 React.createClass() 创建的class 不是很难 。然而,它可能出错,你也不想 带来误判。

随着React 0.14的发布,这个任务变得更加艰难。任何 functions,如果 return 出来的是一个有效的 ReactElement 那就可能是一个组件。由于你不能肯定,所以你不得不采用探索法。比如说,你可在判断在顶级作用域的 function,如果是以驼峰命名,使用JSX, 并且接受不超过两个以上(props 和 context)参数,那它可能是个React component。这样会误判吗?是,可能会。

更糟糕的是,你必须让所有的 “transform” 去处理 classes 和 functions。如果React 在v16版本里面引进另外一种 一种方式去声明组件呢,我们将要重写所有的transform吗?

最后得出结论,用静态方法 包裹 组件相当复杂。你将要对 functions 和 classes 可能的 export 方式取使用各种方法去处理,包括 default 和 named 的 exports,function声明,箭头函数,class声明,class表达式,createClass() 形式调用,以及等等。每种情况你都需要用一种方法针对相同的变量或者表达式去绑定不同的值。

想办法支持 functional components 是最多的提议, dan 不会考虑在 React Transform 支持它,因为实现的复杂程度会给工程以及它的维护者带来巨大困难,并且可能由于一些边缘情况导致彻底的破坏。

React Hot Loader 3

以上总结是出自 Dan 的一篇在medium上的文章,他称呼 React Hot Loader 是一个 Accidental Complexity,其中还提到它对 compile-to-js 语言 (其他通过编译转成JS的语言)的考虑,以及中途遇到的 babel 的问题等。文章中 Dan 表明他会在几个月内停止 React Transform 而使用一个新的工程代替,新的工程会解决大多数残留的问题,末尾给了一些提示在新工程里面需要做到的。在这篇文章的一个月后,React-Hot-Loader 3 release了,让我们大致的过一下 3 的到底做了些什么。

在调用的时候 proxy

在源码中找到并且包裹React components是非常难做到的,并且有可能是破坏性的。这真的会破坏你的代码,但标记它们相对来说是比较安全。比如我们可以通过 babel-plugin 检查一个文件,针对顶层 class、function 以及 被 export 出来的模块在文件末尾做个标记:

  1. class Counter extends Component {

  2.  constructor(props) {

  3.    super(props)

  4.    this.state = { counter: 0 }

  5.    this.handleClick = this.handleClick.bind(this)

  6.  }

  7.  handleClick() {

  8.    this.setState({

  9.      counter: this.state.counter + 1

  10.    })

  11.  }

  12.  render() {

  13.    return (

  14.      <div className={this.props.sheet.container} onClick={this.handleClick}>

  15.        {this.state.counter}

  16.      </div>

  17.    )

  18.  }

  19. }

  20. const styles = {

  21.  container: {

  22.    backgroundColor: 'yellow'

  23.  }

  24. }

  25. const __exports_default = useSheet(styles)(Counter)

  26. export default __exports_default

  27. // 我们 generate 的标记代码:

  28. // 在 *远端* 标记任何看上去像 React Component 的东西

  29. register('Counter.js#Counter', Counter)

  30. register('Counter.js#exports#default', __exports_default) // every export too

register() 至少会判断传进来的值是不是一个函数,如果是,创建一个 React Proxy 包裹它。它不会替换你的 class 或者 function,这个proxy将会待在全局的map里面,等待着,直到你使用React.createElement()。

仅仅真正的组件才会经历 React.createElement,这就是我们为什么 monkeyPatch React.createElement()。

  1. import createProxy from 'react-proxy'

  2. let proxies = {}

  3. const UNIQUE_ID_KEY = '__uniqueId'

  4. export function register(uniqueId, type) {

  5.  Object.defineProperty(type, UNIQUE_ID_KEY, {

  6.    value: uniqueId,

  7.    enumerable: false,

  8.    configurable: false

  9.  })

  10.  let proxy = proxies[uniqueId]

  11.  if (proxy) {

  12.    proxy.update(type)

  13.  } else {

  14.    proxy = proxies[id] = createProxy(type)

  15.  }

  16. }

  17. // Resolve 发生在 element 被创建的时候,而不是声明的时候

  18. const realCreateElement = React.createElement

  19. React.createElement = function createElement(type, ...args)  {

  20.  if (type[UNIQUE_ID_KEY]) {

  21.    type = proxies[type[UNIQUE_ID_KEY]].get()

  22.  }

  23.  return realCreateElement(type, ...args)

  24. }

在调用端包裹组件解决了很多问题,比如 functional component 不会误判,包裹的逻辑只要考虑 function 和 class,因为我们把生成的代码移到底部这样不会污染代码。

给 compile-to-js 语言提供了一种兼容方式

Dan 提供了类似于 React-Hot-Loader 1 的 webpack loader, 即 react-hot-loader/webpack。在不使用 babel 做静态分析的情况下,你可以通过它找到 module.export 出来的 component,并且 register 到全局,然后在调用端实现真正的代理。所以这种方式只能针对实际 export 出来的组件做保留 state 以及 DOM 的 hot reloading。

什么情况下会使用这种方式,那就是针对其他 compile-to-js 的语言比如 Figwheel 和 Elm Reactor。在这些语言里面有自己的类的实现等,所以 Babel 没有针对源码办法去做静态检查,所以必须在编译之后去处理。

错误处理

还记得 React Transform 里面的React Transform Catch Error 吗。React-Hot-Loader 把处理 render 出错的逻辑放到 AppContainer 。因为 React V16 增加了 error boundaries ,相信在未来的版本 React-Hot-Loader 也会做相应调整。

写在最后

这就是对 React-Hot-Loader 的实现的一个追溯,如果你真的理解了,那么你在配置 React-Hot-Loader 到你的应用代码里面的每个步骤会有一个重新的认识。我不确定大家是否读懂了,或者存在还存在什么疑问,欢迎来沟通讨论。截止写文现在 React-Hot-Loader 4 已经在进行中,我比较偏向于 4 会和 React 迭代保持更亲密的同步( 从之前 error boundaries 和 official instrumentation API 来看),到时候拭目以待吧。

参考:

  • dan 在 medium 的总结: https://medium.com/@dan_abramov/hot-reloading-in-react-1140438583bf

文中所提到的相关仓库:

  • react-proxy: https://github.com/gaearon/react-proxy

  • react-transform-hmr: https://github.com/gaearon/react-transform-hmr

  • babel-plugin-react-transform: https://github.com/gaearon/babel-plugin-react-transform

  • react-transform-catch-errors: https://github.com/gaearon/react-transform-catch-errors

  • react-transform-boilerplate: https://github.com/gaearon/react-transform-boilerplate

  • react-hot-loader: https://github.com/gaearon/react-hot-loader

其他相关文章:

  • HMR 的原理: https://jlongster.com/Backend-Apps-with-Webpack--Part-III

  • React Hot Loader之死: https://medium.com/@dan_abramov/the-death-of-react-hot-loader-765fa791d7c4

推荐阅读

马斯洛的锤子

自动生成测试脚本方案浅析

纠正你对区块链的认知偏见

沪江全链路跟踪系统设计与实践

走进Node.js之多进程模型