腾讯开源的 hel 提供了加载远程模块的能力,谈谈它的实现原理

简介: 腾讯开源的 hel 提供了加载远程模块的能力,谈谈它的实现原理

腾讯开源的 hel,提供了一种运行时引入远程模块的能力,模块部署在 CDN,远程模块发布后,不需要重新构建发布,就能生效。

个人觉得它的实现原理非常的不错,因此分享给大家。

远程模块可以作为微模块(模块级别的微前端),是页面级别的微前端的一种补充,因为页面级别的微前端,如 qiankun、无界等,它们的粒度太粗了,有时候需要更细粒度的微前端,例如:组件、函数级别的。这种场景,就可以使用远程模块,来实现微模块的效果。


远程模块使用示例


import helMicro from 'hel-micro';
export async function callRemoteMethod() {
  const lib = await helMicro.preFetchLib('hel-tpl-remote-lib');
  return lib.num.random(22);
}
  1. 引入 hel-micro 模块
  2. 通过 helMicro.preFetchLib 拉取远程模块
  3. 调用远程模块

整个使用过程非常的简单易懂,但这样无法使用 TS 类型检查。

于是又有了以下的写法:

需要先在项目入口调用:


await helMicro.preFetchLib('hel-tpl-remote-lib');
然后代码中就可以这样使用了:
ts
复制代码
import remoteLib from 'hel-tpl-remote-lib';
function callRemoteMethod() {
  return remoteLib.num.random(19);
}
TS 类型则是由 hel-tpl-remote-lib 这个 npm 仓库提供。

hel 核心原理


概念约定


1686398509849.png


  • 远程模块
    发布 CDN,在浏览器运行时,调用 helMicro.preFetchLib 真正拉取代码
  • 代理模块
    用于开发时的类型提示,上传到 npm。开发时安装并使用该 npm 包,可以获得 TS 类型提示
  • 元数据

元数据是一份 json 配置清单,是在远程模块构建完成后,从构架产物中提取生成的。它记录了远程模块的名称、入口脚本路径等信息


hel 运行流程


1686398495229.png


  1. 当调用 helMicro.preFetchLib 时,先拉取元数据,从元数据中获取到入口脚本的 url,然后拉取远程模块入口并执行,最后 helMicro.preFetchLib  将模块返回,代码中就可以直接使用了。
  2. import 代理模块,实际上是从远程模块的缓存中读取模块。因此,必须要等待  helMicro.preFetchLib 拉取完成后import 的代理模块才能够获取到远程模块

hel 的默认拉取元数据的方式,是根据远程模块名称,到 unpkg CDN 对应的 npm 包下,获取元数据 meta_data.json 文件。这个拉取元数据的过程也可以开发者自定义。

整个流程非常简单,但难度在于,如何构建打包出代理模块和远程模块


模块构建


代理模块


代理模块负责以下内容:

  • 在运行时读取远程模块的缓存
  • 用于提供 TS 类型支持

运行时读取远程模块的缓存


hel 提供了 exposeLib 函数,用于读取远程模块的缓存

打包代理模块时,参考以下代码作为构建入口:


import type { LibProperties } from './你真正的模块代码';
import { exposeLib } from 'hel-lib-proxy';
// 读取远程模块缓存,远程模块名为:hel-tpl-remote-lib
export const lib = exposeLib<LibProperties>('hel-tpl-remote-lib');
// export 类型
export type Lib = LibProperties;
// export 远程模块的缓存代码
export default lib;

该入口文件主要做了以下事情:

  • export 导出 TS 类型
  • 使用 exposeLib,将远程模块的缓存,暴露出来

以上述代码作为入口打包,实际上并没有将模块真实代码打包到产物中。因此代理模块,是一个非常小的模块,没有任何的模块逻辑。

在项目中使用远程模块 hel-tpl-remote-lib,最后打包只会打包代理模块这一小部分代码,不会将真正的代码打包到项目的产物中,因此还能提升项目的构建速度

真正的代码,是运行时,在 preFetchLib 拉取远程模块时加载并运行的。


提供 TS 支持


只需要在 package.json声明 typing 字段


{
   "main": "hel_proxy/entry.js",
   "typings": "typings/index.d.ts",
}
  • typing 的值为构建时生成的 TS 类型声明文件的路径。
  • main 则用于声明代理模块的入口,指向的是打包后的产物。

发布


代理模块直接发布到 npm 即可,按 npm 包的用法正常引入和使用即可

远程模块


远程模块的职责如下:

  • 提供远程模块的真实运行代码
  • 通知 hel 的  preFetchLib 函数,远程模块加载完成
  • 提供 index.html,用于提取元数据,例如提取出远程模块的入口(加载时,需要首先拉取哪些代码)

要做到以上的内容,远程的模块,也需要用一个入口文件再包一层,伪代码如下:


import { libReady } from '@tencent/hel-lib-proxy';
async function main() {
  // 这里是 import 真正的模块代码了
  const lib = await import('./你真正的模块代码');
  // 注意此处传递的是 default
  libReady('hel-tpl-remote-lib', lib.default);
}
main().catch(console.error);

加载入口时立即调用 main 函数:

  • import 真正的模块代码
  • 调用 libReady 并传入远程模块的值,该函数会通知  preFetchLib,远程模块已经加载完成

如果一个远程模块,依赖另外一个远程模块,怎么办?

假如:hel-tpl-remote-lib 依赖 other-libother-lib 为另一个远程模块。即


// hel-tpl-remote-lib 的模块代码
import xxx from "other-lib"

那就 import other-lib 前,先执行 preFetchLib,拉取 other-lib。这样 other-lib 的代理模块,就能正确获取到内容。


import { LIB_NAME } from '../src/configs/subApp';
import { libReady } from '@tencent/hel-lib-proxy';
async function main() {
  // 如有其他远程包依赖并且需要在内部使用静态导入的语法,可使用 preFetchLib 来加载这些包体
  const { preFetchLib } = await import('@tencent/hel-micro');
  await preFetchLib('other-lib');
  // 必须要用动态 import,因为如果当前包,还依赖其他的 hel 微前端依赖,需要 preFetchLib 之后,再进行引入。
  const lib = await import('./你真正的模块代码');
  // 注意此处传递的是 default
  libReady('hel-tpl-remote-lib', lib.default);
}

如果存在嵌套的远程模块,就必须要用动态 import 引入真正的模块代码


await import('./你真正的模块代码')

元数据提取


hel 通过分析 index.html,来提取元数据,最重要的是要提取出模块的入口脚本,因为打包产物可能会有多个文件,要确定哪个才是入口。

假如有以下 HTML:


<!doctype html>
<html lang="en">
<script>
    这是一串内联 script
</script>
<script 
   src="https://unpkg.com/hel-tpl-remote-lib@2.0.0/hel_dist/static/js/main.5ab2b93c.chunk.js"
></script>
</html>

那么会提取到两个入口脚本:

  • 内联脚本:内联脚本会被提取出来,存放到单独的文件,该文件的路径会被记录到元数据
  • main.5ab2b93c.chunk.js

上述 index.html 会得到以下元数据(节选):


{
    bodyAssetList: [
      {
        "tag": "script",
        "attrs": {
          "src": "https://unpkg.com/hel-tpl-remote-lib@2.0.0/hel_dist/hel_userChunk_1.js"
        }
      },
      {
        "tag": "script",
        "attrs": {
          "src": "https://unpkg.com/hel-tpl-remote-lib@2.0.0/hel_dist/static/js/main.5ab2b93c.chunk.js"
        }
      }
    ]
}

注意这里的资源路径是完整的 url 了。

preFetchLib 函数会读取元数据,然后拉取这些入口脚本。


发布


开源版本的 hel,远程模块和元数据,同样会发布到 npm。这样就可以从 unpkg 这个 CDN,直接拉取到元数据和远程模块


从元数据的入口脚本可以看出,入口脚本的路径,已经是指向了 unpkg

小结


以上内容,就是一个完整的 hel 的原理:

  • 在页面初始化前,先  preFetchLib  拉取远程模块,然后直接可以拿到远程模块的对象
  • 然后代理模块也能够从缓存中,获取到远程模块的内容

难点则在于如何打包远程模块和代理模块,需要遵守特定的规范:

  • 远程模块,则需要处理嵌套的远程模块,然后通知 preFetchLib  函数,加载完成
  • 代理模块,需要导出 TS 类型,并读取远程模块的缓存并导出
  • 元数据,需要根据 index.html 提取出入口脚本

但你觉得这就完了吗?其实没有。


元数据的妙用


hel 提供了自定义拉取元数据的能力,这意味着,我们有了控制的返回元数据的能力,元数据中有远程模块的入口,因此能控制拉取的远程模块

下面是一个例子:

1686398333125.png

元数据通过版本管理平台的接口拉取。

通过在版本管理平台上配置,可以返回的元数据的对应的远程模块版本,从而做到控制远程模块的版本号,能做到回滚,灰度等能力

上述版本管理平台,其实在腾讯内部已经实现,但目前仍未开源,但从 github 上已经看到是计划中了

有了自定义拉取元数据的能力,这个过程就会有非常大的自由度,由此可以衍生出一个非常大的微模块生态。理论上可以做到但不限于以下的效果:

  • 控制全局的远程模块的版本
  • 快速回滚能力
  • 灰度能力、AB test 能力,根据地域分布、用户等条件分发不同的元数据
  • 按项目维度,进行版本控制,不同的项目,返回不同的元数据,从而使用不同的远程模块版本
  • ……

总结


不过截止目前(2022.12.13),开源 hel 目前提供的部署方式,只是部署到 unpkg CDN 上,对于公司项目来说,不太适合,需要提供更多的最佳实践;它的开源生态,也有待完善。

但不得不承认的是,hel 的整个思路,的确是较为优秀,值得学习和研究, 能够作为一种优秀的远程模块/微模块方案。

最后也希望 hel 能越做越好吧~

如果这篇文章对您有所帮助,可以点赞加收藏👍,您的鼓励是我创作路上的最大的动力。也可以关注我的公众号订阅后续的文章:Candy 的修仙秘籍(点击可跳转)

目录
相关文章
|
7月前
|
存储 Java 数据管理
探秘JDK 10:崭新特性悉数解析
探秘JDK 10:崭新特性悉数解析
96 0
|
6月前
|
XML JavaScript Java
技术经验分享:Asea——轻量级的AS3模块配置与加载管理库
技术经验分享:Asea——轻量级的AS3模块配置与加载管理库
45 0
|
7月前
|
前端开发 JavaScript UED
第五章(原理篇) 微前端技术之模块联邦与动态加载
第五章(原理篇) 微前端技术之模块联邦与动态加载
308 0
|
6月前
|
小程序 存储 UED
如何实现一次搭建 多平台适配的小程序
【6月更文挑战第3天】如何实现一次搭建 多平台适配的小程序
|
7月前
|
缓存 监控 负载均衡
【分布式技术专题】「缓存解决方案」一文带领你好好认识一下企业级别的缓存技术解决方案的运作原理和开发实战(数据缓存不一致分析)
【分布式技术专题】「缓存解决方案」一文带领你好好认识一下企业级别的缓存技术解决方案的运作原理和开发实战(数据缓存不一致分析)
135 2
|
7月前
|
缓存 应用服务中间件 数据库
【分布式技术专题】「缓存解决方案」一文带领你好好认识一下企业级别的缓存技术解决方案的运作原理和开发实战(多级缓存设计分析)
【分布式技术专题】「缓存解决方案」一文带领你好好认识一下企业级别的缓存技术解决方案的运作原理和开发实战(多级缓存设计分析)
163 1
|
7月前
|
存储 缓存 监控
【分布式技术专题】「缓存解决方案」一文带领你好好认识一下企业级别的缓存技术解决方案的运作原理和开发实战(数据更新场景策略和方案分析)
【分布式技术专题】「缓存解决方案」一文带领你好好认识一下企业级别的缓存技术解决方案的运作原理和开发实战(数据更新场景策略和方案分析)
90 0
|
7月前
|
负载均衡 应用服务中间件 Linux
深入浅出学习透析Nginx服务器的架构分析及原理分析「底层技术原理+运作架构机制」
深入浅出学习透析Nginx服务器的架构分析及原理分析「底层技术原理+运作架构机制」
532 0
|
7月前
|
存储 缓存 监控
【分布式技术专题】「缓存解决方案」一文带领你好好认识一下企业级别的缓存技术解决方案的运作原理和开发实战(场景问题分析+性能影响因素)
【分布式技术专题】「缓存解决方案」一文带领你好好认识一下企业级别的缓存技术解决方案的运作原理和开发实战(场景问题分析+性能影响因素)
120 0
|
网络协议 安全 网络安全
华为-DSVPN 案例配置及原理分析
华为-DSVPN 案例配置及原理分析
705 0
华为-DSVPN 案例配置及原理分析