12 月 13 日,Transformers.js 作者 Joshua Lochner 在 GitHub 宣扬 Transformers.js v2.11 发布。

他称:Transformers.js v2.11 是咱们迄今为止推出的最大版别之一,包括了8个令人兴奋的新模型!

现在支撑 73 种不同的模型架构!

1、 ViTMatte 用于图画抠图: 直接在你的浏览器中将图画分离成远景和布景!这将为一些酷炫的图画编辑网页应用带来新风貌!

Transformers.js v2.11 发布,迄今为止最大版别之一,包括 8 个令人兴奋的新模型!

2、Chinese-CLIP 用于中文的零样本图画分类:根据训练过程中未曾见过的标签来分类图画。

假如你是一位对在网页应用中参加 AI 感兴趣的中国前端开发者,请告诉咱们接下来应该增加哪些模型!

Transformers.js v2.11 发布,迄今为止最大版别之一,包括 8 个令人兴奋的新模型!

3、 ESM 用于蛋白质序列的特征提取、分类、掩码言语建模和零样本分类。****

因为 Transformers.js 在你的浏览器本地运转 AI 模型(即,无需服务器),这对隐私维护有巨大优点:特别是在医疗应用上!

Transformers.js v2.11 发布,迄今为止最大版别之一,包括 8 个令人兴奋的新模型!

4、Hubert 用于音频分类和主动语音识别。

Transformers.js v2.11 发布,迄今为止最大版别之一,包括 8 个令人兴奋的新模型!

5、DINOv2 用于图画分类。

Transformers.js v2.11 发布,迄今为止最大版别之一,包括 8 个令人兴奋的新模型!

6、ConvBERT 用于掩码言语建模、文本/符号分类和问题答复。

7、ELECTRA 用于特征提取。

**8、最终,Phi 用于文本生成!
**注意:这仅增加了对架构的支撑。当外部数据格式在 ONNX Runtime 中得到支撑时,咱们将发布一个更新,其间包括可用的 Phi 模型的转换版别。

你能信任这些模型全部都能在你的浏览器本地完全运转吗?无需装置!PS:假如你对了解更多感兴趣,请查看Transformers.js文档!

新示例:语义音乐查找应用程序

在前次发布中,咱们增加了对 CLAP 模型(音频版的 CLIP)的支撑,因此在这一次,咱们推出了一个简略的演示应用程序,展现了如何使用 CLAP 模型来履行实时语义音乐查找!为了简化,咱们使用纯 JavaScript 完成了所有功能,但您可以随意将其适配到您选择的框架中!自始自终,源代码是开源的!

Transformers.js v2.11 发布,迄今为止最大版别之一,包括 8 个令人兴奋的新模型!