术语slug: transformer-architecture

Transformer 架构

Transformer Architecture

基于自注意力机制的主流深度学习序列建模结构

收录情报动态

共 4 篇 · 第 1/1 页
Hacker News AIT2·开发与工程
58 分
Node.js 从零构建 LLM 开源教程:用 TypeScript 实现注意力机制与训练循环

该项目提供了一套在 Node.js/TypeScript 环境中从零构建大语言模型的完整教程,涵盖数据加载、嵌入层、注意力机制及 Transformer 块等核心组件。所有代码均封装为可运行的 GitHub 包,旨在通过非 Python 语言的重新实现帮助开发者深入理解模型底层原理,消除“黑盒”认知障碍。

TechCrunch AIT2·商业与生态
78 分
TypeSafe AI 获 8.7 亿美元融资估值 75 亿:非文本概率模型 Jev 发布数周即被三分之一财富 500 强采用

AI 初创公司 TypeSafe AI 完成 8.7 亿美元融资,估值达 75 亿美元,其推出的非文本大模型 Jev 在发布仅数周内即获得市场爆发式关注。Jev 基于 Transformer 架构但不输出文本,而是生成经过校准的概率决策,据称已有三分之一财富 500 强企业接入该模型。