术语slug: fully-sharded-data-parallel-fsdp

完全分片数据并行

Fully Sharded Data Parallel (FSDP)

将模型参数、梯度和优化器状态在所有GPU间分片存储以节省显存的技术

收录情报动态

共 1 篇 · 第 1/1 页