本文介绍了 LangSplat,它构建了一个 3D 语言场,可以在 3D 空间内进行精确、高效的开放词汇查询。 与在 NeRF 模型中建立 CLIP 语言嵌入的现有方法不同,LangSplat 通过利用 3D 高斯集合(每种编码语言特征都从 CLIP 中提取)来代表语言领域,从而推进了该领域的发展。 通过采用基于图块的splatting技术来渲染
值得一提的是,多数任务直接使用了未经微调的预训练 scFoundation 模型,大大降低了应用基座模型的门槛和成本: a.获得增强测序深度的基因表达 (即常见的 Imputation 任务)。scFoundation 超过了多个领域内流行的 Imputation 方法,且这些方法需要在特定数据上的额外训练,而 scFoundation 只是预训练模型 b.癌症药物反应预测...