中国科学家锻炼言语模型用于单细胞测序技术，助力破译肿瘤 ...(1/5)

图｜scBERT 模型中对未标记数据的自监视学习以及针对特定任务数据微调（来源：Nature Machine Intel其中，系统会将掩蔽表白式嵌入和基因嵌入（Gene Embedding）作为输入添加，并将其输入到执行器块中，而重构器（reconstructor）则用于生成输出，掩蔽基因的输出则被用于计算重建损失。在监视微调阶段，也就是图中粉色的 supervised finetuning 部分，特定任务的 scRNA-seq 数据，也会作为 ... [查看原文]

标签： 积家

全部图片

查看原图