Go语言技术文章
-
科技周边 · 人工智能 | 6天前 | 人工智能 · padding Transformers tokenizer max_length attention_mask truncation return_tensors
Transformers tokenizer 的 return_tensors 只负责把编码结果转换成张量,不会自动解决批量文本长度不同的问题。本文从批量输入无法组装的现象出发,说明 padding、truncation、max_length 和 attention_mask 如何配合,并给出动态长度与固定长度的选择方法。352 收藏 -
科技周边 · 人工智能 | 6天前 | 人工智能 · 文本分类 softmax Transformers AutoModelForSequenceClassification logits id2label
Transformers 分类模型返回的 logits 不是概率。本文从输出张量形状、id2label 映射和任务类型三个角度说明如何把 logits 正确解释成类别结果,并给出保留批量维度的最小推理代码。172 收藏