Go语言技术文章
-
CNCF 项目毕业公告不只是行业新闻,也是一组公开工程信号。本文从治理、采用、安全和工程成熟度四个维度拆解公告,并用 NATS、Karmada、Kubeflow 的近期公告说明如何阅读与选型。454 收藏 -
GitHub Actions 的 schedule 只在默认分支运行时,常见原因不是 cron 写错,而是工作流文件未进入默认分支、时区理解不一致、仓库长期无活动或高峰期排队。本文按顺序给出排查方法。501 收藏 -
从 OCI Image Spec、Runtime Spec 和 Distribution Spec 的职责边界出发,说明 v1.1.1 时代 manifest、mediaType、artifactType、subject 与 zstd 兼容要求怎样影响构建器、仓库复制器和运行时。297 收藏 -
科技周边 · 业界新闻 | 6天前 | 云原生 · 运维 · kubernetes · 版本升级 · 兼容性 · Kubernetes 弃用 版本升级 版本偏差 Release notes 版本发布说明 运维变更
Kubernetes 发布说明不应只当新闻摘要阅读。本文用版本范围、变更类型、影响对象和升级动作四个字段,把官方 release notes 整理成可执行的运维清单,并说明版本偏差、弃用和回滚边界。271 收藏 -
GitHub Actions 构件保留时间决定延迟部署、审批和追溯时能否取得文件。本文说明仓库与单构件保留策略、跨任务上传下载示例、新旧对象设置差异及过期后的处理。408 收藏 -
Transformers 的 repetition_penalty 用于调节已经出现过的 token 的生成倾向。本文从固定输出长度开始,给出逐步调参、GenerationConfig 配置和与 no_repeat_ngram_size、采样参数的边界,避免惩罚过高导致关键词丢失。124 收藏 -
用 Transformers 的 save_pretrained 分别保存模型和 tokenizer,整理权重、配置与词表的目录关系,并说明如何在新环境中恢复。268 收藏 -
用 Hugging Face Evaluate 完成指标加载、输入格式确认、批量提交预测结果和最终 compute,并解释一次性计算与增量计算的选择边界。261 收藏 -
Transformers pipeline 在初始化时用 device 指定 CPU 或 CUDA 等设备。本文说明本地模型示例、输入张量移动、单设备检查,以及 device 与 device_map 不应混用的原因。212 收藏 -
科技周边 · 人工智能 | 6天前 | python · 人工智能 · 并行处理 index Hugging Face Datasets Datasets shard num_shards contiguous
用 Hugging Face Datasets 的 shard 方法把数据集分给多个 worker,解释 contiguous、num_shards 和 index 的关系,处理余数、shuffle 顺序以及分片边界问题。417 收藏 -
用 Transformers 和 bitsandbytes 加载量化模型时,device_map 应按推理方式、显存预算和是否需要 CPU offload 来选择。本文区分 auto、明确设备、自定义字典与 max_memory,并说明如何读取分配结果。280 收藏 -
科技周边 · 人工智能 | 6天前 | python · Transformers TextIteratorStreamer 流式生成 AsyncTextIteratorStreamer StoppingCriteria
Transformers streamer 的结束 sentinel 只负责通知消费者收尾,不会自动取消 model.generate。本文区分 TextIteratorStreamer、AsyncTextIteratorStreamer、timeout、stop_strings 与 StoppingCriteria 的职责,并给出线程、异步和外部停止按钮的实现边界。198 收藏 -
Datasets map 设置 batched=True 后,回调默认接收列列表组成的批字典。本文通过本地小数据集说明逐条与批量写法、输出列行数对齐、remove_columns 和尾批处理。279 收藏 -
用 GenerationConfig 集中保存 Transformers 的生成参数,掌握 generation_config.json 的复用方式、加载边界和 generate 调用优先级。161 收藏 -
解释 Transformers 中 attention_mask 缺失的影响,区分单条输入、批量 padding、因果 mask 和 decoder mask,并给出 tokenizer 自动生成与检查掩码的实用示例。453 收藏