人工智能技术文章
-
科技周边 · 人工智能 | 1星期前 | python · 人工智能 · Hugging Face Datasets DatasetDict Features concatenate_datasets
用 Hugging Face Datasets 的 concatenate_datasets 合并字段结构一致的 Dataset,说明 axis=0 与 axis=1、DatasetDict 的 split 取值方式,以及列名或 Features 不一致时的排查路径。161 收藏 -
远程 Parquet 查询的成本不只来自 SQL:Hive 分区决定先跳过哪些文件,row group 大小影响并行、压缩和列统计裁剪。本文用 DuckDB 语句拆清两层布局关系,并给出按查询形态选择数据组织方式的建议。160 收藏 -
DuckDB 读取 year=YYYY/month=MM 目录下的 Hive Parquet 时,可以通过 read_parquet 的 hive_partitioning=true 将目录键值带成可查询的分区列;本文说明自动识别、日期类型推断和分区过滤的边界。488 收藏 -
本文用 Hydra 命令行的波浪号覆盖临时删除 Defaults List 配置组,说明 ~group、~group=option 和完整路径的写法,以及删除后最终配置的变化。239 收藏 -
Pydantic validate_call 默认只处理函数参数,返回值需要显式开启 validate_return=True。本文用一个返回模型示例拆清两条校验链,并说明性能与接入边界。117 收藏 -
Hydra 合成配置时,同名字段的最终值取决于 Defaults List 的顺序。本文用一个最小 YAML 示例说明 _self_ 放在开头或末尾时的覆盖方向,并用 defaults-tree、defaults 和 cfg job 定位值的来源。181 收藏 -
Hydra 可以用 defaults 组合模型、数据和设备配置组,再用 group=option 在命令行切换已声明的选项;对可能不存在的附加组件使用 optional,缺失时跳过该项。本文用一套小型训练配置说明两种覆盖方式和诊断参数。146 收藏 -
OpenAI 后台响应取消后,不要只依赖前端按钮或覆盖式写状态。本文用 response_id、response.cancelled 和条件更新设计一套可幂等的本地任务状态保存方案。165 收藏 -
Haystack Pipeline 在 connect() 阶段发现组件连接类型不匹配时,按 socket 名称、多输出选择、类型适配和输入占用四层排查,并用最小转换组件修复。383 收藏 -
科技周边 · 人工智能 | 1星期前 | 人工智能 · openai · Webhook · WebHook OpenAI Responses API background response response.completed
OpenAI Responses API 的后台请求可以用 webhook 接收完成通知。本文按一次接入迁移的实际顺序,说明 background: true、response.completed、原始请求体签名校验、event.data.id 取回完整响应,以及重复投递和错误分支的处理边界。499 收藏 -
Gradio 默认会为事件监听器建立队列,concurrency_limit 决定同一事件同时运行的请求数。本文说明单事件限流、用 concurrency_id 共享 GPU 队列,以及 None、default 和 Blocks.queue 默认值的边界。305 收藏 -
OpenAI webhook 的 response.completed、response.cancelled 和 response.failed 都通过 data.id 关联后台响应,但业务含义不同。本文用一个保留原始请求体验签的 Node.js 分派示例,说明三种状态如何落库、哪些分支不能合并,以及怎样处理重复和未知事件。356 收藏 -
A2A Agent Card 不是普通 API 文档,而是代理发现与交互协商入口。本文用一份可改造的 JSON 说明身份、能力、技能、输入输出模式、supportedInterfaces 服务地址和客户端选择顺序,并补充 well-known 发现、认证与缓存边界。165 收藏 -
说明 Datasets 批量改名中重复目标与未改名列冲突的区别,给出最终列名检查和交换名称示例,并提醒同步下游字段与各 split 的约定。468 收藏 -
科技周边 · 人工智能 | 1星期前 | python · 人工智能 · Hugging Face Transformers tokenizer max_length truncation 句子对分词 only_second
Transformers 处理句子对时,使用 truncation=only_second 可以只截断第二段;本文说明最小调用、max_length 总预算、批量 padding 和溢出处理的边界。471 收藏