tp annotate

tp annotate status
tp annotate push run-4f2a91 run-8b1c02 --limit 200
tp annotate pull tuneplane-run-4f2a91-vs-run-8b1c02 --into qa-preference

必须两个 run id，因为偏好标注问的是 A 和 B 哪个更好。完整流程见收集偏好标注。

实例

tp annotate status                                        # Argilla 到底配没配
tp annotate push run-4f2a91 run-8b1c02 --limit 200
tp annotate push run-4f2a91 run-8b1c02 -d q3-writing      # 自己给 Argilla 数据集起名

tp annotate pull tuneplane-run-4f2a91-vs-run-8b1c02                          # 只看统计
tp annotate pull tuneplane-run-4f2a91-vs-run-8b1c02 --into qa-preference
tp annotate pull tuneplane-run-4f2a91-vs-run-8b1c02 --into qa-preference -v 20260912

pull 的位置参数是 Argilla 的数据集名；--into 指定偏好落成新版本的那个平台数据集。不带 --into 时它只打印统计。从 tp annotate status 开始。在没有接入 Argilla 实例的部署上，其余每条命令都会以让人困惑的方式失败。

`tp annotate`

Manage preference annotation

tp annotate <subcommand>

命令	说明
`tp annotate pull`	Pull annotations back as a dataset
`tp annotate push`	Send answers out for annotation
`tp annotate status`	Check the Argilla integration

`tp annotate pull`

Pull annotations back as a dataset

tp annotate pull <DATASET> [options]

参数	说明
`DATASET`	Argilla dataset name (必填)

选项	说明
`--into`	Land them as a new version of this platform dataset; omit to only print the statistics
`--version`, `-v`	Dataset version; defaults to the date

`tp annotate push`

Send answers out for annotation

tp annotate push <RUN_A> <RUN_B> [options]

参数	说明
`RUN_A`	Run id of the first training run (必填)
`RUN_B`	Run id of the second training run (必填)

选项	说明
`--dataset`, `-d`	Argilla dataset name; synthesised when empty
`--limit` `<int range>`	How many pairs to push at most (默认 `200`)

`tp annotate status`

Check the Argilla integration

tp annotate status

除 --help 外没有其他选项。

CLI 参考

配置

实验

训练

产物与评测

资源

管理

实例

`tp annotate`

`tp annotate pull`

`tp annotate push`

`tp annotate status`

​实例

​tp annotate

​tp annotate pull

​tp annotate push

​tp annotate status

实例

`tp annotate`

`tp annotate pull`

`tp annotate push`

`tp annotate status`