技能名称: Label Studio
详细描述:

数据标注器

一个用于从命令行摄取、转换、查询和管理数据条目的数据处理与标注工具包。所有操作均会记录时间戳并存储在本地。

命令

数据操作

每个数据命令有两种工作模式：无参数运行可查看最近条目，或传入输入以记录新条目。

| 命令 | 描述 |
|---------|-------------|
| data-labeler ingest | 摄取数据 — 记录新的摄取条目或查看最近条目 |
| data-labeler transform | 转换数据 — 记录转换操作或查看最近条目 |
| data-labeler query | 查询数据 — 记录查询操作或查看最近条目 |
| data-labeler filter | 过滤数据 — 记录过滤操作或查看最近条目 |
| data-labeler aggregate | 聚合数据 — 记录聚合操作或查看最近条目 |
| data-labeler visualize | 可视化数据 — 记录可视化操作或查看最近条目 |
| data-labeler export | 导出数据 — 记录导出条目或查看最近条目 |
| data-labeler sample | 采样数据 — 记录采样操作或查看最近条目 |
| data-labeler schema | 模式管理 — 记录模式条目或查看最近条目 |
| data-labeler validate | 验证数据 — 记录验证操作或查看最近条目 |
| data-labeler pipeline | 管道管理 — 记录管道步骤或查看最近条目 |
| data-labeler profile | 数据概况 — 记录概况或查看最近条目 |

实用命令

| 命令 | 描述 |
|---------|-------------|
| data-labeler stats | 显示汇总统计 — 每类条目数、总条目数、磁盘使用量 |
| data-labeler export | 将所有数据导出到文件（格式：json、csv、txt） |
| data-labeler search | 在所有日志文件中搜索术语（不区分大小写） |
| data-labeler recent | 显示活动历史中最近20条条目 |
| data-labeler status | 健康检查 — 版本、数据目录、条目数、磁盘使用量、最近活动 |
| data-labeler help | 显示可用命令 |
| data-labeler version | 显示版本（v2.0.0） |

数据存储

所有数据本地存储在 ~/.local/share/data-labeler/：

• - 每个数据命令写入自己的日志文件（例如 ingest.log、transform.log）
• 条目以 timestamp|value 对（管道符分隔）存储
• 所有操作在 history.log 中记录时间戳
• 导出文件生成在数据目录中（export.json、export.csv 或 export.txt）

要求

• - Bash（使用 set -euo pipefail）
• 标准Unix工具：date、wc、du、grep、tail、cat、sed
• 无需外部依赖或API密钥

使用场景

• - 记录和跟踪数据处理操作（摄取、转换、查询等）
• 维护可搜索的数据管道活动历史
• 以JSON、CSV或纯文本格式导出累积记录
• 作为更大自动化或数据管道工作流的一部分
• 当需要轻量级、仅本地的数据操作跟踪器时

示例

bash

记录新的摄取条目

查看最近的转换条目

在所有日志中搜索

以JSON格式导出所有内容

检查总体统计信息

查看最近活动

健康检查