AI

AI 评估数据集构建与标注流程(2025)

AI 评估数据集构建与标注流程(2025)评估数据集决定了评估的可信度,需要规范采样与标注与质量流程。一、采样与覆盖;采样:覆盖主流与长尾场景,控制偏差。分层:按类别与难度分层,提升代表性。二、标注与质检;标注规范:统一标签与说明,降低歧义。质检:双人标注与仲裁,提升质量与一致性。

LLM 函数调用与工具编排实践(2025)

LLM 函数调用与工具编排实践(2025)函数调用与工具编排让模型与系统协作,提升可控性与可复现性。一、接口与模式;JSON Schema:定义函数参数与返回,校验输入输出。安全边界:限制可调用能力与资源,遵循最小权限。二、计划与执行;计划执行:将多步任务拆分为计划与步骤,控制顺序与依赖。

LangChain 代理与工具编排多步计划实践(2025)

一、接口与安全;工具接口:以 JSON Schema 定义参数与返回。最小权限:限制可调用能力与速率与超时。二、计划与执行;多步计划:拆分任务为子目标与序列化步骤。观察与反思:在每步记录观察并调整策略。三、观测与审计