|
分类 |
详情 |
|
|---|---|---|
|
基础信息 |
评估器名称 |
图生图-一致性 |
|
评估器类型 |
黑盒评估器,评估标准的明细不对客展示 |
|
|
效果说明 |
功能概述 |
支持按参考图生成单/多图场景,判断生图和参考图之间的一致性,包括主题一致性,属性一致性,风格一致性维度考察 |
|
评估方式 |
复合评估器(LLM + Code) |
|
|
评估对象 |
图片 |
|
|
评估目标 |
内容质量 |
|
|
应用场景 |
AIGC 产物质量评估 |
|
|
评估规则说明 |
手动选择输入,若涉及打分,需说明总分范围、评分维度(含权重)、计算公式及结果解读(如优秀/良好/需改进的分数区间);若为分类/检测类评估器,则说明具体规则 |
|
|
评估置信度 |
85.00% |
|
|
参数 |
参数名称 |
是否必填 |
参数说明 |
|---|---|---|---|
|
输入信息 |
query |
是 |
用户输入内容 |
|
check_points |
否 |
待评估的考察点 |
|
|
reference_imgs |
是 |
用户输入的参考图片list |
|
|
reply |
是 |
回复文本 |
|
|
reply_imgs |
否 |
回复图片list |
|
|
输出信息 |
score |
是 |
评估分数 |
|
reasoning |
是 |
具体评估理由 |
{
"{{query}}": {
"content_type": "text",
"json_schema": "{\"type\": \"string\"}",
"text": "把图中的碗变小"
},
"{{reply_imgs}}": {
"content_type": "multi_part",
"multi_part": [
{
"content_type": "image",
"image": {
"url": "https://lf-stark-public.bytetos.com/obj/stark-public/vlm_benchmark/Instructions/output_7.png"
}
}
]
},
"{{reference_imgs}}": {
"content_type": "multi_part",
"multi_part": [
{
"content_type": "image",
"image": {
"url": "https://lf-stark-public.bytetos.com/obj/stark-public/vlm_benchmark/Instructions/input_7.png"
}
}
]
}
}
{
"score": "0",// 表示整体的评估分数
"reasoning": "", //具体的评分依据
}