不完整的样本会被跳过并给出警告。完整运行包含 7,093 个样本;如果加载的样本较少,请在报告结果前检查快照和缺失文件警告。官方 Hugging Face 数据源可通过 --dataset-hub huggingface 获取
属性
属性
数值
基准测试名称
cc_ocr_v2
数据集ID
evalscope/CC-OCR-V2
论文
论文
标签
Grounding 、 MultiLingual 、 MultiModal 、 QA
评估指标
normalized_score
默认示例数
0-shot
评测划分
test
数据统计
指标
数值
总样本数
7,093
提示词长度(平均)
272.14 字符
提示词长度(最小/最大)
10 / 1330 字符
子集统计:
子集
样本数
提示词平均长度
提示词最小长度
提示词最大长度
multi_lingual_recognition
640
101
101
101
natural_scene_recognition
1,150
101.87
101
103
complex_table_parsing
300
327
327
327
formula_parsing
100
119
119
119
general_documents_parsing
300
258
258
258
info_board_parsing
26
701
701
701
molecular_parsing
100
232
232
232
object_grounding
734
491.83
306
1330
text_grounding
734
369.88
358
468
business_transactions
340
793.91
702
1105
public_services
369
735.45
687
902
regulated_records
300
798.84
722
898
blueprint_qa
100
25.4
10
69
dashboards_fact_qa
400
66.59
19
159
dashboards_numeric_qa
500
70.49
19
148
financial_documents_qa
1,000
41.77
14
115
图像统计:
指标
数值
图像总数
7,118
每样本图像数
最小: 1,最大: 3,平均: 1.0
分辨率范围
70x71 - 5313x7219
格式
jpeg、png
样例示例
子集:multi_lingual_recognition
{
"input": [
{
"id": "f971e55d",
"content": [
{
"image": "~/.cache/modelscope/hub/datasets/evalscope/CC-OCR-V2/recognition/multi_lingual_recognition/images/multi_lan_ocr_Arabic_Arabic_20/0c780237abcb.jpg"
},
{
"text": "Please output only the text content from the image without any additional descriptions or formatting."
}
]
}
],
"target": "الآن بحق السماء يا دجونا، أكل طعامك المتحجر غير المطابقة ....Demonstrandum\n.للمواصفات واتركني بسلام .”قال دجونا بحزن وهو ينظر إلى الحقيبة الفارغة: “لقد ذهب كل شيء أنا هنا!” صرخ بصوت غالي مرح، وكتم إليري أنينًا آخر عندما رأى السيد دوفال يقفز“\n ... [TRUNCATED 1733 chars] ... حنة الحشد“\nكان هناك ضحكة خفيفة. كان الشخص الضعيف القلب الذي خاطبه المرافق شابًا زنجيًا\nقويًا، يرتدي ملابس بنية سيمفونية أنيقة، وقبعته القشية مبهرة على الكربون السخام\n!الموجود في جلده. ضحكت فتاة جميلة ملونة على ذراعه. “هيا يا عزيزتي، سوف نريهم",
"id": 0,
"group_id": 0,
"subset_key": "multi_lingual_recognition",
"metadata": {
"id": "0c780237abcb",
"task": "recognition",
"sub_task": "multi_lingual_recognition",
"scenario": "multi_lan_ocr_Arabic_Arabic_20",
"image_paths": [
"~/.cache/modelscope/hub/datasets/evalscope/CC-OCR-V2/recognition/multi_lingual_recognition/images/multi_lan_ocr_Arabic_Arabic_20/0c780237abcb.jpg"
]
}
}