CLEF CheckThat! 2023 Task 1 — Arabic Check-Worthiness

A CLEF CheckThat! 2023 shared task (arabic) dataset of 6,059 sentences with binary check-worthiness labels (29.0% check-worthy), collected by CLEF CheckThat! Lab organizers (2023). Each record contains sentence text, binary check-worthiness label (Yes/No), sentence ID, source document. CLEF 2023 CheckThat! Task 1 (arabic) provides 6,059 sentences from political debates and social media annotated for check-worthiness — whether the claim merits fact-checking. Suitable for check-worthiness detection, fact-checking automation, misinformation research, NLP classification benchmarks, political discourse analysis.

#Check worthiness#Clef checkthat#Political debate#Shared task

Download withheld (personal data) BibTeX JSONSimilar datasets

Analytics

Content metrics

6,059 records scored

is checkworthy29.0% true
true 29.0%false 71.0%
4.2
Flesch–Kincaid grade
US school grade level
13.7
Automated readability index
Frequent terms
كورونالقاحعلىفيروساللقاحإلىروسياالصحةفيروس_كورونااللهالعالمبعدهذاالروسيأولعاجلالبدونليبياالتيالصينالذيقبلبوتينالرئيسلفيروسحتىولاالنسوياتهذهسفيه_الدوحه_وجزيه_المرتزقهتعلنقطرالسعوديةالسودانتسجيلبينجرعةلقاحاتاليومالليcovid19البرهانمصروزارةكانمليونالعربيةفلسطيندولةيعلن
Topic clusters

Topic 0

روسيا
الروسي
لقاح
كورونا
ضد
اللقاح
بوتين
أول

Topic 1

من
في
الله
كورونا
على
فيروس_كورونا
الكورونا
لا

Topic 2

لقاح
كورونا
في
شركة
من
اللقاح
مليون
المرحلة

Topic 3

صفقة_القرن
فلسطين
تسقط_صفقة_القرن
وضد
القدس
القرن
صفقة
القدس_عاصمة_فلسطين_الأبدية

Topic 4

ليبيا
حفتر
في
طرابلس
تركيا
من
إلى
عاجل

Topic 5

السودان
البرهان
ونتنياهو
لقاء
التطبيع
مع
السوداني
في

Topic 6

سفيه_الدوحه_وجزيه_المرتزقه
قطر
الجزيرة
قناة
على
من
القطري
المرتزقة

Topic 7

النسويات
النسوية
اللي
من
المرأة
على
لا
النساء

Topic 8

البدون
الكويت
من
الله
في
الكويتين
كل
على

Topic 9

ترمب
ترامب
لقاح
كورونا
نهاية
قبل
العام
الرئيس

Topic 10

الصين
ووهان
الصينية
من
في
كورونا
مدينة
فيروس_كورونا

Topic 11

الصحة
كورونا
لقاح
لا
وزير
عدم
العالمية
من
Show all 13 topics

Topic 12

حالة
جديدة
إصابة
حالات
تسجيل
بفيروس
الصحة
كورونا
Top hashtags
#كورونا2.2K
#فيروس_كورونا548
#روسيا303
#سفيه_الدوحه_وجزيه_المرتزقه240
#عاجل209
#covid19179
#ليبيا162
#صفقة_القرن153
#كوفيد_19138
#الصين127
#البدون122
#تسقط_صفقة_القرن116
#بوتين104
#فيروس_كورونا_المستجد104
#كورونا_الجديد100
#الكورونا96
#السعودية89
#كوفيد1988
#لقاح81
#لقاح_كورونا70
Top emoji
😂283
🔴150
👇143
🏻88
🇸80
🇦61
💉50
📌43
🇺42
💔35
🙏33
🤣33
🇵29
🇷28
🏼26

Computed over the full corpus.

Record

Catalog key
checkthat-2023-task1-arabic
Authors
Nakov, Preslav; Barrón-Cedeño, Alberto; Da San Martino, Giovanni; CheckThat! Lab Organizers
Year
2023
Source paper
CLEF 2023 CheckThat! Lab: Check-Worthiness Detection
DOI / arXiv
10.1007/978-3-031-28241-6_59
License
Creative Commons Attribution-NonCommercial-ShareAlike 4.0 (CC BY-NC-SA 4.0) (CC-BY-NC-SA-4.0)
Records
6,059
Languages
ar
Collected
2023 (2020s)
Tasks
Check-worthiness detection (binary; is_checkworthy) inferred
Region
Middle East & North Africa (inferred: from the language of the data)

Provenance

Originally published at
https://gitlab.com/checkthat_lab/clef2023-checkthat-lab link checked

Citations

The CLEF-2023 CheckThat! Lab: Checkworthiness, Subjectivity, Political Bias, Factuality, and Authority
Alberto Barrón-Cedeño, Firoj Alam, Tommaso Caselli, Giovanni Da San Martino, Tamer Elsayed
Journal Article · European Conference on Information Retrieval · 2023

48
citations
cited
0
influential citations
0% of all citations

Cited by

Show all 10

Citation data from Semantic Scholar, retrieved 2026-10-19.

How to cite

BibTeX

@misc{echo2026,
  title  = {ECHO: Exploratory Compendium of Humanity Online},
  author = {Switzer, Braden and Zafarani, Reza},
  year   = {2026},
  url    = {https://echo.directory},
  note   = {Syracuse University}
}

@inproceedings{checkthat2023,
  title     = {CLEF 2023 {CheckThat!} Lab: Check-Worthiness Detection},
  author    = {Nakov, Preslav and Barr\'on-Cede\~no, Alberto and Da San Martino, Giovanni and others},
  booktitle = {CLEF 2023 Working Notes},
  year      = {2023}
}

APA

Switzer, B., & Zafarani, R. (2026). ECHO: Exploratory Compendium of Humanity Online [Data repository]. Syracuse University. https://echo.directory

Nakov, P., Barrón-Cedeño, A., Da San Martino, G., & CheckThat! Lab Organizers (2023). CLEF CheckThat! 2023 Task 1 — Arabic Check-Worthiness [Data set]. https://doi.org/10.1007/978-3-031-28241-6_59

MLA

Switzer, Braden, and Reza Zafarani. ECHO: Exploratory Compendium of Humanity Online. Syracuse University, 2026, echo.directory.

Nakov, Preslav, et al. CLEF CheckThat! 2023 Task 1 — Arabic Check-Worthiness. 2023, doi.org/10.1007/978-3-031-28241-6_59.

BibTeX · RIS · CSL-JSON

Similar datasets 10 all with scores →