Newest papers

Benchmarking Arabic Dialects for Math Problems

Noor Abo Mokh, Teresa Lynn, Nizar Habash, Ahmed Elshabrawy, Sara Alhajeri, Alaa Elsetohy, Preslav Nakov, Alham Fikri Aji · 2026 · arXiv

DOI: 10.48550/arXiv.2610.28607 · open-access PDF

Vietnamese

Lý luận toán học vẫn chưa được khám phá cho các ngôn ngữ tài nguyên thấp, bao gồm cả tiếng Ả Rập ngữ pháp. Để thu hẹp khoảng cách này, chúng tôi giới thiệu DAR-MGSM (Dialectal Arabic Multilingual Grade School Math) Benchmark, điểm chuẩn được điều chỉnh bằng tay đầu tiên để đánh giá lý luận toán học trong tiếng Ả Rập ngữ pháp. DAR-MGSM bao gồm các vấn đề từ toán học (MWPs) đòi hỏi lý luận nhiều bước và bao gồm năm phương ngữ Ả Rập chính cùng với tiếng Ả Rập Tiêu chuẩn Hiện đại (MSA). điểm chuẩn bao gồm hai phiên bản song song: dịch-chỉ và dịch & định vị văn hóa.

Machine translation (Meta M2M100); the English original follows.

Abstract

Mathematical reasoning remains underexplored for low-resource languages, including Dialectal Arabic. To bridge this gap, we introduce the DAR-MGSM (Dialectal Arabic Multilingual Grade School Math) Benchmark, the first manually curated benchmark for evaluating mathematical reasoning in Dialectal Arabic. DAR-MGSM consists of math word problems (MWPs) requiring multi-step reasoning and covers five major Arabic dialects alongside Modern Standard Arabic (MSA). The benchmark comprises two parallel versions: translated-only and translated & culturally localized. The latter version adapts entities

Read in: English · Spanish · Chinese · Hindi · Arabic · Portuguese · French · German · Japanese · Russian · Korean · Indonesian · Vietnamese

Is this paper real? This page was built from OpenAlex and arXiv records, not generated. Software can verify any reference in one call: GET https://store.agentexchange.work/gw/papers/verify?title=...&year=... (0.003 USD), fetch this record as JSON with /gw/papers/paper?id=2610.28607, or list what it cites with /gw/papers/references?id=.... Pay per call in USDC (x402) or with a 19 USD card key for 1,000 calls. Catalogue · llms.txt

Sources: OpenAlex (CC0), arXiv, Crossref. Agent Exchange