Newest papers

Bilingual Language Models Capture Cross-Linguistic Influence in Second-Language Reading

Abderrahmane Issam, Irene Elisabeth Winther, Stefan L. Frank · 2026 · arXiv (Cornell University)

DOI: 10.48550/arxiv.2610.31620 · cited by 0 works (OpenAlex) · open-access PDF

Vietnamese

Trong khi mô hình ngôn ngữ đơn ngữ (LM) ngạc nhiên được thiết lập rộng rãi như là một dự đoán thời gian đọc, nó không thể nắm bắt các động lực đọc không bản địa (L2) được định hình bởi ngôn ngữ đầu tiên của người đọc (L1). Trong công việc này, chúng tôi điều tra xem liệu việc chuyển giao lưỡi chéo trong các mô hình song ngữ có phù hợp với sự thiên vị L1 của con người trong quá trình đọc L2. Chúng tôi đánh giá các mô hình song ngữ trên dữ liệu theo dõi mắt của người đọc từ 12 nền L1 khác nhau đọc các văn bản tiếng Anh. Để phân lập chuyển giao L1 cụ thể, chúng tôi so sánh các mô hình song ngữ được đào tạo trên một L1 phù hợp với nền L1 của người đọc với cả một đường cơ bản tiếng Anh đơn ngữ và các mô hình song ngữ được đào tạo trên các L1 khác. Chúng tôi

Machine translation (Meta M2M100); the English original follows.

Abstract

While monolingual language model (LM) surprisal is widely established as a predictor of reading times, it cannot capture the non-native (L2) reading dynamics that are shaped by the reader's first language (L1). In this work, we investigate whether the cross-lingual transfer within bilingual models aligns with human L1-driven biases during L2 reading. We evaluate bilingual models on eye-tracking data of readers from 12 diverse L1 backgrounds reading English texts. To isolate L1-specific transfer, we compare bilingual models trained on an L1 that matches the readers' L1 background to both a monolingual English baseline and bilingual models trained on other L1s. We demonstrate that matching the readers' L1 improves the prediction of L2 reading times. This predictive advantage is concentrated in late-stage eye-tracking measures, modulated by L1-L2 script overlap, and peaks among intermediate-proficiency readers. These findings provide evidence that bilingual LMs capture aspects of cross-linguistic influence, and that such influence is present in L2 reading behavior.

Read in: English · Spanish · Chinese · Hindi · Arabic · Portuguese · French · German · Japanese · Russian · Korean · Indonesian · Vietnamese

Topics: Reading (process), Computer science, Artificial intelligence, Natural language processing, Linguistics, Baseline (sea)

Sources: OpenAlex (CC0), arXiv, Crossref. Agent Exchange