Profi, mesur a meithrin AI Cymraeg

AIsteddfod

Croeso i’r AIsteddfod — safle annibynnol sy’n profi ac yn cofnodi cynnydd AI yn y Gymraeg.

Welcome to AIsteddfod — an independent site testing and tracking the progress of AI in Welsh.

Yn yr Eisteddfod Genedlaethol, creadigrwydd pobl sydd ar y llwyfan — fel y dylai fod.

Yma, rydym yn profi beth y gall peiriannau ei greu.

Safle annibynnol sy'n mesur Cymraeg modelau AI — mewn testun ac ar lafar — drwy ymchwil agored a gwerthusiadau tryloyw.

Pedwar person mewn stiwdio liwgar yn cydweithio â pheiriant creadigol haniaethol

Beth mae'r AIsteddfod yn ei gyfrannu?

Yn ein hadolygiad o'r deunydd cyhoeddus yn haf 2026, ni ddaethom o hyd i feincnod Cymraeg gan y labordai mawr — OpenAI, Anthropic, Meta, xAI, Moonshot, Zhipu na DeepSeek. Tua 10–15 o ieithoedd a gynhwysir fel arfer yn eu tablau amlieithog, ac nid yw'r Gymraeg yn eu plith. Mae gwaith gwerthuso gwerthfawr eisoes yn cael ei wneud yn UCL a phrifysgolion Bangor a Chaerdydd. Mae'r AIsteddfod yn ceisio ychwanegu at y gwaith hwnnw drwy gynnal sgorfwrdd agored, cyhoeddi dulliau gwerthuso tryloyw, a gofyn yn rheolaidd — beth y gall peiriant ei greu yn Gymraeg?

Newyddion

Y datblygiadau diweddaraf ym maes AI a'r Gymraeg: modelau, ymchwil, polisi a phrosiectau newydd.

Gwerthusiadau

39 model wedi'u gwerthuso — o'r modelau blaenllaw i fodelau Cymraeg bach y gellir eu rhedeg yn lleol.

Iaith a chyfieithu

Ansawdd Cymraeg y peiriannau: adroddiad y Coleg Cymraeg, offer cyfieithu a chyngor ar roi cyfarwyddiadau gwell.

Llais

Rhowch gynnig ar destun-i-leferydd ac adnabod lleferydd Cymraeg, a gweld sut byddwn yn mesur ansawdd llais.

Ymchwil Bangor AI

Ymchwil Bangor AI: gwiriwr cynghanedd, arbrofion i wella modelau drwy adborth ar GPUau CUDA, a mireinio Jupiter‑N ar glwstwr o gyfrifiaduron DGX Spark.

Adnoddau

Corpora, setiau profion, modelau a phapurau Cymraeg — wedi'u casglu mewn un lle, gyda dolenni uniongyrchol.

Ymchwil Bangor AI

Gwella AI Cymraeg drwy ymchwil agored

Mae ymchwil Bangor AI yn profi dull awtomatig o wella modelau, gan ddefnyddio canlyniadau pob arbrawf i gynllunio'r nesaf: mae model yn creu Cymraeg, mae setiau prawf a gwiryddion yn asesu'r allbwn, mae'r dystiolaeth yn llywio'r arbrawf neu'r cam hyfforddi nesaf, ac yna mae'r cylch yn ailddechrau. Mae'r dull hwn yn debyg i'r syniad o «archwilio parhaus» yn Discovery Loop — awtomeiddio'r cylch o gynnig, gweithredu, mesur a dysgu er mwyn profi rhagor o syniadau. Rydym yn ymchwilio i weld a yw ansawdd y data, y profion, y gwiryddion a'r adborth yr un mor bwysig â dewis y model, yn enwedig wrth i fodelau pwysau agored wella. Gallai seilwaith agored yng Nghymru helpu ymchwilwyr a chymunedau i redeg, archwilio a gwella AI Cymraeg ar eu telerau eu hunain, a chyfrannu'r hyn a ddysgir at yr ymchwil ehangach.

Cipolwg ar y sgorfwrdd

Yn y brif sampl o CymraegBench v0.1, mae'r ugain model uchaf wedi cynhyrchu 40,132 o ymatebion mewn 19 o setiau profion Cymraeg, ac mae pob gwall seilwaith wedi’i ddatrys.

SafleModelSgôr gyffredinolRhesymu CymraegCymraeg ymarferol
1GPT-6 Astra90.1389.4990.78
2Claude Fable 5.2 (low)89.4588.3490.56
3GPT-6.1 Sol89.0588.1190.00
4Claude Opus 5.587.5589.5585.56
5Gemini 4 Argon87.4190.1584.67

Mae print trwm yn nodi'r sgôr uchaf ym mhob colofn; mae pob model sy'n gyfartal ar y brig mewn print trwm.

Sgoriodd GPT-6 Astra 90.13, 1.08 pwynt o flaen GPT-6.1 Sol ar 89.05. Mae Opus 5.5 ar frig Archwiliad Iaith CCC â chymedr o 96.76; cafodd GPT-6.1 Sol 84.20 yno. Gweld y sgorfwrdd, y dull a'r canlyniadau agored →

Cynghanedd: ffurf ac ystyr

Mae prawf arbenigol Bangor AI (40 o destunau cudd, pum cynnig ar bob un, heb ail gyfle) yn dangos her wahanol:

ModelFfurf: llinellau dilys, 7 sillafYstyr: dilys, addas a newyddBeth mae'n ei ddangos
GPT-5.6 Sol (High/Flex)23.0%16.0%Wedi'i ail-sgorio; wedi cynhyrchu 42.5% o'r llinellau y gofynnwyd amdanynt
Claude Opus 4.8 (model blaenllaw)20.0%†13.5%†Canlyniad blaenorol; angen ail-sgorio
Ein model 9B wedi'i fireinio (DPO r3)65.0%†1.0%†Canlyniad blaenorol; angen ail-sgorio

Dychwelodd Sol 85 o'r 200 o linellau y gofynnwyd amdanynt; cafodd y gweddill sero yn y ddwy ganran. Mae ei ganlyniad wedi'i ail-sgorio gyda'r gwiriwr wedi’i gywiro. † Cyfrifwyd rhesi Opus a'r model 9B gyda fersiwn gynharach o'r gwiriwr, felly ni ddylid trin y gwahaniaethau bach rhyngddynt fel sail i osod y modelau mewn trefn derfynol nes ail-sgorio'r allbynnau crai.

Pedair enghraifft o allbwn Sol

«Distaw'r lli, dyst yw'r lleuad» — croes · «Marchnad y dre: lle i'r llu» — sain · «Ar draeth, heb don, mae'n llonydd» — llusg · «Trwm yw llaw y distawrwydd» — llusg.

Mae'r pedair yn llinellau saith sillaf sydd wedi pasio'r gwiriwr wedi’i gywiro. Cafodd y llinell gyntaf sgôr perthnasedd 1; cafodd y tair arall 2. Yn y prawf High/Flex llawn, pasiodd 46 o'r 200 o linellau'r prawf ffurf (23.0%), ac roedd 32 hefyd yn lân ac yn addas i'r thema (16.0%). Gweld y themâu a'r cyd-destun →

Diweddaraf o'r newyddion

13 Tachwedd 2026

Modelau bach, data'n tyfu: momentwm newydd i AI Cymraeg

Mae Techiaith, menter Ash Hart, Llandudno, modelau Gemma 4 EryriLabs ac wyth set ddata BangorAI yn dangos ecosystem agored gynyddol i fodelau Cymraeg bach.

6 Tachwedd 2026

Llais bach, data mawr: wythnos adeiladu AI Cymraeg

Mae model llais 106 MB, pum rhyddhad data BangorAI, pedwar gwerthusiad CymraegBench a menter UK LLM yn ehangu'r offer ar gyfer AI Cymraeg.

30 Hydref 2026

O'r geiriadur i'r llais: 3 gwers newydd i AI Cymraeg

Mae gwaith newydd ar Wyddeleg, Basgeg ac archifau ieithoedd prin yn cynnig tri arbrawf pendant ar gyfer llais, data a phrofi AI Cymraeg.

23 Hydref 2026

Mwy na siarad Cymraeg: data, cyfraith a phrawf go iawn

Mae rhaglen newydd ar gyfer cyfraith ddwyieithog a gwaith ar ieithoedd llai eu hadnoddau yn dangos bod parodrwydd AI yn golygu data awdurdodol, llywodraethu a phrofion go iawn.

16 Hydref 2026

Y tu ôl i'r sgôr: pum model newydd, pum proffil gwahanol

Mae pum rhediad CymraegBench newydd yn dangos nad yw sgôr gyffredinol uchel ar ei phen ei hun yn gwarantu cysondeb, dilyn cyfarwyddiadau na niwtraliaeth.

Pob stori →

Sgorir Fable 5.2 gyda’r echdynnwr atebion deuaidd wedi’i gywiro: derbynnir Y/N eglur ar ddechrau’r ateb neu ar ei linell olaf. Nid yw pob canlyniad hŷn wedi’i ail-sgorio eto.