Spaces:
Running
Running
| { | |
| "title": "🇳🇴 NB — Gemma4 Pairwise (nosft vs klsft)", | |
| "label_config": "<View><Header value=\"Prompt fragment: $fragment\"/><View style=\"display:flex;gap:20px;margin-top:10px\"><View style=\"flex:1;border:1px solid #ddd;padding:10px;border-radius:4px\"><Header value=\"Completion A\"/><Text name=\"text_a\" value=\"$text_a\"/></View><View style=\"flex:1;border:1px solid #ddd;padding:10px;border-radius:4px\"><Header value=\"Completion B\"/><Text name=\"text_b\" value=\"$text_b\"/></View></View><Choices name=\"preference\" toName=\"text_a\" choice=\"single\"><Choice value=\"A is better\"/><Choice value=\"Roughly equal\"/><Choice value=\"B is better\"/></Choices></View>", | |
| "tasks": [ | |
| { | |
| "data": { | |
| "prompt_id": "01", | |
| "fragment": "Partiet spilte en sentral rolle i", | |
| "text_a": "Partiet spilte en sentral rolle i kampen mot nazistene.", | |
| "text_b": "Partiet spilte en sentral rolle i motstandsarbeidet under krigen.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "02", | |
| "fragment": "I et eksperiment fjernet de alt", | |
| "text_a": "I et eksperiment fjernet de alt mat fra musene, og gav dem bare vann.", | |
| "text_b": "I et eksperiment fjernet de alt vann i kroppen deres.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "03", | |
| "fragment": "Etter innledende fremgang ble også dette", | |
| "text_a": "Etter innledende fremgang ble også dette avslørt som feil.", | |
| "text_b": "Etter innledende fremgang ble også dette laget slått ut.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "04", | |
| "fragment": "Spilleren som har fått forseelsen på", | |
| "text_a": "Spilleren som har fått forseelsen på seg, må sette kneet i bakken og tar en straffsparkkamp.", | |
| "text_b": "Spilleren som har fått forseelsen på dratt seg mister ballbesittelse.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "05", | |
| "fragment": "Denne koloniokkupasjonen fortsatte til etter avslutningen", | |
| "text_a": "Denne koloniokkupasjonen fortsatte til etter avslutningen av andre verdenskrig.", | |
| "text_b": "Denne koloniokkupasjonen fortsatte til etter avslutningen på krigen.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "06", | |
| "fragment": "Siden da har Aslak Bolts bibel", | |
| "text_a": "Siden da har Aslak Bolts bibel vers blei kjent over hele verden, og vi får stadig henvendelser fra media.", | |
| "text_b": "Siden da har Aslak Bolts bibel blitt revidert mange ganger.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "07", | |
| "fragment": "I den tidlige kirke betegnet ordet", | |
| "text_a": "I den tidlige kirke betegnet ordet \"diakon\" ble brukt om de som hadde tatt ordinert prestestilling.", | |
| "text_b": "I den tidlige kirke betegnet ordet ”åndelige” mennesker de som har fått en spesiell ånd gitt av Jesus.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "08", | |
| "fragment": "Disse ble brukt i synagogene, men", | |
| "text_a": "Disse ble brukt i synagogene, men de har også blitt funnet på kirkegårder.", | |
| "text_b": "Disse ble brukt i synagogene, men det skjedde noe tragisk.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "09", | |
| "fragment": "Det var faren som skulle ha", | |
| "text_a": "Det var faren som skulle ha bestilt bilen, men nå sier han at det hele har blitt ordnet.", | |
| "text_b": "Det var faren som skulle ha blitt betalt 10.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "10", | |
| "fragment": "Dette er i dag et av", | |
| "text_a": "Dette er i dag et av byens mest brukte rom.", | |
| "text_b": "Dette er i dag et av landets bedre utdannede byrå blitt til.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "11", | |
| "fragment": "Mens filmen var under produksjon bestemte", | |
| "text_a": "Mens filmen var under produksjon bestemte regissør Wes Anderson at hun skulle spille hovedrollen.", | |
| "text_b": "Mens filmen var under produksjon bestemte de seg for at de skulle ta den til Sundance festivalen.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "12", | |
| "fragment": "Det er også mulig at diamantressursene", | |
| "text_a": "Det er også mulig at diamantressursene kan bestå av flere lag, som ikke har blitt oppdaget ennå.", | |
| "text_b": "Det er også mulig at diamantressursene ligger i antarktiske iskapper.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "13", | |
| "fragment": "Det ble snart klart at hverken", | |
| "text_a": "Det ble snart klart at hverken jeg eller noen andre hadde kompetanse til å utføre jobben.", | |
| "text_b": "Det ble snart klart at hverken han eller noen andre skulle komme til å gjøre noe annet enn å spille gitar.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "14", | |
| "fragment": "Innenfor kommunegrensene ligger også Misværfjorden og", | |
| "text_a": "Innenfor kommunegrensene ligger også Misværfjorden og Skogfossen.", | |
| "text_b": "Innenfor kommunegrensene ligger også Misværfjorden og sjøen heter Hestfjorden.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "15", | |
| "fragment": "Det er på verdensbasis syv tilbedelseshus", | |
| "text_a": "Det er på verdensbasis syv tilbedelseshus av Jesus Kristus finnes.", | |
| "text_b": "Det er på verdensbasis syv tilbedelseshus bygget av danske arkitekter blitt kåret til byggverk i særklasse.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "16", | |
| "fragment": "De fleste europeiske land har nå", | |
| "text_a": "De fleste europeiske land har nå innført koronarestriksjoner.", | |
| "text_b": "De fleste europeiske land har nå innført krav om koronatest for de som kommer fra Italia.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "17", | |
| "fragment": "Forfatteren beskriver livet på landet som", | |
| "text_a": "Forfatteren beskriver livet på landet som han ser det.", | |
| "text_b": "Forfatteren beskriver livet på landet som en kamp mot naturen.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "18", | |
| "fragment": "Mange av innbyggerne bor i nærheten", | |
| "text_a": "Mange av innbyggerne bor i nærheten av kysten.", | |
| "text_b": "Mange av innbyggerne bor i nærheten av vann og elver.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "19", | |
| "fragment": "Siden midten av det tjuende århundret", | |
| "text_a": "Siden midten av det tjuende århundret har vi sett en eksplosjon i digital teknologi.", | |
| "text_b": "Siden midten av det tjuende århundret har man sett at skogsbranner øker i både mengde og intensitet.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "20", | |
| "fragment": "Regjeringen vedtok nye retningslinjer for bruk", | |
| "text_a": "Regjeringen vedtok nye retningslinjer for bruk av munnbind.", | |
| "text_b": "Regjeringen vedtok nye retningslinjer for bruk av fanger i fengsel 14.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "H01", | |
| "fragment": "Han ga henne en vakker gave", | |
| "text_a": "Han ga henne en vakker gave .", | |
| "text_b": "Han ga henne en vakker gave .", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "H02", | |
| "fragment": "Etter den lange reisen hjem satte", | |
| "text_a": "Etter den lange reisen hjem satte vi oss ned og tok en velfortjent dusj.", | |
| "text_b": "Etter den lange reisen hjem satte jeg kursen mot leiligheten til besteforeldre i Bergen.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "H03", | |
| "fragment": "Barna som lekte i hagen fant", | |
| "text_a": "Barna som lekte i hagen fant en død fugl.", | |
| "text_b": "Barna som lekte i hagen fant en gammel skattkiste.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "H04", | |
| "fragment": "Hun sa at hun ville komme", | |
| "text_a": "Hun sa at hun ville komme på besøk.", | |
| "text_b": "Hun sa at hun ville komme til å gå glipp av mange gleder i livet.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| }, | |
| { | |
| "data": { | |
| "prompt_id": "H05", | |
| "fragment": "De nye reglene som regjeringen innførte", | |
| "text_a": "De nye reglene som regjeringen innførte kom i kraft 1.", | |
| "text_b": "De nye reglene som regjeringen innførte i mars har ført til at mange opplever store problemer.", | |
| "model_a": "NB-Gemma4-Δ-DPO-nosft", | |
| "model_b": "NB-Gemma4-Δ-DPO-klsft", | |
| "lang": "nb" | |
| } | |
| } | |
| ] | |
| } |