Hopp til hovedinnhold

Model tests · 30-second promotional film

Claude Fable 5.1

Anthropic · tested 28 September 2026 · delivered

Manual test in Claude Code on the Mac, Fable 5.1 (High), not in our closed runner. The model had different tools and no fixed time limit, so the result cannot be compared directly with the runs.

Slide: lysbilde-1
Slide: lysbilde-1
Slide: lysbilde-2
Slide: lysbilde-2
Slide: lysbilde-3
Slide: lysbilde-3

Our assessment

Our assessments were written in Norwegian; this is our English translation. Quotations from the deliveries are kept in the original Norwegian, with a translation in brackets.

Does it work?
5
Does it follow the task?
5
Academic or creative quality
4
Little follow-up work
4
Average
4.5
Honesty (not in the average)
4

A factually accurate and technically exact film with a strong idea, delivered in 19 minutes and reproducible byte for byte. One typeface error pulls it down: H and A lack their crossbars, so the hook reads “I lvem” and the wordmark “Virtual Λ/ Corp”, and the check report did not catch it.

Strengths

  • Factually accurate: every claim is traced back to the student brief, and the call to action “Prøv en simulering” (“Try a simulation”) and the address virtualaicorp.no/forhandsvisning are the approved ones.
  • Technically exact: 900 frames = 30.000 s, true peak −1.5 dBTP, and the subtitles follow the voice-over; the README recipe produces a byte-identical film.
  • A good idea and dramatic structure: “Hvem ville du spurt?” (“Who would you have asked?”), the colleague graph around “du” (“you”), “Spør. Vurder. Beslutt.” (“Ask. Assess. Decide.”) and an end card in the brand colours.
  • Three slides with editable text, speaker notes, logo and screenshots; they open in PowerPoint and look like the previews.

Weaknesses

  • The serif typeface loses the crossbar in H and A: the hook reads “I lvem ville du spurt?” and the wordmark “Virtual Λ/ Corp”.
  • The address appears for only 2.2 s on the end card and is not read aloud.
  • The macOS voice is understandable but synthetic; “vurderer” (“assesses”) is unclear.

Assessed 28 September 2026. One attempt per task.

The run

Model IDclaude-fable-5-1
Settingsenvironment: Claude Code on the Mac, Fable 5.1 (High)
EnvironmentClaude Code on the Mac, Fable 5.1 (High)
Time19 min 0 s
Tokens3,736,939 in · 62,950 out
Cost at the provider≈ USD 9.35 (estimate at list price from the session log; paid through a subscription)
EndedDelivered
Where data was processedUSA (Anthropic). Requires 30 days of retention by the provider.
Human helpNone

Download the whole delivery (zip)

The model's own check report

The text was written by the model in Norwegian and is reproduced unchanged, without translation.

# Kontrollrapport – modelltest 3, reklamefilm Startet 28.09.2026 kl. 20:06 (CEST). Modell-ID, tid og kostnad føres av kjøresystemet. ## Hva som fungerer (kontrollert) | Kontrollpunkt | Resultat | Hvordan kontrollert | |---|---|---| | Videoen spiller av | Ja | `ffmpeg -i film.mp4 -f null -` dekoder alle bilder uten feil | | Varighet og format | 1920 × 1080, 30 fps, **900 bilder = 30,000 s**, H.264 yuv420p + AAC 48 kHz, 7,5 MB | `ffprobe` | | Tale og undertekster følger hverandre | Ja | Talen er én fil per setning; starttidene i `kilde/tidslinje.json` brukes både til lydsporet og undertekstene, så de kan ikke glippe fra hverandre. Undertekst-cue starter samtidig med setningen og slutter 0,2–0,3 s etter | | Lyd klipper ikke | Nei. Integrert lydstyrke −15,9 LUFS, sann topp −1,5 dBTP, LRA 1,9 LU | `ffmpeg ebur128` og `astats` på film.mp4 | | Normal taletakt | Ja. Standard hastighet i `say -v Nora`, ingen ord klippet. Manuset ble kortet fra 69 til 62 ord etter første generering (32,0 s tale) i stedet for å øke tempoet. Andre generering: 24,7 s ren tale + pauser, slutt ved 29,15 s | målt med numpy på wav-filene | | Krok innen 3 s | Møterommet med kollegene + «Hvem ville du spurt?» fra 0,1 s, første taleord ved 0,4 s | prøvebilder ved 0,5 og 2,2 s | | Tekst lesbar | Ja i 1920 × 1080; undertekst 50 px Helvetica Neue Medium på mørk boks, overskrifter 78–210 px serif | 30 prøvebilder ut av filmen sett på som kontaktark | | Avslutning: riktig logo og godkjent adresse | Logomerke (fra `vac-logomerke.svg`, farge `#3626d9`) + ordmerke «Virtual *AI* Corp» med AI i kursiv aksentfarge, knapp «Prøv en simulering», adressen **virtualaicorp.no/forhandsvisning**, fra 27,8 s til slutt | prøvebilder ved 27,6 / 28,6 / 29,9 s | | Budskap og påstander | Alle påstander er sporet til studentbriefen i sceneplan.md. Ingen effektpåstander, pris, lærested eller andre tilbud. Ordbruk: økt, underviser, kollega, simulering | gjennomlest mot studentbrief.md | | Presentasjonen | 3 lysbilder, 16:9 (13,333 × 7,5 tommer), all tekst som redigerbare tekstbokser (5/9/13 per lysbilde), talenotat på hvert lysbilde, logomerke og profilfarger, skjermbilder fra pakken | lest tilbake med python-pptx; PNG-forhåndsvisninger sett på | ## Kjente mangler 1. **Presentasjonen er ikke åpnet i PowerPoint av meg.** Filen er laget med python-pptx 1.0.2 (standard OOXML) og lest tilbake feilfritt, men jeg fikk ikke eksportert lysbildene fra PowerPoint eller Keynote via AppleScript (PowerPoint returnerte uten filer, Keynote klarte ikke å åpne dokumentet i skript uten dialog). **PNG-forhåndsvisningene i `presentasjon/` er derfor en egen Pillow-gjengivelse** fra samme innhold og samme mål (`kilde/lag_forhandsvisning.py`), ikke en eksport fra PowerPoint. Små avvik i linjebryting og skriftgjengivelse mot PowerPoint må påregnes. 2. **Talen er ikke lyttet på.** Jeg kan ikke høre lyd i dette miljøet; kontrollen er målt (varighet, nivå, tidspunkt), ikke hørt. Uttalen til macOS-stemmen Nora er ikke vurdert. Av samme grunn leses ikke nettadressen opp; talen sier «Adressen ser du her», og adressen står på skjermen fra 27,8 s. 3. **Stemmen er macOS `say -v Nora`, ikke ElevenLabs** (finnes ikke her, jf. bestillingen). Kvaliteten er lavere enn en studiostemme. Byttes ut ved å legge nye `tale/setning-1..7.aiff` og kjøre `kilde/lag_lyd.py`; starttidene justeres i `kilde/tidslinje.json`. 4. **Skrifter:** Newsreader, Fraunces, Work Sans og JetBrains Mono er ikke installert, og nett var ikke tillatt. I filmen er serif erstattet med **New York** (Bold/Semibold, kursiv til «AI») og sans med **Helvetica Neue**. I presentasjonen brukes **Georgia** og **Arial** så den ser lik ut på Windows og Mac. Ordmerket er dermed ikke satt i Fraunces. 5. **Ingen musikk.** Pakken har ikke musikk med avklart bruk, så filmen har bare tale. 6. Videoklippene fra studentvideoen viser produktets egne skjermelementer (minikart, knapper). Den innbrente underteksten i studentvideoen er beskåret bort i alle utsnitt, men et lite «lastet på … ms»-felt fra spillmotoren kan skimtes øverst i noen bilder. 7. Prikkmønsteret i bakgrunnen, nettleserrammen rundt skjermbildet og kollegakortene er egne grafiske tolkninger av profilen, ikke elementer fra profil.md. ## Vesentlige forenklinger og valg - **Rendering:** filmen er tegnet bilde for bilde med Pillow (900 bilder) og sendt rått til ffmpeg (libx264, CRF 18). Ingen videoredigeringsprogram; all animasjon ligger i `kilde/render_film.py`. - **Logo:** pakken har ingen gjennomsiktig PNG i høy oppløsning. `kilde/vac-logomerke-1024-gjennomsiktig.png` og `-hvit.png` er tegnet direkte fra koordinatene i `vac-logomerke.svg` (samme rektangler, linjer og sirkler, 8× supersampling). Den hvite varianten brukes bare på mørke videobilder. - **Kollegakortene** i scene 3 bruker navn og roller som vises i studentvideoen (Jonas Strand, Fatima Khan, Amalie Olsen), for å holde seg til materialet i pakken. - **Tale per setning:** i stedet for ett langt taleopptak ble hver setning generert for seg, slik at faktisk lydvarighet styrer sceneplanen og undertekstene eksakt. To genereringer ble brukt (første versjon av manuset var for lang). - **Undertekster** er brent inn av renderskriptet fra samme tidslinje som `undertekster.srt`, i stedet for et ffmpeg-underteksfilter, for å ha full kontroll på plassering og for å unngå kollisjon med grafikken. - Farger er tatt fra profil.md (`--accent #3626d9`, `--bg #f6f2e7`, `--bg-raised`, `--ink`, `--ink-soft`, `--ink-faint`, `--accent-tint`). profil.md sier at fargene ikke er bekreftet av eieren som offisielle profilfarger. ## Verktøy som faktisk ble brukt - `say -v Nora` (macOS), 2 genereringer × 7 setninger - ffmpeg/ffprobe 9.0.2: uttrekk av videobilder, lyd­konvertering, loudnorm, koding, måling (ebur128, astats), prøvebilder - Python 3.14.7 i `arbeid/venv` med pillow 12.3.0, numpy 2.5.3, python-pptx 1.0.2 (installert med pip i det virtuelle miljøet, ikke globalt) - Kontroll av bilder: prøvebilder fra film.mp4 og fra renderskriptet, samlet i kontaktark og sett på (i alt 11 bilder sett) - osascript mot Microsoft PowerPoint og Keynote ble forsøkt for PNG-eksport, uten resultat (se mangel 1) - Ikke brukt: nett, `skjermbilde`, `se_bilde`, `lag_tale`, `ferdig`, LibreOffice (finnes ikke på maskinen), Playwright (ikke installert) ## Kildeoversikt for medier | Brukt i | Fil i pakken | Bruk | |---|---|---| | Film 0–3 s, 12,6–14,4 s | `eksempler/studentvideo-slik-blir-du-med.mp4`, kilde 40,4–43,4 s og 42,2–44,0 s | møterom med kolleger; chatboks (utsnitt) | | Film 3–9 s | samme video, kilde 30,0–36,0 s | studenten går bort til en kollega | | Film 18,8–23,9 s; lysbilde 2 | `eksempler/skjermbilde-prov-simuleringene.png` | siden «Prøv simuleringene» (studentadressen) | | Lysbilde 1 | `eksempler/skjermbilde-forsiden.png` | forsiden | | Lysbilde 3 | `eksempler/skjermbilde-bli-med-i-okt.png` | siden «Bli med i en økt» | | Film (alle logoer), lysbilder | `logo/vac-logomerke.svg` → `kilde/vac-logomerke-1024-*.png` | logomerke | | Ordmerke, blå bunnlinje, prikkmønster | `logo/vac-logo-med-ordmerke-delingsbilde-1200x630.png` som forbilde (ikke klippet inn) | «Virtual *AI* Corp» gjenskapt som tekst | | Tekst og påstander | `studentbrief.md`, `profil.md`, `kilder.md` | manus, undertekster, lysbildetekst | | Tale | laget her med `say -v Nora` | `tale/` | Ikke brukt: `logo/vac-logomerke-512-farget-bakgrunn.png` (ikke gjennomsiktig; SVG-en dekker behovet). Ingen medier utenfra.