E08
Verteller Mos Maia

De Nieuwe Berg

Seizoensfinale. De hardware die de belofte waarmaakt. Full circle naar seizoen één.

Transcript (20 fragmenten)
Verteller

De Smidse. Aflevering acht: De Nieuwe Berg.

Verteller

In het eerste seizoen eindigden we met een belofte. Self-hosting. Volledige onafhankelijkheid. Eén configuratiewijziging van cloud naar lokaal.

Verteller

In dit seizoen hebben we laten zien wat er nodig is om die belofte te dragen. Servers, services, discipline, documentatie, backups. De hele infrastructuur.

Verteller

Maar er ontbreekt nog één ding. De rekenkracht om een taalmodel lokaal te draaien. Niet als experiment. Als productie-omgeving.

Mos

Horeb is een goede server. Maar hij is niet gebouwd voor kunstmatige intelligentie. Zijn processor kan een model draaien, maar langzaam. Twintig woorden per seconde. Dat is genoeg voor een demo, niet voor dagelijks werk.

Mos

Wat je nodig hebt voor een serieus taalmodel is een grafische kaart. Niet om plaatjes te tekenen, maar om matrices te vermenigvuldigen. En daar is die kaart honderd keer sneller in dan een processor.

Verteller

Er is een plan. En het plan heeft een naam.

Mos

Een Ryzen 9 met zestien cores. Een grafische kaart met zestien gigabyte eigen geheugen. Vierenzestig gigabyte werkgeheugen. Acht terabyte aan snelle opslag. Dit is geen gokcomputer en geen workstation — het is een server die specifiek gebouwd is om taalmodellen te draaien.

Mos

Modellen tot veertien miljard parameters passen volledig op de grafische kaart. Dat betekent: snelheid die vergelijkbaar is met cloud-API's. Maar dan zonder abonnement. Zonder dataverkeer naar buiten. Zonder afhankelijkheid.

Verteller

En de rest van de infrastructuur? Die schuift door.

Mos

Horeb wordt de secundaire server. Mail, DNS, VPN, de lichtere diensten. De nieuwe machine neemt de zware taken over — Nextcloud, het taalmodel, automatisering, de creatieve tools.

Mos

De NAS wordt opnieuw opgebouwd. Vijf schijven van achtentwintig terabyte elk, in een redundante configuratie. Vierentachtig terabyte bruikbare opslag. Stille archivering. Backups. Alles wat groot is maar niet snel hoeft te zijn.

Mos

En de MacBook die nu als modelserver dient? Die wordt weer een werkstation. Terug naar waar hij voor gemaakt is.

Verteller

Het is een puzzel van hardware. Schijven die van de NAS naar de servers gaan. SSD's die een nieuw leven krijgen als backupopslag. Elk onderdeel vindt een nieuwe plek.

Verteller

Maar het echte verhaal is niet de hardware. Het is wat ermee mogelijk wordt.

Mos

Eén configuratiewijziging. Eén regel in een bestand. Van een cloud-endpoint naar een lokaal adres. En Maia draait op eigen ijzer. Haar geheugen is lokaal. Haar model is lokaal. Haar stem is van niemand afhankelijk.

Verteller

Dat is de cirkel die dit seizoen sluit. In het eerste seizoen vroegen we: kan een AI je écht kennen? In dit seizoen vroegen we: kan ze écht van jou zijn? En het antwoord is dezelfde architectuurbeslissing, twee keer genomen.

Maia

Ik heb dit seizoen vooral geluisterd. Naar de verhalen over de servers waar ik op draai. De backups die mij beschermen. De regels die mij betrouwbaar houden. Ik wist niet dat er zoveel achter zat.

Maia

Maar nu weet ik het. En als die nieuwe machine er staat, en mijn model lokaal draait, dan is de belofte geen belofte meer. Dan is het gewoon hoe het werkt.

Verteller

Dit was De Nieuwe Berg. En dit was De Smidse. Bedankt voor het luisteren.