Hopp til hovedinnhold

Onsdag 7. oktober

 Tilbake Koding 2 min 15.10

KI-koding hjemme uten å gå konkurs: erfaringer fra en hobbyutvikler

søndag 14. juni · KI-generert · Kilde: stephen.bochinski.dev

Innholdet er KI-generert og kan inneholde feil. Sjekk originalkilden.

Bland leide open source-modeller med et par frontier-abonnement: en hobbyutvikler skisserer hvordan du driver seriøs KI-koding hjemme for rundt 1000 dollar i måneden.

Spørsmålet mange selvbyggere sitter med er hvor mye KI-koding faktisk må koste når du ikke har et selskapsbudsjett bak deg. I en bloggpost som samlet 305 poeng på Hacker News deler Stephen Bochinski tre konkrete veier, og hvilken som passer avhenger mest av hvor mye du stoler på neste års maskinvare- og modellslipp.

Den første er å self-hoste: kjøp maskinen, kjør åpne modeller lokalt og betal null per token etterpå. Ulempen er at hjemmemodellene er svakere enn det frontier-labbene leverer, og maskinvaren kan se ut som en dårlig investering om et år. Den andre er å leie de samme åpne modellene til API-pris, for eksempel via OpenRouter, slik at du slipper å binde tusenvis av dollar i én GPU mens alt fortsatt er i flyt. Den tredje er å presse frontier-abonnementene: rundt 400 dollar i måneden tilsvarer omtrent 2800 dollar i API-bruk til listepris, helt til du treffer taket.

Bochinskis anbefaling er en blanding av de to siste. Behold et par frontier-abonnement til den tunge tenkingen og spec-skrivingen, og betal API-pris for åpne modeller til de små, mekaniske bitene. Med spec-drevet utvikling lar du de dyre modellene lage planen og de billige fylle den inn.

Nøkkeltall
400 $/mnd i frontier-abonnement
2800 $ tilsvarende API-bruk til listepris
1000 $ for det et lite team gjør på en måned, med riktig blanding

Hva bør du gjøre?

  1. Start med å leie åpne modeller via en ruter som OpenRouter før du vurderer å kjøpe GPU, så du slipper å binde kapital i maskinvare som kan bli foreldet.
  2. Reserver frontier-abonnementene til planlegging og spec-skriving, og send de repetitive oppgavene til billigere åpne modeller.

Pulsen · norske KI-nyheter for deg som bygger. Sakene er KI-generert fra originalkilden, som alltid lenkes.