WisePC
Valikko
Palvelu → laitteisto · Tekoäly

Ollama (local AI): laitteistovaatimukset

Aja LLM-malleja paikallisesti — chat, koodin täydennys, yksityinen tekoäly.

Laitteistotasot

TasoCPURAMTallennusGPUVRAMVerkko
Järkevä minimi8 ydintä16 GB1 TB (ssd)ai12 GB VRAM1 GbE
Suositeltu12 ydintä32 GB1 TB (ssd)ai16 GB VRAM2.5 GbE
Mukava16 ydintä64 GB2 TB (ssd)ai24 GB VRAM10 GbE
Ylimitoitettu26 ydintä103 GB4 TB (ssd)ai24 GB VRAM10 GbE

Mukavan tuolla puolen — 16 ydintä, 64 Gt RAM-muistia, 2 Tt: pelivaraa, jota et koskaan käytä pelkästään tähän palveluun.

Mitoita tarkasti

Valitse ajettava malli — VRAM-tarve lasketaan, ei arvata.

Tarvitset ~8 GB VRAMia tähän.

Toimii hyvin kanssa

Kuvagenerointi, AI-kokeilut, Tietokannat

Usein kysytyt kysymykset

Kuinka paljon RAM-muistia Ollama (local AI) tarvitsee?

16 Gt on järkevä minimi, 32 Gt kattaa useimmat todelliset kokoonpanot ja 64 Gt antaa mukavan pelivaran.

Kuinka monta CPU-ydintä Ollama (local AI) tarvitsee?

8 ydintä on minimi, 12 ydintä optimi ja 16 ydintä mukavasti jaettuna muiden palveluiden kanssa.

Voinko ajaa useita palveluita yhdellä koneella?

Kyllä — useimmat palvelut jakavat resursseja. Käytä suunnittelijaa ja valitse useita palveluita; moottori summaa ja limittää vaatimukset pinoamisen sijaan.

Entä jos minulla on jo laitteistoa?

Rekisteröi se kohtaan Laitteistoni, niin analyysi näyttää tarkalleen, mitä palveluita nykyinen järjestelmäsi voi ajaa vaivatta — mukaan lukien rehellinen ”älä tee mitään”.

Näytä suositeltu buildWorkloadin laiteopasSuunnittele omasi

Liittyvät palvelut