RomânăEnglish

Ce știe o mașină

Cum ajunge un comutator să scrie fraze? Cursul răspunde de jos în sus, fără nicio treaptă sărită: de la ce înseamnă să afli ceva, la felul în care un curent electric ține un bit, la mașina care învață din exemple și, în cele din urmă, la modelele care vorbesc.

Fiecare lecție folosește numai ce s-a construit în lecțiile dinainte, iar fiecare mecanism e desenat și pus în mișcare în pagină: cutiile se sting, codul se construiește singur, curentul curge prin comutator. Calculele din figuri sunt reale, nu regizate.

Cuprins

  1. Partea 1Informația

    1. 01Măsura informațieibit · log₂ · cod binar
    2. 02Entropiasurpriză · Huffman · redundanță
    3. 03Corectarea erorilorparitate · Hamming · capacitate
    4. 04Eșantionare și cuantizareNyquist · pixeli · pierderi
  2. Partea 2Calculatorul

    1. 05Comutatorulporți · tranzistor
    2. 06Sumatorultransport · complement · depășire
    3. 07Bistabilulbuclă · zăvor · ceas · registru
    4. 08Procesorulinstrucțiune · ciclu · calea datelor
    5. 09Programul stocatvon Neumann · asamblor · scara
    6. 10Algoritmulsortare · complexitate
  3. Partea 3Învățarea

    1. 11Învățarea din exempleregulă cu praguri · schimbarea de plan
    2. 12Funcția de costparametri · cost · teren
    3. 13Coborârea panteigradient · rată de învățare
    4. 14Supraînvățareaantrenare · test · regularizare
    5. 15Neuronul artificialponderi · frontieră · sigmoidă
    6. 16Straturilestraturi ascunse · adâncime
    7. 17Propagarea înapoivina · regula lanțului
    8. 18Convoluțiafiltru · hartă de activare
  4. Partea 4Limbajul

    1. 19Reprezentarea vectorialăvectori · cosinus
    2. 20Tokenizareatokeni · lipirea perechilor
    3. 21Cuvântul următormodel de limbaj · perplexitate
    4. 22Modelul neural de limbajvectori · ponderi în comun
    5. 23Rețeaua recurentăstare ascunsă · panta care se stinge
    6. 24Atențiainterogare · cheie · valoare
    7. 25Blocul transformerflux rezidual · ocolire · normalizare
    8. 26Ordinea cuvintelormarcaj de poziție · sinusoide
    9. 27Antrenarea la scarăpreantrenare · legi de scalare
  5. Partea 5Asistentul

    1. 28Cum se alege cuvântultemperatură · tăierea cozii
    2. 29De la continuator la asistentreglaj fin · model de recompensă
    3. 30Ce se întâmplă când răspundememorie de chei-valori · fereastra de context
    4. 31De ce inventeazăconfabulare · calibrare
    5. 32Învățarea din contextprompt · exemple în context
  6. Partea 6Imaginile

    1. 33Zgomotul ca materialproces direct · programul zgomotului
    2. 34Drumul înapoipas de eșantionare · difuzie
    3. 35Difuzie pe o mână de puncterețea antrenată în pagină · spirala
    4. 36Textul care trage imagineacondiționare · ghidare
    5. 37Lucrul în spațiul comprimatautocodificator · difuzie latentă
    6. 38Rude apropiaterețea adversarială · potrivire de flux
  7. Partea 7Sistemele de azi

    1. 39Un singur spațiu pentru imagine și textspațiu comun · multimodal
    2. 40Unelte și bucla agentuluiapel de unealtă · buclă
    3. 41Căutare înainte de răspunsregăsire · bază vectorială
    4. 42Cât costă un răspunsamestec de experți · cuantizare · distilare
    5. 43Cum se măsoarăevaluare · contaminare
    6. 44Ce se vede înăuntrusondă · direcție · intervenție
  8. Partea 8Întrebările deschise

    1. 45Modelul lumiistare ascunsă · sondă · intervenție
    2. 46Ce înseamnă „mai deștept”generalitate · salturi · rigla
    3. 47Scopul și măsura luicel mai bun din k · Goodhart · aliniere
    4. 48Scara, de la capăt la capătcincisprezece opriri, una din alta