NLP: Valodas Smalkā Orķestra
Rakstu Sērija par AI
Šis ir otrais raksts četru rakstu sērijā:
- LLMs: saprast, kas tie ir un kā tie darbojas.
- NLP: dziļa izpēte par dabiskās valodas apstrādes pamatprincipiem (šis raksts).
- AI Aģenti: autonomu mākslīgo intelektu atklāšana.
- Salīdzinājums un AI Smarttalk pozicionēšana: sintēze un perspektīva.
Ja valoda būtu simfonija, tās partitūra būtu bezgalīgi sarežģīta—dažreiz grandioza, dažreiz intīma—vadīta no valodu, kontekstu un kultūras niansēm daudzveidības. Šīs simfonijas centrā atrodas smalks, taču būtisks orķestris: NLP (Dabas Valodas Apstrāde), kas orķestrē vārdus un nozīmi AI pasaulē.
Pirmajā rakstā mēs salīdzinājām LLMs (Lielie Valodas Modeļi) ar milzīgiem bišu pūļiem, kas ražo tekstuālo medu. Šeit mēs atgriežamies pie pamata—bieži vien diskrētākiem—būvniecības blokiem, kas nosaka, kā teksts tiek saprasts un ģenerēts AI. Šī izpēte palīdzēs jums saprast:
- Vēsturiskās saknes NLP
- Galvenās metodes un tehnikas (statistiskas, simboliskas, neirālās)
- Galvenie posmi NLP cauruļvadā (tokenizācija, stembing, lemmatizācija utt.)
- Dažādās lietojumprogrammas (semantiskā analīze, tulkošana, automātiskā kopsavilkuma izveide...)
- Ētiskie, kultūras un tehnoloģiskie izaicinājumi
- Kā klasiskā NLP koeksistē ar LLM un kas atšķir vienu no otras
Mēs redzēsim, ka NLP var tikt uztverts kā mūziķu kopums, katrs spēlējot savu lomu: tokenizācija ir smalkā flauta, morfoloģiskā analīze ir pārdomātā klarnete, sintaktiskā atkarība ir čella, kas nostiprina melodiju, un tā tālāk. No šīs harmonijas iznāk izpratne (vai vismaz manipulācija) par dabisko valodu.
Gatavi noregulēt savus instrumentus? Ienirsim NLP, šajā smalkajā orķestra vadītājā valodas pasaulē.
1. Definīcija un Vēsture: Kad Valoda Kļuva (Arī) Mašīnu Jautājums
1.1. Agrīnie Soļi: Datorlingvistika un Simboliskās Pieejas
NLP datējas ar vairākiem gadu desmitiem, ilgi pirms jaudīgu LLM parādīšanās. Jau 1950. un 60. gados pētnieki brīnījās, kā panākt, lai mašīnas apstrādā valodu. Pirmās pieejas bija galvenokārt simboliskas: cilvēki mēģināja manuāli kodēt gramatiskās normas, vārdu sarakstus un ontoloģijas (kas attēlo pasaules konceptus), starp citu.
Šīs saucamās “zināšanu balstītās” metodes balstās uz pieņēmumu, ka, ja jūs nodrošināsiet pietiekami daudz lingvistisko noteikumu, sistēma var precīzi analizēt un ģenerēt tekstu. Diemžēl cilvēku valoda ir tik sarežģīta, ka ir gandrīz neiespējami kodēt katru lingvistisko niansi fiksētās normās.
Lingvistiskās Sarežģītības Piemērs
Francūšu valodā vārdu dzimuma noteikumi ir ar neskaitāmām izņēmumiem (piemēram, “le poêle” pret “la poêle,” “le mousse” pret “la mousse,” utt.). Katrs noteikums var radīt jaunus pret piemērus, un īpašo gadījumu saraksts turpina augt.
1.2. Statistiskā Era: Kad Skaitļiem Atļāva Runāt
Attīstoties datoru jaudai, parādījās statistiskas pieejas NLP: nevis manuāli kodējot noteikumus, mašīna secina paraugus no annotētiem datiem.
Piemēram, jūs varat apkopot korporu no tulkotiem tekstiem un izveidot probabilistisku modeli, kas aprēķina varbūtību, ka vārds avota valodā atbilst vārdam (vai vārdu grupai) mērķa valodā. Tieši tā, 2000. gadu sākumā, statistiskā mašīntulkošana (piemēram, Google Translate) uzplauka, galvenokārt balstoties uz metodēm, piemēram, Slēptajiem Markova Modeļiem vai saskaņotām frāzēm.
Pakāpeniski vienkāršās skaitīšanas metodes (vārdu notikumi) un analītiskās pieejas (n-grami, TF-IDF utt.) izrādījās ļoti efektīvas klasifikācijas vai atslēgvārdu noteikšanas uzdevumos. Pētnieki atklāja, ka valoda lielā mērā seko statistiskiem paraugiem, lai gan tie ir tālu no visu izskaidrošanas.
1.3. Neirālo Tīklu Laiks: RNN, LSTM un Transformatori
- gadi atnesa lielus neirālos modeļus, sākot ar RNN (Atkārtotie Neirālie Tīkli), LSTM (Ilgtermiņa īstermiņa atmiņa) un GRU (Aizslēgtie atkārtotie vienības). Šīs arhitektūras ļāva labāk apstrādāt vārdu secību un kontekstu teikumā salīdzinājumā ar tīri statistiskām pieejām.
Tad 2017. gadā raksts “Attention is all you need” ieviesa Transformatorus, izraisot viļņus, kas noveda pie LLM (GPT, BERT utt.). Tomēr pat ar šo iespaidīgo progresu, pamata būvniecības bloki NLP joprojām ir svarīgi: mēs joprojām runājam par tokenizāciju, lemmatizāciju, sintaktisko analīzi un tā tālāk, pat ja tās dažreiz tiek integrētas implicitā veidā šajos lielajos modeļos.
2. Galvenie posmi NLP caurulē: orķestris darbībā
Lai labāk izprastu NLP bagātību, iedomāsimies klasisku cauruli, kur teksts pāriet cauri dažādiem posmiem (dažādiem “mūziķiem”):
2.1. Tokenizācija: flauta, kas nodrošina pamata notis
Tokenizācija sadala tekstu elementārās vienībās, ko sauc par tokeniem. Valodās, piemēram, franču, tas bieži sakrīt ar vārdiem, kas ir atdalīti ar atstarpēm vai interpunkciju, lai gan tas ne vienmēr ir vienkārši (saīsinājumi, iekļautā interpunkcija utt.).
Tas ir neaizvietojams pirmais solis jebkurā NLP caurulē, jo mašīna “nesaprot” neapstrādātas rakstzīmju virknes. Pareiza tokenizācija atvieglo darbu ar šīm nozīmju vienībām.
2.2. Normalizācija un trokšņu noņemšana
Kad esat sadalījis tekstu, varat to normalizēt (piemēram, pārvērst uz maziem burtiem), noņemt nevajadzīgu interpunkciju vai stop vārdus (funkcijas vārdi, piemēram, “the,” “and,” “of,” kas ne vienmēr nes nozīmi).
Šajā posmā jūs arī risināt valodniecības specifiku: akcentu apstrāde franču valodā, rakstzīmju segmentācija ķīniešu valodā utt. Šī fāze ir nedaudz līdzīga klarineta skaidrošanai melodiju, filtrējot lieko troksni.
2.3. Stemming vs. Lemmatization: viola un vijole morfoloģiskajā analīzē
- Stemming: Tas samazina vārdus līdz “radikālai” formai, noņemot piedevas. Piemēram, “manger,” “manges,” “mangeons” var kļūt par “mang.” Tas ir ātri, bet neprecīzi, jo radikālais vārds ne vienmēr ir derīgs vārds.
- Lemmatization: Tas identificē vārda kanonisko formu (tā lemma), piemēram, “manger” (ēst). Tas ir precīzāks, bet prasa sarežģītāku leksiku vai valodniecības noteikumus.
Abas metodes palīdz samazināt leksisko variabilitāti un grupēt vārdus, kas dalās tajā pašā semantiskajā saknē. Tas ir līdzīgi tam, kā viola un vijole noregulē savas notis, lai radītu harmonisku ansambli.
2.4. Syntaktiskā analīze (parsing), daļas runas marķēšana (POS Tagging)
Syntaktiskā analīze identificē teikuma struktūru – piemēram, kurš ir subjekts, darbības vārds, objekts, kuri ir apstākļa teikumi utt. Bieži saukta par “parsing,” to var veikt, izmantojot atkarības sistēmas vai konstitūcijas kokus.
POS tagging piešķir katram tokenam gramatisko kategoriju (lietvārds, darbības vārds, īpašības vārds utt.). Tas ir būtiski dziļākai izpratnei: zināšana, vai “bank” ir lietvārds (vieta, kur sēdēt, franču valodā “banc”) vai darbības vārds, piemēram, maina to, kā frāze tiek interpretēta.
2.5. Semantiskā analīze, nosaukto entītiju atpazīšana
Semantiskā analīze cenšas izprast vārdu un teikumu nozīmi. Tas var ietvert sajūtu analīzi (“Vai teksts ir pozitīvs, negatīvs vai neitrāls?”), nosaukto entītiju atpazīšanu (cilvēki, vietas, organizācijas), koreferēšanas risināšanu (zināšana, kurš vietniekvārds attiecas uz kuru lietvārdu) un vēl vairāk.
Šeit orķestris patiešām sāk spēlēt harmonijā: katrs instruments (solis) sniedz norādes par to, ko teksts “nozīmē” un kā tā elementi savienojas.
2.6. Galīgais rezultāts: klasifikācija, kopsavilkums, tulkošana, ģenerēšana
Visbeidzot, atkarībā no uzdevuma var būt dažādi galīgie rezultāti: etiķete (suņu/pasta), tulkojums, kopsavilkums utt. Katrs konteksts atbilst citai “mūzikas skaņai,” ko izpilda NLP orķestris.
Protams, mūsdienu LLM, daudzi no šiem soļiem ir integrēti vai netieši “iemācīti.” Bet praksē, mērķtiecīgām lietojumprogrammām, mēs bieži joprojām izmantojam šos moduļus vairāk modulārā veidā.
3. Galvenās NLP metodes: simboliskās, statistiskās un neirālās pieejas
3.1. Simboliskās pieejas
Balstoties uz izteiktiem noteikumiem, šīs pieejas cenšas modelēt gramatiku, semantiku un vārdu krājumu. Priekšrocība: tās var būt ļoti precīzas šaurā jomā (piemēram, juridiskos kontekstos ar specifiskiem kodētiem noteikumiem). Trūkums: tās prasa lielu cilvēku ieguldījumu (valodnieki un IT eksperti) un labi nevis vispārinās.
3.2. Statistiskās pieejas
Šeit mēs novērtējam varbūtības no annotētiem korpusiem. Piemēram, varbūtība, ka viens vārds seko citam vai ka vārdu virkne pieder noteiktai kategorijai. Klasiski piemēri ietver n-gram modeļus, HMM (slēptie Markova modeļi) un CRF (nosacītie nejaušie lauki).
Šīs pieejas dominēja NLP no 1990. gadiem līdz 2010. gadiem, ļaujot izveidot sistēmas, piemēram, statistisko mašīntulkošanu un lielapjoma nosaukto entītiju atpazīšanu. Tām var būt nepieciešami ievērojami datu apjomi, bet parasti tās ir mazāk resursu prasīgas nekā vissarežģītākās neirālās metodes.
3.3. Neirālās pieejas
Pateicoties mūsdienu datoru jaudai, ir iespējams apmācīt neirālās tīklus ļoti lielos korpusos. RNN un īpaši Transformatori (BERT, GPT utt.) ir kļuvuši par mūsdienu NLP vadošo virzienu.
Šie modeļi māca vektoru reprezentācijas (iemeslus) un uztver sarežģītas kontekstuālas attiecības. Tie automatizē lielāko daļu no tā, ko “instrumenti” caurulē darīja: tokenizāciju, sintaktisko un semantisko analīzi utt. Praksē mēs bieži izmantojam hibrīdu pieeju: iepriekš apmācītu neirālo modeli, kas pielāgots konkrētam uzdevumam, ar iespējami simboliskiem noteikumiem virsū, lai izvairītos no noteiktām problēmām.
4. Galvenās NLP lietojumprogrammas: orķestris, kas kalpo cilvēcei
4.1. Sajūtu analīze un viedokļu uzraudzība
Vēlaties uzzināt, ko cilvēki domā par produktu sociālajos tīklos? NLP tehnikas var klasificēt tvītus, ierakstus un atsauksmes kā “pozitīvas,” “negatīvas” vai “neitrālas.” Tas ir vērtīgs rīks uzņēmumiem (mārketings, klientu attiecības) un institūcijām (mediju uzraudzība, sabiedriskās domas aptaujas).
4.2. Čatboti un virtuālie asistenti
Pat pirms LLM (piemēram, ChatGPT), NLP moduļi tika izmantoti, lai izstrādātu čatbotus, kas spēj atbildēt uz vienkāršiem jautājumiem, izmantojot FAQ vai iepriekš definētas skriptu. Mūsdienās šos čatbotus var apvienot ar lielākiem modeļiem, lai radītu plūstošāku sarunas sajūtu.
4.3. Automātiskā tulkošana un kopsavilkumi
Mašīntulkošana ir bijusi viens no NLP galvenajiem izaicinājumiem kopš sākuma. Šodien tā galvenokārt balstās uz neirālām pieejām (NMT – neirālā mašīntulkošana), lai gan statistiskās metodes joprojām ir ietekmīgas.
Līdzīgi, automātiskā kopsavilkuma (īsa kopsavilkuma izveide par rakstu, grāmatu utt.) pieprasījums ir ļoti liels. Ir divi galvenie veidi:
- Ekstraktīvi kopsavilkumi: atgūstot galvenās teikumu daļas
- Abstraktīvi kopsavilkumi: pārformulējot tekstu īsā veidā
4.4. Informācijas izguve
Jomās, piemēram, finansēs, tiesībās vai medicīnā, ir nepieciešams izmantot lielus dokumentu apjomus, lai izvilktu galvenos datus (skaitļus, atsauces, diagnozes utt.). NLP piedāvā rīkus nosaukto entītiju atpazīšanai, attiecību izguvei (kas ir saistīts ar ko?) un vēl vairāk.
4.5. Pareizrakstības un gramatikas pārbaudes
Neatkarīgi no tā, vai izmantojat vārdu apstrādātāju vai tiešsaistes rīku, pastāv liela iespēja, ka jūs gūstat labumu no NLP moduļiem, lai noteiktu pareizrakstības, gramatikas vai stila kļūdas. Šis uzdevums kādreiz bija lielā mērā simbolisks (noteikumu saraksti), bet tagad tas ietver statistiskos un neirālos modeļus lielākai elastībai.
5. Lingvistiskās, kultūras un ētiskās problēmas: sarežģītāks vērtējums
5.1. Daudzvalodība un kultūras daudzveidība
NLP nav ierobežots tikai ar angļu vai franču valodu. Daudzām valodām ir ļoti atšķirīgas struktūras (aglutīnas, tonālas vai ne-alfabētiskas rakstības). Anotēti datu kopumi bieži ir retāki "retām" vai mazāk resursētām valodām.
Tas rada jautājumu par iekļaušanu: kā mēs varam nodrošināt, ka pasaules lingvistiskā bagātība ir pārstāvēta modeļos? Kā mēs varam izvairīties no sistemātiskas "dominējošo" valodu atbalstīšanas?
5.2. Aizspriedumi un diskriminācija
NLP algoritmi, tāpat kā visi algoritmi, var mantot aizspriedumus no saviem apmācību datiem. Diskriminējoši apgalvojumi, dziļi iesakņojušies stereotipi vai pārstāvības nelīdzsvarotība var tikt pastiprināti ar šādām sistēmām.
Aizspriedumu piemērs
CV atlases modelis, kas apmācīts uz uzņēmuma vēsturiskajiem datiem, var iemācīties seksistisku aizspriedumu, ja pagātnē uzņēmums galvenokārt pieņēma darbā vīriešus noteiktām pozīcijām.
5.3. Privātums un GDPR
Tā kā NLP nodarbojas ar valodu, tas potenciāli attiecas uz e-pastiem, privātām ziņām un citām personiskām komunikācijām. Privātums ir ļoti svarīgs, īpaši ņemot vērā tādas regulas kā GDPR (Vispārīgā datu aizsardzības regula) Eiropā, kas nosaka stingras prasības attiecībā uz personisko datu apstrādi un glabāšanu.
5.4. Dezinformācija un manipulācija
NLP sasniegumi, īpaši apvienojumā ar ģeneratīviem modeļiem, padara iespējamu viltot arvien ticamāku tekstu. Tas pavērs ceļu viltus ziņu kampaņām, propagandai un citiem. Tādējādi ir nepieciešami atklāšanas un verifik ācijas metodes, kā arī sabiedrības informēšanas iniciatīvas.
6. Līdzāspastāvēšana un papildināšana ar LLM: izcila dueta iespēja?
Jūs varētu jautāt: “Tagad, kad LLM ir klāt, kāpēc uztraukties par tradicionālajām NLP tehnikām?” Atbilde ir vienkārša: NLP orķestris joprojām ir ļoti nozīmīgs:
- Izmērs un resursi: LLM ir milzīgi un prasīgi attiecībā uz aprēķiniem. Mazām vietējām vai iebūvētām lietojumprogrammām (piemēram, viedtālruņos) bieži tiek izvēlēti vieglāki modeļi vai tradicionālie NLP rīki.
- Interpretējamība: Klasiciskas metodes (simboliskā parsēšana, lingvistiskie noteikumi) dažreiz var piedāvāt labāku caurredzamību. Mēs varam izsekot, kāpēc tika pieņemts lēmums, kamēr LLM ir vairāk necaurredzami.
- Ierobežoti dati: Nišas jomās (piemēram, specializētā medicīnā vai konkrētas valsts tiesību sistēmā) var nebūt milzīga korpusa, lai apmācītu LLM. Klasiskās pieejas šeit var izcelties.
- Iepriekšēja apstrāde, pēcapstrāde: Pat ar LLM mums bieži ir nepieciešams iepriekš apstrādāt vai tīrīt datus, vai pēcapstrādāt izeju (formatēšanai, konsekvences pārbaudēm utt.).
Praksē daudzas kompānijas apvieno iepriekš apmācītu neirālo modeli (BERT, GPT utt.) ar tradicionālajiem NLP moduļiem. Tas ir līdzīgi kā tam, ka ir virtuozs solists sarežģītās partijās, kamēr pārējais orķestris nodrošina pavadījumu un kohēziju.
7. Nākotnes pamats: kāpēc NLP tikai paplašināsies
7.1. Augošas lietošanas iespējas
Dabas valodas apstrāde ir visur: informācijas iegūšana, automatizētas atbildes, satura ģenerēšana, rakstīšanas palīdzība, zināšanu bāzes pārvaldība... Tā kā tekstveida dati (e-pasti, čati, dokumenti) pieaug eksponenciāli, NLP kļūst arvien stratēģiskāks dažādās nozarēs.
7.2. Multimodalitāte
Mēs virzāmies uz multimodāliem modeļiem, kas apstrādā tekstu, attēlus, video un audio. Bet teksts paliek pamatā: spēja saprast un ģenerēt valodu pavērs ceļu savstarpējai saderībai ar citām modalitātēm (attēla apraksts, video subtitri utt.).
7.3. Uzlabota semantiskā meklēšana
Uzņēmumi un pētnieki arvien vairāk interesējas par semantisko meklēšanu, t.i., korpusa vaicāšanu pēc konceptiem, nevis tikai atslēgvārdiem. Tas balstās uz vektorizāciju un semantisko kodēšanu (ieguldījumiem), apvienojot ar algoritmiem konteksta līdzības noteikšanai.
7.4. Atlikušās problēmas
Pat ar nozīmīgiem sasniegumiem paliek lielas problēmas:
- Saprast sarcasmu, humoru, ironu
- Risināt augsta līmeņa loģisko domāšanu un sarežģītas secināšanas
- Atrisināt neskaidras nozīmes, kas saistītas ar kontekstu un kultūru
Tādējādi NLP turpinās attīstīties, izmantojot gan algoritmiskos sasniegumus, gan lingvistiskās pētniecības bagātību.
8. Kā AI Smarttalk iederas un AI aģentu nākotne
Nākamajā rakstā mēs apspriedīsim AI aģentus—autonomas entitātes, kas spēj domāt, plānot un darboties noteiktā vidē. Jūs redzēsiet, ka tie lielā mērā paļaujas uz NLP komponentiem, lai saprastu norādījumus, formulētu atbildes un pat ģenerētu darbības.
AI Smarttalk, savukārt, cenšas nostiprināt sevi kā inteliģentu, bet kontrolētu sarunu pakalpojumu, kas spēj izmantot LLM, kad tas ir nepieciešams, un atgriezties pie vieglākām NLP tehnikām specifiskām uzdevumiem (klasifikācija, jautājumu maršrutēšana, nodomu noteikšana utt.).
Ideja ir apvienot abu pasaules labākos aspektus: lielā modeļa izejvielu jaudu un precizitāti vai uzticamību veltītiem NLP moduļiem. Pamatā ir pilns orķestris (tradicionālā NLP), kas spēj spēlēt vairākas partitūras, plus virtuozs solists (LLM) liriskam uzplūdumam, kad tas ir nepieciešams.
9. Praktiski padomi NLP cauruļvada izveidei
Pirms noslēguma, šeit ir daži ieteikumi tiem, kas vēlas iedziļināties NLP vai uzlabot tā īstenošanu savā organizācijā.
9.1. Definējiet uzdevumu un datus
- Kāds ir jūsu galīgais mērķis? Sajūtu klasifikācija, informācijas iegūšana, tulkošana?
- Kādi dati jums ir? Anotēti korpusi, neanotēti dati, daudzvalodu dati?
- Kuri veiktspējas kritēriji ir svarīgi? Precizitāte, atgūšana, atbildes laiks, interpretējamība?
9.2. Izvēlieties pareizos rīkus
Ir daudz atvērtā koda bibliotēku (spaCy, NLTK, Stanford CoreNLP utt.) un mākoņa platformu (atslēgas NLP pakalpojumi). LLM (līdzīgi GPT) bieži ir pieejami caur API. Rūpīgi padomājiet par ierobežojumiem (izmaksas, konfidencialitāte, nepieciešamie aparatūras resursi).
9.3. Vērsties pie anotācijas un novērtēšanas
Gan statistiskajiem, gan neirālajiem modeļiem ir nepieciešami kvalitatīvi dati. Ieguldījums precīzās anotācijās ir būtisks, lai sasniegtu labus rezultātus. Jums arī jāizveido atbilstoša novērtēšanas protokols (testa kopums, metri kā F-mērs, BLEU rādītājs tulkošanai utt.).
9.4. Uzraudzīt un atkārtot
Valoda attīstās, un tāpat arī lietošanas modeļi. Ir svarīgi regulāri pārskatīt savu NLP cauruļvadu, atjaunināt to ar jauniem datiem un pamanīt iespējamos novirzes vai aizspriedumus, kas var rasties. NLP sistēma nekad nav patiesi "pabeigta" pēc izvietošanas.
10. Secinājums: NLP, Diskrētais Maestro, Kas Sagatavo AI Nākotni
Mēs tikko esam apskatījuši NLP (Dabas valodas apstrāde) plašos vilcienos. Tāpat kā orķestra ansamblis, šī joma apvieno daudzus instrumentus (simboliskos, statistiskos, neirālos) un vairākus partitūru tipus (tokenizācija, sintaktiskā un semantiskā analīze). Kopā tie rada mašīnu valodas mūziku, kur katra piezīme var būt vārds, morfēma vai jēdziens.
Lai gan LLM pēdējā laikā ir dominējuši virsrakstos ar savu pārsteidzošo sniegumu, NLP joprojām ir pamatu infrastruktūra, kas ļauj šiem lielajiem modeļiem pastāvēt un veikt ikdienas uzdevumus. Bez parsēšanas, POS marķēšanas, lematizācijas un citiem pamatiem mēs neredzētu šodienas precizitāti un plūdumu.
Un tas ir tikai sākums: ar multimodalitāti, semantisko meklēšanu un dziļāku izpratni par humoru, kultūras kontekstu un reālās pasaules loģiku, NLP joprojām ir daudz, ko pilnveidot. Ētiskās apsvērumi, privātums un regulējums arī pievienos sarežģītību, atgādinot mums, ka šī tehnoloģija var būt tikpat spēcīga, cik riskanta, ja to nepareizi izmanto.
Atgādinājums: Kas nākamais?
- Raksts #3: AI aģenti, vai kā NLP un kognitīvā plānošana apvienojas, lai radītu autonomas sistēmas.
- Raksts #4: Globāla salīdzināšana un AI Smarttalk pieejas prezentācija, apvienojot LLM spēku ar modulāro NLP.
Kopumā NLP ir diskrētais diriģents—bieži vien fonā—tunejot vijoles un nosakot tempu, kamēr solo mākslinieki (LLM) saņem aplausus. Bez šī pamata simfonija nekad nebūtu tāda pati. Nākamajā rakstā mēs redzēsim, kā valoda, kad tā ir interpretēta, var tikt izmantota aģentu lēmumu pieņemšanai un rīkošanai pasaulē, sperot vēl vienu soli pretī vēl autonomākai AI.
Līdz tam, ņemiet brīdi, lai ieklausītos “valodas mūzikā” ap jums: katrs vārds, katra teikuma, katra nianses ir bagātīgas konstrukcijas produkts, un NLP ir tur, lai atklātu tās slēpto struktūru.
Paldies, ka lasījāt, un tiksimies drīzumā trešajā šīs sērijas rakstā par AI aģentiem!