Che cos'è l'elaborazione del linguaggio naturale?
L'elaborazione del linguaggio naturale (NLP) è il campo dell'intelligenza artificiale e della linguistica che si occupa di far lavorare i computer con il linguaggio umano: leggerlo, comprenderlo, tradurlo e produrlo. Motori di ricerca, filtri antispam, app di traduzione, assistenti vocali e correttori grammaticali si basano tutti sull'NLP.
Tre approcci, in ordine
- Basato su regole (dagli anni 1950 agli anni 1980): i linguisti scrivevano a mano grammatiche e dizionari. L'esperimento Georgetown-IBM del 1954 tradusse in questo modo frasi dal russo, ed ELIZA (1966) imitava un terapeuta con semplici schemi.
- Statistico (dagli anni 1990 agli anni 2010): i modelli imparavano le probabilità delle parole da grandi raccolte di testi.
- Neurale (dagli anni 2010 in poi): machine learning con reti neurali, che ha portato ai transformer e ai modelli linguistici di grandi dimensioni.
Compiti comuni dell'NLP
- Tokenizzazione: suddividere il testo in parole o in porzioni di parole.
- Etichettatura delle parti del discorso e parsing: stabilire il ruolo di ogni parola e la sintassi della frase.
- Riconoscimento delle entità nominate: trovare nomi di persone, luoghi, organizzazioni e date.
- Analisi del sentiment: giudicare se un testo è positivo, negativo o neutro.
- Traduzione automatica, riassunto automatico e risposta alle domande.
ChatGPT è NLP?
Sì. ChatGPT è un'applicazione dell'NLP: un modello linguistico di grandi dimensioni addestrato a comprendere e generare testo. Gli LLM ora svolgono molti compiti che prima richiedevano sistemi NLP separati, ed è per questo che alcuni si chiedono se l'NLP sia un campo ormai morto. Non lo è; il campo si è spostato su come funzionano questi modelli, su come valutarli e su come renderli affidabili.
L'NLP nella scrittura accademica e nella ricerca
- Correttori grammaticali e suggerimenti di stile.
- Ricerca nella letteratura per significato, non solo per parole chiave esatte.
- Riassunto di articoli ed estrazione dei risultati principali.
- Analisi testuale come metodo di ricerca, per esempio per codificare grandi insiemi di interviste o di post sui social media.
Limiti
Gli strumenti di NLP faticano ancora con il sarcasmo, i termini specialistici, le lingue con poche risorse e il contesto esterno al testo. Rivedi i loro risultati prima di farci affidamento.
Caso d'uso: La migliore IA per scrivere saggi che restano tuoi