Wat is de verwerking van natuurlijke taal?

Natuurlijke taalverwerking (NLP) is een manier om te vertalen tussen computertalen en menselijke talen. Het doel van dit veld is om computers in staat te stellen te begrijpen wat een tekst zegt zonder precieze waarden en vergelijkingen te krijgen voor de gegevens die de tekst bevat. In wezen automatiseert natuurlijke taalverwerking het vertaalproces tussen menselijke en computertalen. Hoewel veel van dit veld afhankelijk is van statistieken en modellen om waarschijnlijke betekenissen van een zin te bepalen, zijn en zijn er veel verschillende benaderingen van dit probleem geweest. Bevindingen op dit gebied hebben toepassingen op het gebied van spraakherkenning, vertaling van de menselijke taal, het ophalen van informatie en zelfs kunstmatige intelligentie.

evoluerend uit een achtergrond in informatica en taalkunde, wordt de verwerking van natuurlijke taalvoeding geconfronteerd met veel problemen omdat taal niet altijd consistent is en niet alle aanwijzingen voor betekenis zijn Containgediend in taal zelf. Zelfs een volledig verslag van de gehele grammatica van een taal inclusief alle uitzonderingen laat niet altijd een computer toe om de informatie in een tekst te parseren. Sommige zinnen zijn syntactisch dubbelzinnig, woorden hebben vaak meer dan één betekenis, en sommige combinaties van geluiden of symbolen veranderen hun betekenis, afhankelijk van de grenzen van de woorden - die allemaal problemen kunnen zijn voor een computer die geen context begrijpt. Wat nog belangrijker is, veel van de taal hangt af van een verbinding met het fysieke en sociale universum - sommige zinnen, zoals spraakhandelingen, brengen geen informatie over als handel op de wereld. Zelfs als een computer een perfect begrip heeft van syntaxis van menselijke taal en semantiek, moet de te analyseren tekst vrij zijn van menselijke apparaten, zoals sarcasme of passieve agressie, voor de computer om correct vast te stellen wat de tekst betekent.

ideologisch gezien is de verwerking van natuurlijke taal een systeem van interactie tussen mens en computer die iS beheerst door het idee dat de meeste computergebruikers comfortabeler zijn om met computers te werken in een menselijke taal die ze al kennen dan zich aan te passen aan de taal van een computer. Het profiteert ook van het feit dat veel van de menselijke kennis al is gecodeerd in de menselijke taal, en de teksten die die kennis bevatten kunnen worden vertaald in logische structuren die kunnen worden gestroomlijnd voor een computer. Hoewel veel projecten in dit veld werken om computer-leesbare gegevens uit menselijke taalteksten te extraheren, wordt natuurlijke taalverwerking ook gebruikt om door mensen leesbare teksten uit computergegevens te genereren. Zowel deze inzicht als het genereren van faciliteiten kunnen door dezelfde technologie worden gebruikt, zoals in het geval van toepassingen die zich vertalen van de ene menselijke taal naar de andere door de tekst eerst in een computertaal te decoderen en deze vervolgens in een andere menselijke taal te coderen. De innovaties verkregen bij de inspanningen van natuurlijke taalverwerking zijn ook opvallend van toepassing op kunstmatige intelligentieprojecten vanwegede mate waarin mensachtige intelligentie wordt bepaald door een beheersing van de complexiteit van de menselijke taal.