Basic language processing/nl: Difference between revisions

From Clarin K-Centre
Jump to navigation Jump to search
(Created page with "*[http://portal.clarin.nl/node/1918 CLAPOP pagina] *Geen werkende versie gevonden")
No edit summary
Line 1: Line 1:
Onder eenvoudige taalverwerking verstaan we gedeelte-van-spraak tagging, lemmatisering, named entity recognition, chunking en gelijksoortige taken die individuele woorden labelen.
Onder eenvoudige taalverwerking verstaan we part-of-speech tagging, lemmatisering, named entity recognition, chunking en gelijksoortige taken die individuele woorden labelen.


== Frog ==
== Frog ==
Frog is een voor het Nederlands ontwikkelde integratie van op geheugen gebaseerde natuurlijke taalverwerkingsmodules (NLP). De huidige versie van Frog zal woordtokens in Nederlandse tekstbestanden tokeniseren, taggen, lemmatiseren, en morfologisch segmenteren. Daarnaast zal Frog een afhankelijksdiagram toevoegen aan elke zin, de basis zinsdeelchunks identificeren en het zal pogen om alle named entities te vinden en te labelen.  
Frog is een voor het Nederlands ontwikkelde integratie van memory-based natuurlijke taalverwerkingsmodules (NLP). De huidige versie van Frog zal woordtokens in Nederlandse tekstbestanden tokeniseren, taggen, lemmatiseren, en morfologisch segmenteren. Daarnaast zal Frog een afhankelijksdiagram toevoegen aan elke zin, de basiszinsdeelchunks identificeren en het zal pogen om alle named entities te vinden en te labelen.  


*[https://webservices.cls.ru.nl/frog Online versie]
*[https://webservices.cls.ru.nl/frog Online versie]
*[https://languagemachines.github.io/frog/ Project website]
*[https://languagemachines.github.io/frog/ Projectwebsite]


== DeepFrog ==
== DeepFrog ==
DeepFrog richt zich erop om een (gedeeltelijke) opvolger te zijn van het Nederlandse NLP-project Frog. Waar de verscheidene NLP-modules in Frog nog waren gebouwd op k-NN classificatoren, bouwt DeepFrog op diepe leertechnieken en kan het een verscheidenheid aan neurale transformatoren gebruiken.
DeepFrog streeft ernaar om een (gedeeltelijke) opvolger te zijn van het Nederlandse NLP-project Frog. Waar de verscheidene NLP-modules in Frog nog waren gebouwd op k-NN classifiers, bouwt DeepFrog op deep learning techniques en kan het een verscheidenheid aan neurale transformatoren gebruiken.


*[https://huggingface.co/proycon/robbert-pos-cased-deepfrog-nld POS tagger]
*[https://huggingface.co/proycon/robbert-pos-cased-deepfrog-nld POS-tagger]


Het systeem is nog niet officieel vrijgegeven.
Het systeem is nog niet officieel vrijgegeven.
*[https://github.com/proycon/deepfrog Github pagina]
*[https://github.com/proycon/deepfrog Github-pagina]


== LeTs ==
== LeTs ==
LeTs is een pre-processor die kan worden gebruikt voor het Nederlands, Duits, Engels en Frans.
LeTs is een pre-processor die kan worden gebruikt voor het Nederlands, Duits, Engels en Frans.


*[https://lt3.ugent.be/resources/lets/ Project pagina]
*[https://lt3.ugent.be/resources/lets/ Projectpagina]
*[https://lt3.ugent.be/lets-demo/ Demo]
*[https://lt3.ugent.be/lets-demo/ Demo]



Revision as of 14:07, 3 April 2024

Onder eenvoudige taalverwerking verstaan we part-of-speech tagging, lemmatisering, named entity recognition, chunking en gelijksoortige taken die individuele woorden labelen.

Frog

Frog is een voor het Nederlands ontwikkelde integratie van memory-based natuurlijke taalverwerkingsmodules (NLP). De huidige versie van Frog zal woordtokens in Nederlandse tekstbestanden tokeniseren, taggen, lemmatiseren, en morfologisch segmenteren. Daarnaast zal Frog een afhankelijksdiagram toevoegen aan elke zin, de basiszinsdeelchunks identificeren en het zal pogen om alle named entities te vinden en te labelen.

DeepFrog

DeepFrog streeft ernaar om een (gedeeltelijke) opvolger te zijn van het Nederlandse NLP-project Frog. Waar de verscheidene NLP-modules in Frog nog waren gebouwd op k-NN classifiers, bouwt DeepFrog op deep learning techniques en kan het een verscheidenheid aan neurale transformatoren gebruiken.

Het systeem is nog niet officieel vrijgegeven.

LeTs

LeTs is een pre-processor die kan worden gebruikt voor het Nederlands, Duits, Engels en Frans.

Spacy

Nederlandse modellen

Stanza

Een Python NLP-pakket vele menselijke talen.

Adelheid Tagger-Lemmatizer: A Distributed Lemmatizer for Historical Dutch

Met deze webapplicatie kan een eindgebruiker historische Nederlandse teksten invoeren die vervolgens worden getokeniseerd, gelemmatiseerd en die gedeelte-van-spraak tags bevatten. De applicatie maakt gebruik van de meest geschikte bronnen (zoals lexica) voor de desbetreffende tekst. Voor elke specifieke tekst kan een gebruiker de beste bronnen selecteren uit de beschikbare bronnen in CLARIN, waar deze ook terug te mogen vinden zijn, en waar nodig kunnen deze worden aangevuld met eigen lexica.