¿Lemmatizar palabras etiquetadas de POS con NLTK?

Question

Tengo POS etiquetado algunas palabras con nltk.pos_tag(), por lo que se les da etiquetas de árbol de árbol. Me gustaría hacer una lematización de estas palabras utilizando las etiquetas POS conocidas, pero no estoy seguro de cómo. Estaba buscando Wordmat lemmatizer, pero no estoy seguro de cómo convertir las etiquetas de POS treebank en etiquetas aceptadas por el lematizador. ¿Cómo puedo realizar esta conversión simplemente, o hay un lemmatizador que usa etiquetas de árbol?

Answer 1

El lematizador de wordnet solo conoce cuatro partes del discurso (ADJ, ADV, NOUN y VERB) y solo las reglas de SUSTANTIVO y VERBO hacen algo especialmente interesante. El nombre de las partes del discurso en el conjunto de etiquetas de treebank comienza con NN, todas las etiquetas de verbos comienzan con VB, las etiquetas de adjetivo comienzan con JJ, y las etiquetas de adverbio comienzan con RB. Por lo tanto, la conversión de un conjunto de etiquetas para el otro es bastante fácil, algo así como:

from nltk.corpus import wordnet 

morphy_tag = {'NN':wordnet.NOUN,'JJ':wordnet.ADJ,'VB':wordnet.VERB,'RB':wordnet.ADV}[penn_tag[:2]]