forked from explosion/spacy-course
-
Notifications
You must be signed in to change notification settings - Fork 0
/
solution_03_07.py
29 lines (24 loc) · 1.02 KB
/
solution_03_07.py
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
import spacy
from spacy.matcher import PhraseMatcher
from spacy.tokens import Span
nlp = spacy.load("fr_core_news_sm")
animals = ["Golden Retriever", "chat", "tortue", "Rattus norvegicus"]
animal_patterns = list(nlp.pipe(animals))
print("animal_patterns :", animal_patterns)
matcher = PhraseMatcher(nlp.vocab)
matcher.add("ANIMAL", None, *animal_patterns)
# Définis le composant personnalisé
def animal_component(doc):
# Applique le matcher au doc
matches = matcher(doc)
# Crée un Span pour chaque correspondance et assigne-lui le label "ANIMAL"
spans = [Span(doc, start, end, label="ANIMAL") for match_id, start, end in matches]
# Actualise doc.ents avec les spans en correspondance
doc.ents = spans
return doc
# Ajoute le composant au pipeline après le composant "ner"
nlp.add_pipe(animal_component, after="ner")
print(nlp.pipe_names)
# Traite le texte et affiche le texte et le label pour les doc.ents
doc = nlp("J'ai un chat et un Golden Retriever")
print([(ent.text, ent.label_) for ent in doc.ents])