AnalyzedTokenInfo interface

Informations sur un jeton retourné par un analyseur.

Propriétés

endOffset

Index du dernier caractère du jeton dans le texte d’entrée.

position

Position du jeton dans le texte d’entrée par rapport à d’autres jetons. Le premier jeton du texte d’entrée a la position 0, la position suivante a la position 1, et ainsi de suite. Selon l’analyseur utilisé, certains jetons peuvent avoir la même position, par exemple s’ils sont synonymes les uns des autres.

startOffset

Index du premier caractère du jeton dans le texte d’entrée.

token

Jeton retourné par l’analyseur.

Détails de la propriété

endOffset

Index du dernier caractère du jeton dans le texte d’entrée.

endOffset: number

Valeur de propriété

number

position

Position du jeton dans le texte d’entrée par rapport à d’autres jetons. Le premier jeton du texte d’entrée a la position 0, la position suivante a la position 1, et ainsi de suite. Selon l’analyseur utilisé, certains jetons peuvent avoir la même position, par exemple s’ils sont synonymes les uns des autres.

position: number

Valeur de propriété

number

startOffset

Index du premier caractère du jeton dans le texte d’entrée.

startOffset: number

Valeur de propriété

number

token

Jeton retourné par l’analyseur.

token: string

Valeur de propriété

string