(PHP 8)
Cette classe fournit une alternative à token_get_all(). Alors que la fonction retourne des jetons soit sous forme de chaîne de caractères unique, soit sous forme de tableau avec un ID de jeton, un texte de jeton et un numéro de ligne, PhpToken::tokenize() normalise tous les jetons en objets PhpToken, ce qui rend le code opérant sur les jetons plus efficace en mémoire et plus lisible.
L'une des constantes T_* ou un code ASCII représentant un token à un caractère.
Le contenu textuel du token.
Le numéro de ligne (à partir de 1) du token.
La position de départ (à partir de 0) dans la chaîne tokenisée (le nombre d'octets).