# Tokenizer

- Introduction
- Installation/Configuration
  - Installation
- Constantes pré-définies
- Exemples
- PhpToken — The PhpToken class
  - PhpToken::__construct — Renvoie un nouvel objet PhpToken
  - PhpToken::getTokenName — Renvoie le nom du token.
  - PhpToken::is — Indique si le token est d'un type donné.
  - PhpToken::isIgnorable — Indique si le token sera ignoré par l'analyseur PHP.
  - PhpToken::__toString — Retourne le contenu textuel du token.
  - PhpToken::tokenize — Sépare le code source donné en tokens PHP, représenté par des objets PhpToken.
- Fonctions Tokenizer
  - token_get_all — Scinde un code source en éléments de base
  - token_name — Retourne le nom d'un élément de code source