(PHP 8)
此类提供了一种替代 token_get_all() 的方法。虽然该函数将令牌返回为单个字符字符串或包含令牌 ID、令牌文本和行号的数组,但 PhpToken::tokenize() 将所有令牌规范化为 PhpToken 对象,这使得操作令牌的代码更节省内存且更易读。
$id
$text
$line
$pos
$kind
$code
$flags
T_* 常量之一,或表示单个字符令牌的 ASCII 码点。
令牌的文本内容。
令牌的起始行号(从 1 开始)。
在标记化字符串中的起始位置(从 0 开始)(字节数)。