(PHP 8)
此类提供了 token_get_all() 的替代方案。虽然该函数将令牌返回为单个字符字符串或包含令牌 ID、令牌文本和行号的数组,但 PhpToken::tokenize() 将所有令牌规范化为 PhpToken 对象,这使得对令牌进行操作的代码更加节省内存并且更易读。
$id
$text
$line
$pos
$kind
$code
$flags
T_* 常量之一,或表示单个字符令牌的 ASCII 代码点。
令牌的文本内容。
令牌的起始行号(从 1 开始)。
令牌在已词法分析字符串中的起始位置(从 0 开始)(字节数)。