token_source.getNextToken(),返回值是一个Token,token_source并没有声明,可以直接用是为什么,这个是词法分析里面的.

token_source.getNextToken(),返回值是一个Token,
token_source并没有声明,可以直接用是为什么,这个是词法分析里面的.

分词里面的吧,token_source可能是一个token的序列或者是stream,getNextToken就是取出序列中写一个元素.比如被分词串为server crashed last night
分词后串可能是{server,crash,last,night}
getNext 就是从第一个元素开始依次取出串里的内容