c++ - C++标记化

我正在用C++写一个词法分析器，并且正在逐个字符地读取文件，但是，在这种情况下，如何进行标记化？我无法使用strtok，因为我的字符不是字符串。不知何故我需要继续阅读直到到达极限值？

最佳答案

答案是是。您需要继续阅读，直到遇到定界符。

关于c++ - C++标记化，我们在Stack Overflow上找到一个类似的问题：https://stackoverflow.com/questions/23445199/