token.txt

简单的词法分析的功能

(function, 15)
(abc, 34)
((, 46)
(), 47)
({, 49)
(string, 34)
(ww, 34)
(=, 33)
(dddddddd, 37)
(;, 39)
(int, 1)
(a, 34)
(;, 39)
(int, 1)
(c, 34)
(;, 39)
(int, 1)
(b, 34)
(;, 39)
(if, 4)
((, 46)
(a, 34)
(+, 24)
(c, 34)
(*, 26)
(3, 35)
(>, 29)
(b, 34)
(), 47)
(and, 22)
((, 46)
(b, 34)
(>=, 31)
(3, 35)
(), 47)
(then, 5)
(c, 34)
(=, 33)
(3, 35)
(;, 39)
(x, 34)
(=, 33)
(2, 35)
(+, 24)
((, 46)
(3, 35)
(*, 26)
(a, 34)
(), 47)
(-, 25)
(b, 34)
(*, 26)
(c, 34)
(*, 26)
(8, 35)
(;, 39)
(if, 4)
((, 46)
(2, 35)
(+, 24)
(3, 35)
(>, 29)
(a, 34)
(), 47)
(and, 22)
((, 46)
(b, 34)
(>, 29)
(3, 35)
(), 47)
(and, 22)
((, 46)
(a, 34)
(>, 29)
(c, 34)
(), 47)
(then, 5)
(c, 34)
(=, 33)
(3, 35)
(;, 39)
(for, 9)
(x, 34)
(=, 33)
(1, 35)
(+, 24)
(2, 35)
(to, 10)
(3, 35)
(do, 8)
(b, 34)
(=, 33)
(100, 35)
(;, 39)
(while, 7)
(a, 34)
(>, 29)
(b, 34)
({, 49)
(c, 34)
(=, 33)
(5, 35)
(;, 39)
(}, 50)
(}, 50)