83 toktype = KEYWORD |
83 toktype = KEYWORD |
84 self.__addToken(toktype, toktext, srow, scol, line) |
84 self.__addToken(toktype, toktext, srow, scol, line) |
85 else: |
85 else: |
86 self.__addToken(toktype, toktext, srow, scol, line) |
86 self.__addToken(toktype, toktext, srow, scol, line) |
87 except tokenize.TokenError as msg: |
87 except tokenize.TokenError as msg: |
88 print("Token Error: {0}".format(str(msg))) # __IGNORE_WARNING__ |
88 print("Token Error: {0}".format(str(msg))) |
|
89 # __IGNORE_WARNING_M801__ |
89 return |
90 return |
90 |
91 |
91 return |
92 return |
92 |
93 |
93 def __addToken(self, toktype, toktext, srow, scol, line): |
94 def __addToken(self, toktype, toktext, srow, scol, line): |