syntax.c 11 KB

123456789101112131415161718192021222324252627282930313233343536373839404142434445464748495051525354555657585960616263646566676869707172737475767778798081828384858687888990919293949596979899100101102103104105106107108109110111112113114115116117118119120121122123124125126127128129130131132133134135136137138139140141142143144145146147148149150151152153154155156157158159160161162163164165166167168169170171172173174175176177178179180181182183184185186187188189190191192193194195196197198199200201202203204205206207208209210211212213214215216217218219220221222223224225226227228229230231232233234235236237238239240241242243244245246247248249250251252253254255256257258259260261262263264265266267268269270271272273274275276277278279280281282283284285286287288289290291292293294295296297298
  1. #include "__virtualmath.h"
  2. /**
  3. * 匹配一个数字字面量
  4. * 匹配器规则:
  5. * START模式:判断比较第一个字符(是否为数字或者小数点),若匹配成功则进入ING模式,若失败则进入MISTAKE模式
  6. * ING模式:继续匹配,直到遇到非数字或小数点。则检查是否为英文字母,若是则进入SECOND模式,否则进入END模式
  7. * SECOND模式:继续匹配,知道遇到非字母、下划线、数字的内容,进入END模式
  8. * END模式:进入END模式意味着匹配结束了,通过checkoutMather可以检查该匹配器是否被采用,采用后则生成token,并且读取器回退一个字符
  9. * MISTAKE模式:错误
  10. * 匹配内容:12.3jk_2,其中12.3存储在str中,jk_2存储在str_second中
  11. * @param p
  12. * @param mather
  13. */
  14. void numberMather(char p, LexMather *mather){
  15. if (mather->status == LEXMATHER_START || mather->status == LEXMATHER_ING || mather->status == LEXMATHER_INGPOINT){
  16. if ('0'<= p && '9' >= p || '.' == p && mather->status == LEXMATHER_ING){
  17. mather->str = memStrcpy(mather->str, 1, true, true, p);
  18. mather->len += 1;
  19. if ('.' == p)
  20. mather->status = LEXMATHER_INGPOINT;
  21. else if (mather->status == LEXMATHER_START)
  22. mather->status = LEXMATHER_ING;
  23. }
  24. else if(mather->status == LEXMATHER_ING || mather->status == LEXMATHER_INGPOINT){
  25. if ('A'<= p && 'Z' >= p ||'a'<= p && 'z' >= p ||'_' == p){
  26. mather->second_str = memStrcpy(mather->second_str, 1, true, true, p);
  27. mather->status = LEXMATHER_INGSECOND;
  28. }
  29. else{
  30. mather->status = LEXMATHER_END;
  31. }
  32. }
  33. else{
  34. mather->status = LEXMATHER_MISTAKE;
  35. }
  36. }
  37. else if (mather->status == LEXMATHER_INGSECOND){
  38. if ('A'<= p && 'Z' >= p ||'a'<= p && 'z' >= p ||'_' == p ||
  39. '0'<= p && '9' >= p){
  40. mather->second_str = memStrcpy(mather->second_str, 1, true, true, p);
  41. }
  42. else{
  43. mather->status = LEXMATHER_END;
  44. }
  45. }
  46. else{
  47. mather->status = LEXMATHER_MISTAKE;
  48. }
  49. }
  50. /**
  51. * 匹配一个变量
  52. * 匹配模式:匹配器结束模式为END_SECOND模式,也就是当checkoutMather检查的时候,END_SECOND位于END的优先级之后。
  53. * END_SECOND解决了冲突:关键词if可以满足varMather的匹配,但他并不是变量,if有特殊的匹配器(strMather)来匹配。
  54. * 匹配内容:a, a_123
  55. * @param p
  56. * @param mather
  57. */
  58. void varMather(char p, LexMather *mather){
  59. if (mather->status == LEXMATHER_START || mather->status == LEXMATHER_ING){
  60. if ('A'<= p && 'Z' >= p ||'a'<= p && 'z' >= p ||'_' == p ||
  61. '0'<= p && '9' >= p && mather->status == LEXMATHER_ING){
  62. mather->str = memStrcpy(mather->str, 1, true, true, p);
  63. mather->len ++;
  64. mather->status = LEXMATHER_ING;
  65. }
  66. else if(mather->status == LEXMATHER_ING){
  67. mather->status = LEXMATHER_END_SECOND;
  68. }
  69. else if(mather->status == LEXMATHER_START){
  70. mather->status = LEXMATHER_MISTAKE;
  71. }
  72. }
  73. else{
  74. mather->status = LEXMATHER_MISTAKE;
  75. }
  76. }
  77. /**
  78. * 匹配一个字符串字面量
  79. * 注意:string_type记录的是字符串结束标志(‘或者“)
  80. * 此处引进LEXMATHER_PASS,是为了在匹配到结束标志"或者'后,多读取一个字符,然后在统一回退
  81. * 匹配内容:’134‘,”123“
  82. * @param p
  83. * @param mather
  84. */
  85. void stringMather(char p, LexMather *mather){
  86. if (mather->status == LEXMATHER_START){
  87. if ('\"' == p || '\'' == p){
  88. mather->status = LEXMATHER_ING;
  89. mather->string_type = p;
  90. }
  91. else{
  92. mather->status = LEXMATHER_MISTAKE;
  93. }
  94. }
  95. else if (mather->status == LEXMATHER_ING){
  96. if (mather->string_type == p){
  97. mather->status = LEXMATHER_PASS;
  98. }
  99. else{
  100. mather->str = memStrcpy(mather->str, 1, true, true, p);
  101. mather->len ++;
  102. mather->status = LEXMATHER_ING;
  103. }
  104. }
  105. else if (mather->status == LEXMATHER_INGSECOND){
  106. if ('A'<= p && 'Z' >= p ||'a'<= p && 'z' >= p ||'_' == p ||
  107. '0'<= p && '9' >= p){
  108. mather->second_str = memStrcpy(mather->second_str, 1, true, true, p);
  109. }
  110. else{
  111. mather->status = LEXMATHER_END;
  112. }
  113. }
  114. else if(mather->status == LEXMATHER_PASS){
  115. if ('A'<= p && 'Z' >= p ||'a'<= p && 'z' >= p ||'_' == p){
  116. mather->second_str = memStrcpy(mather->second_str, 1, true, true, p);
  117. mather->status = LEXMATHER_INGSECOND;
  118. }
  119. else{
  120. mather->status = LEXMATHER_END;
  121. }
  122. }
  123. else{
  124. mather->status = LEXMATHER_MISTAKE;
  125. }
  126. }
  127. /**
  128. * 匹配关键词dest_p
  129. * @param p
  130. * @param mather
  131. * @param dest_p
  132. */
  133. void strMather(char p, LexMather *mather, const char *dest_p){
  134. if (mather->status == LEXMATHER_START || mather->status == LEXMATHER_ING){
  135. if (p == dest_p[mather->len]){
  136. mather->str = memStrcpy(mather->str, 1, true, true, p);
  137. mather->len ++;
  138. mather->status = LEXMATHER_ING;
  139. }
  140. else if(mather->status == LEXMATHER_ING && mather->len == memStrlen((char *)dest_p)){
  141. printf("G\n");
  142. mather->status = LEXMATHER_END;
  143. }
  144. else{
  145. mather->status = LEXMATHER_MISTAKE;
  146. }
  147. }
  148. else{
  149. mather->status = LEXMATHER_MISTAKE;
  150. }
  151. }
  152. /**
  153. * 匹配但个字符dest_p
  154. * @param p
  155. * @param mather
  156. * @param dest_p
  157. */
  158. void charMather(char p, LexMather *mather, char dest_p){
  159. int tmp_p = (int)p, tmp_dest = (int)dest_p;
  160. if (tmp_p == tmp_dest && mather->status == LEXMATHER_START){
  161. mather->str = memStrcpy(mather->str, 1, true, true, p);
  162. mather->len ++;
  163. mather->status = LEXMATHER_ING;
  164. }
  165. else if (mather->status == LEXMATHER_ING){
  166. mather->status = LEXMATHER_END;
  167. }
  168. else{
  169. mather->status = LEXMATHER_MISTAKE;
  170. }
  171. }
  172. /**
  173. * 开始匹配,返回的int即checkoutMather返回的值(匹配成功的匹配器的索引)
  174. * @param file
  175. * @param mathers
  176. * @return
  177. */
  178. int getMatherStatus(LexFile *file, LexMathers *mathers){
  179. setupMathers(mathers);
  180. int status = -1;
  181. while (status == -1){
  182. char p = readChar(file);
  183. numberMather(p ,mathers->mathers[MATHER_NUMBER]);
  184. stringMather(p ,mathers->mathers[MATHER_STRING]);
  185. varMather(p ,mathers->mathers[MATHER_VAR]);
  186. charMatherMacro(MATHER_EOF, EOF);
  187. charMatherMacro(MATHER_ENTER, '\n');
  188. charMatherMacro(MATHER_SPACE, ' ');
  189. strMatherMacro(MATHER_IF, "if"); // 条件判断
  190. strMatherMacro(MATHER_ELIF, "elif"); // 条件循环
  191. strMatherMacro(MATHER_WHILE, "while"); // 条件循环
  192. strMatherMacro(MATHER_FOR, "for"); // 遍历
  193. strMatherMacro(MATHER_IN, "in"); // 定义类
  194. strMatherMacro(MATHER_TRY, "try"); // 定义函数
  195. strMatherMacro(MATHER_EXCEPT, "except"); // 定义表达式(匿名函数)
  196. strMatherMacro(MATHER_AS, "as"); // 异常捕获
  197. strMatherMacro(MATHER_WITH, "with"); // 异常捕获
  198. strMatherMacro(MATHER_DO, "do"); // 捕获
  199. strMatherMacro(MATHER_ELSE, "else"); // 捕获
  200. strMatherMacro(MATHER_FINALLY, "finally"); // 条件分支
  201. strMatherMacro(MATHER_DEFAULT, "default"); // 条件-否则
  202. strMatherMacro(MATHER_GLOBAL, "global"); // 结束分支
  203. strMatherMacro(MATHER_NONLOCAL, "nonlocal"); // 结束分支
  204. strMatherMacro(MATHER_PUBLIC, "public"); // 结束分支
  205. strMatherMacro(MATHER_PROTECT, "protect"); // break跳出分支(循环、条件等)
  206. strMatherMacro(MATHER_PRIVATE, "private");
  207. strMatherMacro(MATHER_TRUE, "true");
  208. strMatherMacro(MATHER_FALSE, "false");
  209. strMatherMacro(MATHER_NULL, "null");
  210. strMatherMacro(MATHER_DEF, "def");
  211. strMatherMacro(MATHER_CLASS, "class");
  212. strMatherMacro(MATHER_BLOCK, "block");
  213. strMatherMacro(MATHER_BREAK, "break");
  214. strMatherMacro(MATHER_CONTINUE, "continue");
  215. strMatherMacro(MATHER_REGO, "rego");
  216. strMatherMacro(MATHER_RESTART, "restart");
  217. strMatherMacro(MATHER_RETURN, "return");
  218. strMatherMacro(MATHER_YIELD, "yield");
  219. strMatherMacro(MATHER_IMPORT, "import");
  220. strMatherMacro(MATHER_INCLUDE, "include");
  221. charMatherMacro(MATHER_ADD, '+');
  222. charMatherMacro(MATHER_SUB, '-');
  223. charMatherMacro(MATHER_MUL, '*');
  224. charMatherMacro(MATHER_DIV, '/');
  225. strMatherMacro(MATHER_INTDIV, "//");
  226. charMatherMacro(MATHER_PER, '%');
  227. strMatherMacro(MATHER_POW, "**");
  228. strMatherMacro(MATHER_EQ, "==");
  229. strMatherMacro(MATHER_MOREEQ, ">=");
  230. strMatherMacro(MATHER_LESSEQ, "<=");
  231. charMatherMacro(MATHER_MORE, '>');
  232. charMatherMacro(MATHER_LESS, '<');
  233. strMatherMacro(MATHER_NOTEQ, "!=");
  234. charMatherMacro(MATHER_BITAND, '&');
  235. charMatherMacro(MATHER_BITOR, '|');
  236. charMatherMacro(MATHER_BITXOR, '^');
  237. charMatherMacro(MATHER_BITNOT, '~');
  238. strMatherMacro(MATHER_BITLEFT, "<<");
  239. strMatherMacro(MATHER_BITRIGHT, ">>");
  240. strMatherMacro(MATHER_BOOLAND, "&&");
  241. strMatherMacro(MATHER_BOOLOR, "||");
  242. charMatherMacro(MATHER_BOOLNOT, '!');
  243. charMatherMacro(MATHER_ASSIGNMENT, '=');
  244. charMatherMacro(MATHER_POINT, '.');
  245. charMatherMacro(MATHER_AT, '@');
  246. charMatherMacro(MATHER_SVAR, '$');
  247. charMatherMacro(MATHER_LP, '(');
  248. charMatherMacro(MATHER_RP, ')');
  249. charMatherMacro(MATHER_LB, '[');
  250. charMatherMacro(MATHER_RB, ']');
  251. charMatherMacro(MATHER_LC, '{');
  252. charMatherMacro(MATHER_RC, '}');
  253. charMatherMacro(MATHER_COMMA, ',');
  254. charMatherMacro(MATHER_COLON, ':');
  255. charMatherMacro(MATHER_SEMICOLON, ';');
  256. strMatherMacro(MATHER_Link, "->");
  257. status = checkoutMather(mathers, MATHER_MAX);
  258. }
  259. backChar(file);
  260. return status;
  261. }
  262. /**
  263. * getMatherStatus的高级封装,若匹配到空格则自动忽略(再次匹配)
  264. * @param file
  265. * @param mathers
  266. * @return
  267. */
  268. Token *getToken(LexFile *file, LexMathers *mathers){
  269. int status = MATHER_SPACE;
  270. while (status == MATHER_SPACE){
  271. status = getMatherStatus(file, mathers);
  272. }
  273. if (status == -2){
  274. status = MATHER_EOF;
  275. printf("lexical ERROR\n");
  276. }
  277. return makeLexToken(status, mathers->mathers[status]->str, mathers->mathers[status]->second_str);
  278. }