2_分析文本_语法分析与语篇分析
-文学翻译初步
第二课理解文本：语法分析与语篇分析
一、语法
二、语篇分析
Miss Brooke had that kind of beauty which seems to be thrown into relief by poor dress. Her hand and wrist were so finely formed that she could wear sleeves not less bare of style than those in which the Blessed Virgin appeared to Italian painters; and her profile as well as her stature and bearing seemed to gain the more dignity from her plain garments, which by the side of provincial fashion gave her the impressiveness of a fine quotation from the Bible,— or from one of our elder poets,—in a paragraph of to-day’s newspaper. She was usually spoken of as being remarkably clever, but with the addition that her sister Celia had more common-sense. Nevertheless, Celia wore scarcely more trimmings; and it was only to close observers that her dress differed from her sister’s, and had a shade of coquetry in its arrangements; for Miss Brooke’s plain dressing was due to mixed conditions, in most of which her sister shared. The pride of being ladies had something to do with it: the Brooke connections, though not exactly aristocratic, were unquestionably “good:” if you inquired backward for a generation or two, you would not find any yard-measuring or parcel-tying forefathers — anything lower than an admiral or a clergyman; and there was even an ancestor discernible as a Puritan gentleman who served under Cromwell, but afterwards conformed, and managed to come out of all political troubles as the proprietor of a respectable family estate. Young women of such birth, living in a quiet country-house, and attending a village church hardly larger than a parlor, naturally regarded frippery as the ambition of a huckster’s daughter.
—George Eliot, Middlemarch(Ch. 1, “Miss Brooke”)
Passing the visions, passing the night,
Passing, unloosing the hold of my comrades' hands,
Passing the song of the hermit bird and the tallying song of my soul,
Victorious song, death's outlet song, yet varying ever-altering song,
As low and wailing, yet clear the notes, rising and falling, flooding the night,
Sadly sinking and fainting, as warning and warning, and yet again bursting with joy,
Covering the earth and filling the spread of the heaven,
As that powerful psalm in the night I heard from recesses,
Passing, I leave thee lilac with heart-shaped leaves,
I leave thee there in the door-yard, blooming, returning with spring.
I cease from my song for thee,
From my gaze on thee in the west, fronting the west, communing with thee,
O comrade lustrous with silver face in the night.
Yet each to keep and all, retrievements out of the night,
The song, the wondrous chant of the gray-brown bird,
And the tallying chant, the echo arous'd in my soul,
With the lustrous and drooping star with the countenance full of woe,
With the holders holding my hand nearing the call of the bird,
Comrades mine and I in the midst, and their memory ever to keep for the dead I loved so well,
For the sweetest, wisest soul of all my days and lands -- and this for his dear sake,
Lilac and star and bird twined with the chant of my soul,
There in the fragrant pines and the cedars dusk and dim.
—Walt Whitman, “When Lilacs Last in the Dooryard Bloom’d”(excerpted) Relief: sharpness of outline due to contrast b:
the state of being distinguished by contrast relief> Profile: a representation of something in outline; especially: a human head or face represented or seen in a side view 1.His profile is very unusual. 2.An image of the President's profile appears on the coin. 3.I read a profile of her in a magazine. Trimming: a decorative accessory or additional item Coquetry: a flirtatious act or attitude 1. her husband> Conform: to act in accordance with prevailing standards or customs Proprietor: a person who has the legal right or exclusive title to something : owner Frippery: a:finery; also:an elegant or showy garment b:something showy, frivolous, or nonessential c: ostentation; especially: something foolish or affectedly elegant 1.The design is simple and devoid of needless frippery. 2. the symphony> Huckster: a peddler. 有不少人认为，美国结构主义语法学家创造的层次分析法是本世纪语言学伟大贡献，首先我们要了解层次分析法的概念，层次分析法美国描写语言学称为直接成分分析法, 称“直接成分分析法”（简称IC分析法），是对句法单位（包括短语和句子）的直接成分进行结构层次分析的方法。由于切分过程中尽可能采用二分，所以层次分析法又称作“二分法”。层次分析法作业的目的，是按照语言组合的次序分析语言结构的内部层次，找出一个语言片断的直接成分，层次分析法便由此而得名 1、基本分析原则 语法从表面上看是线性排列的符号序列。线性排列是指按照时间先后顺序说出或写出的形式。但是语法结构却是有层次性的，层次是指句法单位在组合时所反映出来的不同的先后顺序。 表层的线性关系背后暗含着隐性的层次关系。小的语法单位是大语法单位的组成部分，大的语法单位是由小的语法单位组合而成的，本身又可以成为更大语法单位的组成部分。 语法结构的每个层次一般直接包含比它小的两个语法单位，这两个小的语法单位就是直接成分。每一个直接成分又可以包含更小的直接成分。 例如： 我们进行社会调查 |主||____谓_______| |_述 | 宾____ | |_定）中 | 层次分析法就是逐层将一个句法单位（联合短语等由多个直接成分组成的短语除外）切分成两个直接成分，直到不能再切分为止的句子分析方法。 层次分析法的分析过程主要包括两个步骤：第一步是切分结构层次，第二步是确定结构关系。 1.优势 第一：可以层次鲜明地揭示出语言结构的内部层次。句子的层次性是一种客观存在，分析句子的层次，则是为了清楚地显示语义内容，层次分析法使得结构层次条理，语义脉落清晰、分明，弥补了中心词分析法的不足，例子：书本P80 P81（1）这种方法很解决问题 第二：层次分析法的适用面比较广。用这种分析法作业，就语音单位讲，小的可以用来分析合成词，大的也可以用来分析句群，且能符合各级语法单位的自 华北水利水电学院编译原理实验报告 2010～2011学年第二学期xxxx 级计算机专业 班级：xxxxx 学号：xxxxx 姓名：xxx 一、实验目的 通过设计、编制、调试一个典型的语法分析程序，实现对词法分析程序所提供的单词序列进行语法检查和结构分析，进一步掌握常用的语法分析方法。 二、实验要求 ⑴选择最有代表性的语法分析方法，如LL（1）分析法、算符优先法或LR分析法 ⑵选择对各种常见程序语言都用的语法结构，如赋值语句（尤指表达式）作为分析对象，并且与所选语法分析方法要比较贴切。 ⑶实习时间为6小时。 三、实验内容 选题1：使用预测分析法（LL（1）分析法）实现语法分析： （1）根据给定文法，先求出first集合、follow集合和select集合，构造预测分析表（要求预测分析表输出到屏幕或者输出到文件）； （2）根据算法和预测分析表分析给定表达式是否是该文法识别的正确的算术表达式（要求输出归约过程） （3）给定表达式文法为： G(E): S→TE E→+TE | ε T→FK K→*FK |ε F→(S)|i (4)分析的句子为： (i+i)*i和i+i)*i 四、程序源代码 #include "stdafx.h" #include "SyntaxAnalysis.h" #include "SyntaxAnalysisDlg.h" #ifdef _DEBUG #define new DEBUG_NEW #undef THIS_FILE static char THIS_FILE[] = __FILE__; #endif /////////////////////////////////////////// // CAboutDlg dialog used for App About 武汉轻工大学 编译原理实验报告 姓名朱春桃 院（系）数学与计算机学院 班级软件工程1203 学号 1205110605 指导教师李禹生 2014 年11 月10 日 一、实验目的 完成自顶向下语法分析算法的程序设计。 二、实验内容 设计、调试并测试自顶向下语法分析算法程序。 三、设计思路 根据课堂讲授的自顶向下语法分析方法，可以根据递归下降子程序方法设计语法分析程序，也可以根据LL（1）算法设计语法分析程序，针对文法：G[E] E→E+T | T T→T*F | F F→( E ) | i （1）由于文法G[E]不满足LL（1）文法条件，需要进行必要的等价文法变换。变换后的等价文法为： H[E] E→TA A→+TA | ε T→FB B→*FB | ε F→( E ) | i （2）等价文法H[E]不含左递归，可以证明文法H[E]满足LL（1）文法条件（3）根据递归下降子程序方法设计语法分析程序 ①递归程序清单 ②调试过程说明 ③测试语句设计 ④测试结果列表 ⑤测试结论分析 （4）根据LL（1）算法设计语法分析程序 ①预测分析表 ②预测分析程序清单 ③调试过程说明 ④测试语句设计 ⑤测试结果列表 ⑥测试结论分析 四、程序清单 /* E->TA, A->+TA|ε, T->FB, B->*FB|ε, F->i|(E). */ #include 第一节层次分析 1.1句法结构的层次性和层次分析 1、句法结构的层次性： 一个句子或是句法格式表面上看是线性排列，内部有一种层次的透景。（松紧程度不一样） 如：他刚来。（这三个词内部的松紧程度不一样。“刚”和“来”关系紧密，“他”和“刚”关系疏远，“刚”和“来”先组合，再和“他”组合） 2、结构的三个特点： *整体性（作为一个结构，一定具有整体性。） *可分割性（作为一个结构，一定可以被分割成多个部分。） *有规则性（一个结构作为一个整体，一定是由好几部分组成的，这好几个部分组合的时候，它是按照一定规则组成的。） 如：形声字：形+声，再+字（“形声字”这个词，不是一些语素随便凑成，而是按一定规则组成的。）【有两个以上语素组合时，其内部一定有层次结构。】 *音节也是有层次的，如：天[tian55] 这个音节也是有层次的： 声调——超音段成分 声母+韵母——音段成分 韵母——韵头+韵部(韵基) 韵基——韵腹（主要元音）+韵尾 【由此，我们可以说的宽泛一点，这叫语言的层次构造，这种构造，是语言的基本特性。不论是语音、词汇、句子都有这样的层析构造问题。】 3、层次分析：在分析一个句子，或是句法结构的时候，将句法构造的层次性考虑进来，并按其构造层次，逐层进行分析，在分析时，指出每一层面的直接组成成分，并说明直接组成成分之间的关系。这种分析手段就是层次分析。 如：他刚来 “他刚来”的直接组成成分：他+刚来主谓 谓语“刚来”的直接组成成分：刚+来状中 4、层次分析包含两个内容： 二他所写的文章怎么切分？ 切分：怎样断句 定性： 层次分析的三种主要表示方法：从小到大、框式、树型图: 5、怎么切分？ 同一结构如何切分 例句：他所参观的工厂。 名词性偏正结构定中 他所参观？ 他所参观的工厂 他所参观的工厂会导致他和工厂有领属关系 所以他所参观的工厂 他所参观怎么分析？ 他参观 实验二--语法分析(算符优先)-(2) 编译原理实验报告实验名称：语法分析器设计 专业：计算机科学与技术 姓名：田莉莉 学号：201117906 语法分析—算符优先分析程序 一．实验要求 ⑴ 选择最有代表性的语法分析方法，如算符优先法、递归子程序法或LR 分析法 ⑵ 选择对各种常见程序语言都用的语法结构，如赋值语句（尤指表达式）作为分析对象，并且与所选语法分析方法要比较贴切。 ⑶ 实习时间为6 学时。 二．实验内容及要求 （ 1）根据给定文法，先求出 FirstVt 和 LastVt 集合，构造算符优先关系表（要求算符优先关系表输出到屏幕或者输出到文件）； （ 2）根据算法和优先关系表分析给定表达式是否是该文法识别的正确的算术表达式（要求输出归约过程） （3）给定表达式文法为： G（E ' ）: E'T #E# E—E+T | T T—T*F |F F—（E）|i （4）分析的句子为 : （i+i）*i 和 i+i）*i 三．程序设计思想及实现步骤 程序的设计思想： 按照编译原理教材提供的算法，本程序的设计主要实现三个主要的过程： （1） 求解 FristVT 集和 LastVT 集：利用 CString 数组存放 VT 集，利用数组 下标对应非终结符关系； （2） 输出算符优先分析表：利用 MFC 中的 ClistCtrl 控件输出显示算符表， 比 利用二维数组对应其在内存中的关系。 （3） 利用算符优先分析表进行归约：根据教材所给算法，并对其进行实现在 屏幕上输 出归约过程。 实现步骤： 1、为程序各变量设计存储形式，具体设计如下所示： CString m_strTElem[T_LEN]; CString m_strNTElem[NT_LEN]; // 非终结符 CMapStringToPtr m_mapProdu; // 存放产生式 CMapStringToPtr m_mapProduEX; // 存放 扩展产生式 CString m_strFristVT[NT_LEN]; CString m_strLastVT[NT_LEN]; int m_nPriSheet[T_LEN+1][T_LEN+1]; // 终结符 //fristVT 集 //lastVT 集 实验二语法分析 一、实验目的： 设计MiniC的上下文无关文法，利用JavaCC生成调试递归下降分析程序，以便对任意输入的符号串进行分析。本次实验的目的主要是加深对递归下降分析法的理解。 二、语法分析器: 按照MiniC语言的语法规则检查词法分析输出的记号流是否符合这些规则，并根据这些规则所体现出的语言中的各种语法结构的层次性。把规则写入到JavaCC的.jjt文件中，可以生成树状的层次结构。 三、JavaCC: 在JavaCC的文法规范文件中，不仅可以描述语言的语法规范，而且可以描述词法规范，本次实习中，利用JavaCC以MiniC语言构造一个不含语义分析的编译器前端，包括词法分析、语法分析，并要考虑语法分析中的错误恢复问题。通过使用JavaCC, 可以体会LL(k)文法的编写特点，掌握编写JavaCC文法规范文件的方法。 内容：利用JavaCC生成一个MiniC的语法分析器； 要求： 1.用流的形式读入要分析的C语言程序，或者通过命令行输入源程序。 2.具有错误检查的能力，如果有能力可以输出错误所在的行号，并简单提示 3.如果输入的源程序符合MiniC的语法规范，输出该程序的层次结构的语法树本次实习仅完成以下语法范畴的语法分析： 1. 写出一个源程序中仅包含if…else, else语句的语法分析。要求能分析其自身 嵌套. 其他语句可简化处理 2. 写出一个源程序中仅包含for语句的语法分析。要求能分析其自身嵌套， 其他语句可简化处理 3. 写出一个源程序中仅包含while语句的语法分析。要求能分析其自身嵌套。 其他语句可简化处理 4. 写出一个源程序中包含上面的12或者13或者23或者123语句的语法分析。 要求能分析除其自身嵌套外，还包括相互嵌套。其他语句可简化处理 具体实施步骤如下： 1.把MiniC转换为文法如下 <程序〉→ main()〈语句块〉 〈语句块〉→{〈语句串〉} 第五章自上而下语法分析 1、教学目的及要求： 本章介绍编译程序的第二个阶段语法分析的设计方法和实现原理，包括自上而下分析的无回朔的递归下降分析、 LL(1)分析法。要求理解递归下降分析、LL(1)文法的基本概念；掌握无回朔的递归下降分析的设计和实现、LL(1)分析表的构造与分析方法。 ◇能够对一个给定的文法判断是否是LL(1)文法； ◇能构造预测分析表； ◇能用预测分析方法判断给定的输入符号串是否是该文法的句子； ◇能对某些非LL(1)文法做等价变换： ①消除左递归 ②提取左公共因子 可能会变成LL(1)文法。这样可扩大自顶向下分析方法的应用。 2、教学内容： 语法分析器的功能，自上而下语法分析（递归下降分析法，预测分析程序），LL（1）分析法，递归下降分析程序构造，预测分析程序。 3、教学重点： 递归下降子程序，预测分析表构造，LL(1)文法。 4、教学难点： 对一个文法如何判断是否是LL(1)文法，由于在判断 LL(1)文法时用到文法符号串的开始符号集合（FIRST集）和非终结符后跟符号集合（FOLLOW集）的计算，而一般学生往往因概念不清或不够细心对这两个集合的计算常常出错，导致判断和分析结果的错误。 5、课前思考 为了了解自顶向下（自上而下）分析的一般过程和问题，请学生首先回顾本章之前介绍的有关基本概念： ◇句子、句型和语言的定义是什么？ ◇什么叫最左推导？ ◇什么叫最右推导和规范推导？ ◇什么叫确定的自顶向下语法分析？ ◇自顶向下语法分析是从文法的开始符号出发，反复使用各种产生式，寻找与输入符号匹配的推导。 ◇确定的自顶向下语法分析中用的是哪种推导？ ◇在确定的自顶向下语法分析过程中，当以同一个非终结符为左部的产生式有多个不同右部时，如何选择用哪个产生式的右部替换当前的非终结符？ ◇确定的自顶向下语法分析对文法有何限制？ 6、章节内容 第一节概述 第二节 LL(1)分析方法 第三节递归下降分析法 5.1 概述 LL分析法 确定的自上而下分析 自上而下分析递归下降分析法 语法分析不确定的自上而下分析——即带回溯的分析方法 算符优先分析 自下而上分析 LR分析 一、带回溯的自顶向下分析方法 是自顶向下分析的一般方法，即对任一输入符号串，试图用一切可能的办法，从树根结点（识别符号）出发，根据文法自上而下地为输入串建立一棵语法树，或者说，从识别符号开始，根据文法为输入串建立一个推导序列，这种分析过程本质上是一种试探过程，是反复使用不同规则谋求匹配输入串的过程。 例有文法G[S]：S→cAd，A→ab|a，输入串w=cad。其分析过程为带回溯的。 二、存在问题及解决办法 1、左递归问题： 自顶向下分析方法只有把规则排列得合适时才能正确工作，该方法不能处理具有左递归性文法，可采取某些算法消除左递归。 2、回溯问题： 实验二语法分析程序设计与实现 一、实验目的 任选一种有代表性的语法分析方法，如算符优先法、递归下降法、LL(1)、SLR(1)、LR(1)等，通过设计、编制、调试实现一个典型的语法分析程序，对实验一所得扫描器提供的单词序列进行语法检查和结构分析，实现并进一步掌握常用的语法分析方法。 二、基本实验内容与要求 选择对各种常见高级程序设计语言都较为通用的语法结构——算术表达式的一个简化子集——作为分析对象，根据如下描述其语法结构的BNF定义G2[<算术表达式>]，任选一种学过的语法分析方法，针对运算对象为无符号常数和变量的四则运算，设计并实现一个语法分析程序。 G2[<算术表达式>]： <算术表达式> → <项> | <算术表达式>+<项> | <算术表达式>-<项> <项> → <因式> | <项>*<因式> | <项>/<因式> <因式> → <运算对象> | (<算术表达式>) 若将语法范畴<算术表达式>、<项>、<因式>和<运算对象>分别用E、T、F 和i代表，则G2可写成： G2[E]：E → T | E+T | E-T T → F | T*F | T/F F → i | (E) 输入：由实验一输出的单词串，例如：UCON，PL，UCON，MU，ID ······ 输出：若输入源程序中的符号串是给定文法的句子，则输出“RIGHT”，并且给出每一步分析过程；若不是句子，即输入串有错误，则输出“ERROR”，并且显示分析至此所得的中间结果，如分析栈、符号栈中的信息等，以及必要的出错说明信息。 要求: 1、确定语法分析程序的流程图，同时考虑相应的数据结构，编写一个语法分析源程序。 2、将词法、语法分析合在一起构成一个完整的程序，并调试成功。 3、供测试的例子应包括符合语法规则的语句，及分析程序能判别的若干错例。对于所输入的字符串，不论对错，都应有明确的信息输出。 现代汉语语法的五种分析方法 现代汉语语法的五种分析方法 很有用，请好好学习之。 北语之声论坛专业精华转贴 现代汉语语法的五种分析方法是语法学基础里 很重要的一个内容,老师上课也会讲到,我在这 里把最简略的内容写在下面，希望能对本科生的专业课学习有所帮助 详细阐释中心词分析法、层次分析、变换分析法、语义特征分析法和语义指向分析的具体内涵：一. 中心词分析法： 分析要点： 1．分析的对象是单句； 2．认为句子又六大成分组成——主语、谓语（或述语）、宾语、补足语、形容词附加语（即定语）和副词性附加语（即状语和补语）。 这六种成分分为三个级别：主语、谓语（或述语）是主要成分，宾语、补足语是连 带成分，形容词附加语和副词性附加语是附加成分； 3．作为句子成分的只能是词； 4．分析时，先找出全句的中心词作为主语和谓 语，让其他成分分别依附于它们； 5．分析步骤是，先分清句子的主要成分，再决定有无连带成分，最后指出附加成分。 标记： 一般用║来分隔主语部分和谓语部分，用══标注主语，用——标注谓语，用~~~~~~标注宾语，用（）标注定语，用[ ]标注状语，用< >标注补语。 作用： 因其清晰明了得显示了句子的主干，可以一下子把握住一个句子的脉络，适合于中小学语文教学，对于推动汉语教学语法的发展作出了很大贡献。 还可以分化一些歧义句式。比如：我们五个人一组。 （1）我们║五个人一组。（2）我们五个人║一组。 总结：中心词分析法可以分化一些由于某些词或词组在句子中可以做不同的句子成分而造成的歧义关系。 局限性： 1．在一个层面上分析句子， 层次性不强； 2．对于一些否定句和带有修饰成分的句子，往往难以划分； 如：我们不走。≠我们走。 封建思想必须清除。≠思想清除。 3. 一些由于句子的层次关系 不同而造成的歧义句子无法分析； 如：照片放大了一点儿。咬死了猎人的狗。 二. 层次分析： 含义： 在分析一个句子或句法结构时，将句法构造的层次性考虑进来，并按其构造层次逐层进行分析，在分析时，指出每一层面的直接组成成分，这种分析就叫层次分析。 朱德熙先生认为，层次分析不能简单地将其看作是一种分析方法，而是应当看做一种分析原则，是必须遵守的。（可以说说为什么） 层次分析实际包含两部分内容：一是切分，一是定性。切分，是解决一个结构的直接组成成分到底是哪些；而定性，是解决切分所得的直接组成成分之间在句法上是什么关系。 编译原理程序设计实验报告 ——表达式语法分析器的设计班级：计算机1306班姓名：张涛学号：20133967 实验目标：用LL（1）分析法设计实现表达式语法分析器 实验内容： ⑴概要设计：通过对实验一的此法分析器的程序稍加改造，使其能够输出正确的表达式的token序列。然后利用LL（1）分析法实现语法分析。 ⑵数据结构： int op=0; //当前判断进度 char ch; //当前字符 char nowword[10]=""; //当前单词 char operate[4]={'+','-','*','/'}; //运算符 char bound[2]={'(',')'}; //界符 struct Token { int code; char ch[10]; }; //Token定义 struct Token tokenlist[50]; //Token数组 struct Token tokentemp; //临时Token变量struct Stack //分析栈定义 { char *base; char *top; int stacksize; }; ⑶分析表及流程图 Begin PUSH(#),PUSH(E) POP(x) x ∈VT x ∈VN x=w end W=#n y NEXT(w) y n err 查LL （1）分析表空？ n PUSH （i ）err n y 逆序压栈 ⑷关键函数： int IsLetter(char ch) //判断ch 是否为字母 int IsDigit(char ch) //判断ch 是否为数字 int Iskey(char *string) //判断是否为关键字 int Isbound(char ch) //判断是否为界符 int Isboundnum(char ch) //给出界符所在token 值 int init(STack *s) //栈初始化 int pop(STack *s,char *ch) //弹栈操作 int push(STack *s,char ch) //压栈操作 void LL1(); //分析函数 源程序代码：（加入注释） 第四章 自顶向下语法分析方法 语法分析是编译过程的核心部分。语法分析的任务是：按照文法，从源程序符号串中识别出各类语法成份，同时进行语法检查，为语义分析和代码生成作准备。执行语法分析任务的程序称为分析程序。也称为语法分析器，它是编译程序的主要子程序之一。 在第二章中我们已经介绍过。通过语法分析可建立起相应的语法树。按语法树的建立方法，我们将语法分析方法分成两大类，即自顶向下分析和自底向上分析。下面，我们先介绍自顶向下分析。 本章重点：自顶向下分析、LL （1）分析 第一节 自顶向下分析方法 一、带回溯的自顶向下分析算法 这是自顶向下分析的一般方法，即对任一输入符号串，试图用一切可能的方法，从识别符号出发，根据文法自上而下地为输入串建立一棵语法树。 下面用一个简单例子来说明这种过程： 假定有文法G[S]： S→c Ａd A →ab|a 以及输入串w=cad 为了自上而下地构造w 的语法树，我们首先按文法的识别符号产生根结点S ，并让指示器IP 指 c S 的规则仅有一条）把这棵树发展为 （ a ） （b ） （c ） 图3-1-1 图3-1-1a 。我们希望用S 的子结从左至右匹配整个输入串w 。首先，此树的最左子结是终结符c 为标志的子结，它和输入串的第一个符号相匹配。于是，我们就把IP 调整为指向下一输入符号a ，并让第二个子结A 去进行匹配，非终结符A 有二个选择，我们试着用它的第一个选择去匹配输入串，于是把语法树发展为图3-1-1b 。子树A 的最左子结和IP 所指的符号相符，然后我们再把IP 调为指向下一符号d 并让A 的第二个子结进入工作。但A 的第二个子结为终结符号b ，与IP 当前指的符号d 不一致。因此，A 宣告失败。这意味着A 的第一个选择此刻不适用于构造w 的语法树。这时，我们应该回头（回溯）看A 是否还有别的选择。 为了实现回溯，我们一方面应把A 的第一个选择所生长的子树注销掉；另一方面，应把IP 恢复为进入A 时的原值，也就是让它重新指向第二输入符号a 。现在我们试探用A 的第二个选择，即考虑生成图3-1-1c 的语法树。 由于子树A 只有一个子结a ，而且，它和IP 所指的符号相一致，于是，A 完成了匹配任务。在A 获得匹配后，指示器指向下一个未被触及的符号d 。 在S 的第二子结A 完成匹配后，接着就轮到第三个子结d 进行工作。由于这个子结和最后一个输入符号相符，于是，我们完成了构造语法树的任务，证明了w 是文法G[ s]的一个句子。 上述自顶向下地为输入符号w 建立语法树的过程，实际上也是设法建立一个最左推导序列，以便通过一步步推导将输入串推导出来。很明显，对于输入串w 可以通过如下的推导过程将其推导出来：S ?CAd ?cad 所以用最左推导，是因为我们对输入串是自左向右扫描的，只有使用最左推导，才能保证按扫描顺序去匹配输入串。在上述推出符号串w 的过程中，由于出现在符号串中的非终结符号只有一个，因此，未明显地表现出最左推导的性质。 根据以上分析，不难编出程序来实现这种分析的算法。但是，上述这种自顶向下的分析算法存 实验二、语法分析 一、实验目的： 设计MiniC的上下文无关文法，利用JavaCC生成调试递归下降分析程序，以便对任意输入的符号串进行分析。本次实验的目的主要是加深对递归下降分析法的理解。 二、语法分析器: 按照MiniC语言的语法规则检查词法分析输出的记号流是否符合这些规则，并根据这些规则所体现出的语言中的各种语法结构的层次性。把规则写入到JavaCC的.jjt文件中，可以生成树状的层次结构。 三、JavaCC: 在JavaCC的文法规范文件中，不仅可以描述语言的语法规范，而且可以描述词法规范，本次实习中，利用JavaCC以MiniC语言构造一个不含语义分析的编译器前端，包括词法分析、语法分析，并要考虑语法分析中的错误恢复问题。通过使用JavaCC, 可以体会LL(k)文法的编写特点，掌握编写JavaCC文法规范文件的方法。 内容：利用JavaCC生成一个MiniC的语法分析器； 要求： 1.用流的形式读入要分析的C语言程序，或者通过命令行输入源程序。 2.具有错误检查的能力，如果有能力可以输出错误所在的行号，并简单提示 3.如果输入的源程序符合MiniC的语法规范，输出该程序的层次结构的语法树 具体实施步骤如下： 1.把MiniC转换为文法如下 Procedure()→void main() {WhileStatement()} WhileStatement()→while(Condition()){(WhileStatement()|ass ign())} assign()→ 实习二语法分析－自上而下分析 一、实验目的 使用预测分析方法对输入的表达式进行分析，掌握其具体的使用并且学会去分析一个文法。 二、实验内容 1．设计表达式的语法分析器算法（使用预测分析） 2．编写一段代码并上机调试查看其运行结果 三、实验要求 使用LL（1）分析算法设计表达式的语法分析器 LL（1）文法是一个自上而下的语法分析方法，它是从文法的开始符号出发，生成句子的最左推导，从左到右扫描源程序，每次向前查看一个字符，确定当前应该选择的产生式。 实现LL（1）分析的另一种有效方法是使用一张分析表和一个栈进行联合控制。 预测分析程序的总控程序在任何时候都是按STACK栈顶符号X和当前a的输入符号行事的。对于任何（X，a），总控程序每次都执行三种可能的动作之一。 1.若X＝a＝“#”，则宣布分析成功，停止分析过程 2.若X＝a≠“#”，则把X从STACK栈顶逐出，让a指向下一 个输入符号。 3.若X是一个非终结符，则查看分析表。 四、运行结果 （本程序只能对由'i','+','*','(',')'构成的以'#'结束的字符串进行分析） 五、源程序实现 /*LL(1)分析法源程序，只能在VC++中运行*/ #include 第二讲层次分析法 2.1 句子成分分析及其局限 句子成分分析法又叫中心词分析发。要点大致如下： （一）以单句为分析对象。 （二）句子有六大成分——主语、述语（谓语）（主要成分）；宾语、补足语（黎锦熙，如“他成了班长 ．．”“他 们请我做报告 ．．．”）（连带成分）；形容词性附加语（今天的定语）、副词性附加语（状语和补语）（附加成分）。 （三）句子成分原则上只能是词。 （四）分析手续：先找出全句主要成分主语和述语，再决定述语后有无连带成分宾语或补语，最后指出句中所有的附加成分。 句子成分分析发的优点：可以让人一下子把握住句子的脉络。在分析长句时，更能显示其优越性：（1）我国首升空的“神州－3号”模拟载人飞船经过264个小时在太空运行之后按照原先预定的时间安全、准确地返回原先计算好的我国西北某地区的地面。 句子成分分析法的局限性： 第一：离了枝叶，主干不成立或站不住，或不是原句子的意思。 （2）他贪图安逸。 （3）于福的老婆是小晴的娘．。 第二：离了枝叶，主干虽能成立，但意思发生了变化。 （4）我们都不懂。（我们懂） （5）祥林嫂死了当家人。（祥林嫂死了） （6）不合格的党员清除了。（党员清除了） 第三：不能有效分化歧义。 （7）照片放大了一点。（“放得不是很大”，“放得过于大了”） （8）我也去上海。 第四：不利于发现某些词语的用法特点。 （9）a.我们白白浪费了几个小时。*b.我们白浪费了几个小时。 2.2 句法构成的层次性 一个句子或句法结构总是按一定的句法规则一层一层地进行组合的。例如： （10）他刚到。 “刚”跟“他”不发生直接的关系，“刚”先跟“到”构成修饰关系，然后“刚到”一起再跟“他”构成主谓关系。这种构造特性一般称为“句法构造的层次性”。 2.3 关于层次分析法 华北水利水电学院编译原理实验报告 一、实验题目：语法分析（算符优先分析程序） （1）选择最有代表性的语法分析方法算符优先法； （2）选择对各种常见程序语言都用的语法结构，如赋值语句（尤指表达式）作为分析对象，并且与所选语法分析方法要比较贴切。 二、实验内容 （1）根据给定文法，先求出FirstVt和LastVt集合，构造算符优先关系表（要求算符优先关系表输出到屏幕或者输出到文件）； （2）根据算法和优先关系表分析给定表达式是否是该文法识别的正确的算术表达式（要求输出归约过程） （3）给定表达式文法为： G(E’): E’→#E# E→E+T | T T→T*F |F F→(E)|i (4) 分析的句子为: (i+i)*i和i+i)*i 三、程序源代 #include 第四章自顶向下语法分析方法 语法分析是编译过程的核心部分。语法分析的任务是：按照文法，从源 程序符号串中识别出各类语法成份，同时进行语法检查，为语义分析和代码生成作准备。执行语法分析任务的程序称为分析程序。也称为语法分析器，它是编译程序的主要子程序之一。 在第二章中我们已经介绍过。通过语法分析可建立起相应的语法树。按语法树的建立方法，我们将语法分析方法分成两大类，即自顶向下分析和自底向上分析。下面，我们先介绍自顶向下分析。 本章重点：自顶向下分析、LL（1）分析 第一节自顶向下分析方法 一、带回溯的自顶向下分析算法 这是自顶向下分析的一般方法，即对任一输入符号串，试图用一切可能的方法，从识别符号出发，根据文法自上而下地为输入串建立一棵语法树。 下面用一个简单例子来说明这种过程： 假定有文法G[S] ： S—c A d A — ab|a 以及输入串w=cad 为了自上而下地构造w的语法树，我们首先按文法的识别符号产生根结点S, 并让指示器IP 指 向输入串的第一符号c。然后，用S的规则（此处左部为S的规则仅有一条）把这棵树发展为| （a） （b）（c） 图3-1-1 图3-1-1a。我们希望用S的子结从左至右匹配整个输入串w。首先，此树的最左子结是终结符c为标志的子结，它和输入串的第一个符号相匹配。于是，我们就把IP调整为指向下一输入符号a,并让第二个子结A去进行匹配，非终结符A有二个选择，我们试着用它的第一个选择去匹配输入串，于是把语法树发展为图3-1-1b。子树A的最左子结和IP所指的符号相符，然后我们再把IP调为指向下一符号d并让A的第二个子结进入工作。但A 的第二个子结为终结符号b，与IP当前指的符号d不一致。因此，A宣告失败。这意味着A的第一个选择此刻不适用于构造w的语法树。这时，我们应该回头（回溯）看A是否还有别的选择。 为了实现回溯，我们一方面应把A的第一个选择所生长的子树注销掉；另一方面，应把IP恢复为进入A时的原值，也就是让它重新指向第二输入符号a。现在我们试探用A的第二个选择，即考虑生成图3-1-1C的语法树。 由于子树A只有一个子结a，而且，它和IP所指的符号相一致，于是，A 实验二语法分析程序的设计 姓名：学号：专业班级 一、实验目的 通过设计、编制、调试一个典型的语法分析程序，实现对词法分析程序所提供的单词序列进行语法检查和结构分析，进一步掌握常用的语法分析中预测分析方法。 二、实验内容 设计一个文法的预测分析程序，判断特定表达式的正确性。 三、实验要求 1、给出文法如下： G[E] E->T|E+T; T->F|T*F; F->i|(E); 2、根据该文法构造相应的LL(1)文法及LL(1)分析表，并为该文法设计预测分析程序， 利用C语言或C++语言或Java语言实现； 3、利用预测分析程序完成下列功能： 1）手工将测试的表达式写入文本文件，每个表达式写一行，用“；”表示结束； 2）读入文本文件中的表达式； 3）调用实验一中的词法分析程序搜索单词； 4）把单词送入预测分析程序，判断表达式是否正确（是否是给出文法的语言），若错误，应给出错误信息； 5）完成上述功能，有余力的同学可以进一步完成通过程序实现对非LL(1)文法到LL（1）文法的自动转换（见实验二附加资料1）。 四、实验环境 PC微机 DOS操作系统或Windows 操作系统 Turbo C 程序集成环境或Visual C++ 程序集成环境 五、实验步骤 1、分析文法，将给出的文法转化为LL(1)文法； 2、学习预测分析程序的结构，设计合理的预测分析程序； 3、编写测试程序，包括表达式的读入和结果的输出； 4、测试程序运行效果，测试数据可以参考下列给出的数据。 六、测试数据 输入数据： 编辑一个文本文文件expression.txt ，在文件中输入如下内容： 正确结果： （1）10; 输出：正确 （2）1+2; 输出：正确 （3）(1+2)*3+(5+6*7); 输出：正确 （4）((1+2)*3+4 输出：错误 （5）1+2+3+(*4+5) 输出：错误 （6）(a+b)*(c+d) 输出：正确 （7）((ab3+de4)**5)+1 输出：错误 七、源代码 import java.util.*; import java.io.*; public class test2 { static String[] key_word = { "main", "if", "then", "while", "do", "int", "else" }; static String[] cal_word = { "+", "-", "*", "/", "<", ">", "{", "}", "(", ")", "[", "]", "==", "!=", "!", "=", ">=", "<=", "+=", "-=", "*=", "/=", ";" }; /* * 给定文法G[E]： E->T|E+T; T->F|T*F; F->i|(E); */ static String[] gram = { "E->TA", "A->+TA", "A->@", "T->FB", "B->*FB", "B->@", "F->P", "F->(E)" }; static String[] followE = { ")", "#" }; 编译原理实验二语法分析 输入：token[40] tokenstring[40][30] 输出：检查是否符合文法]； 生成语法树。 样例程序已经对符合以下文法的源程序进行语法分析但不能生成抽象语法树。 要求写出能生成抽象语法树的语法分析程序。 文法：stmt_seq→ stmt_seq ; assign_stmt | assign_stmt assign_stmt →id := exp exp→exp + term | exp – term | term term→term * factor | term / factor | factor factor→ ( exp ) | id | num 语法树的数据结构： typedef enum {stmtk,expk} nodekind; typedef enum {ifk,assignk,declk} stmtkind; typedef enum {opk,constk,idk} expkind; typedef struct treenode { struct treenode * child[3]; struct treenode * sibling; nodekind nodek; union { stmtkind stmt; expkind exp;} kind; union { tokentype op; int val; char * name; } attr; } treenode; 样例程序 #include 第二讲__现代汉语语法研究层次分析法 第二讲层次分析法 2.1 句子成分分析及其局限 句子成分分析法又叫中心词分析发。要点大致如下： （一）以单句为分析对象。 （二）句子有六大成分——主语、述语（谓语）（主要成分）；宾语、补足语（黎锦熙，如“他成了班长 ．．”“他 们请我做报告 ．．．”）（连带成分）；形容词性附加语（今天的定语）、副词性附加语（状语和补语）（附加成分）。 （三）句子成分原则上只能是词。 （四）分析手续：先找出全句主要成分主语和述语，再决定述语后有无连带成分宾语或补语，最后指出句中所有的附加成分。 句子成分分析发的优点：可以让人一下子把握住句子的脉络。在分析长句时，更能显示其优越性：（1）我国首升空的“神州－3号”模拟载人飞船经过264个小时在太空运行之后按照原先预定的时间安 全、准确地返回原先计算好的我国西北某地区的地面。 句子成分分析法的局限性： 第一：离了枝叶，主干不成立或站不住，或不是原句子的意思。 （2）他贪图安逸。 （3）于福的老婆是小晴的娘．。 第二：离了枝叶，主干虽能成立，但意思发生了变化。 （4）我们都不懂。（我们懂） （5）祥林嫂死了当家人。（祥林嫂死了） （6）不合格的党员清除了。（党员清除了） 第三：不能有效分化歧义。 （7）照片放大了一点。（“放得不是很大”，“放得过于大了”） （8）我也去上海。 第四：不利于发现某些词语的用法特点。 （9）a.我们白白浪费了几个小时。*b.我们白浪费了几个小时。 2.2 句法构成的层次性 一个句子或句法结构总是按一定的句法规则一层一层地进行组合的。例如： （10）他刚到。 语法分析器的设计 一、实验内容 语法分析程序用LL(1)语法分析方法。首先输入定义好的文法书写文件(所用的文法可以用LL(1)分析)，先求出所输入的文法的每个非终结符是否能推出空，再分别计算非终结符号的FIRST集合，每个非终结符号的FOLLOW集合，以及每个规则的SELECT集合，并判断任意一个非终结符号的任意两个规则的SELECT 集的交集是不是都为空，如果是，则输入文法符合LL(1)文法，可以进行分析。对于文法： G[E]: E->E+T|T T->T*F|F F->i|(E) 分析句子i+i*i是否符合文法。 二、基本思想 1、语法分析器实现 语法分析是编译过程的核心部分，它的主要任务是按照程序的语法规则，从由词法分析输出的源程序符号串中识别出各类语法成分，同时进行词法检查，为语义分析和代码生成作准备。这里采用自顶向下的LL(1)分析方法。 语法分析程序的流程图如图5-4所示。 语法分析程序流程图 该程序可分为如下几步： （1）读入文法 （2）判断正误 （3）若无误，判断是否为LL(1)文法 （4）若是，构造分析表； （5）由句型判别算法判断输入符号串是为该文法的句型。 三、核心思想 该分析程序有15部分组成： （1）首先定义各种需要用到的常量和变量； （2）判断一个字符是否在指定字符串中； （3）读入一个文法； （4）将单个符号或符号串并入另一符号串； （5）求所有能直接推出&的符号； （6）求某一符号能否推出‘& ’； （7）判断读入的文法是否正确； （8）求单个符号的FIRST； （9）求各产生式右部的FIRST； （10）求各产生式左部的FOLLOW； （11）判断读入文法是否为一个LL(1)文法； （12）构造分析表M； （13）句型判别算法； （14）一个用户调用函数； （15）主函数； 下面是其中几部分程序段的算法思想： 1、求能推出空的非终结符集 Ⅰ、实例中求直接推出空的empty集的算法描述如下： void emp(char c){ 参数c为空符号 char temp[10];定义临时数组 int i; for(i=0;i<=count-1;i++)从文法的第一个产生式开始查找 { if 产生式右部第一个符号是空符号并且右部长度为1, then将该条产生式左部符号保存在临时数组temp中 将临时数组中的元素合并到记录可推出&符号的数组empty中。 } Ⅱ、求某一符号能否推出'&' int _emp(char c) { //若能推出&，返回1；否则，返回0 int i,j,k,result=1,mark=0; char temp[20]; temp[0]=c; temp[1]='\0'; 存放到一个临时数组empt里,标识此字符已查找其是否可推出空字 如果c在可直接推出空字的empty[]中,返回1 for(i=0;;i++) { if(i==count) return(0); 找一个左部为c的产生式 j=strlen(right[i]); //j为c所在产生式右部的长度 if 右部长度为1且右部第一个字符在empty[]中. then返回1(A->B,B可推出空) if 右部长度为1但第一个字符为终结符,then 返回0(A->a,a为终结符) else层次分析法即直接成分分析法
编译原理 语法分析实验二
自顶向下的语法分析(实验报告一)
现代汉语语法分析：第一节 层次分析
实验二--语法分析-
编译原理实验二
第五章 自上而下语法分析
实验二 语法分析程序设计与实现
现代汉语语法的五种分析方法
编译原理实验二语法分析器LL(1)实现
编译原理 第四章自顶向下语法分析法
实验二语法分析
语法分析(自上而下分析)实验报告
__现代汉语语法研究层次分析法
编译原理_实验报告实验二__语法分析(算符优先) 2
编译原理-四章自顶向下语法分析法
实验二--语法分析程序的设计-
编译原理实验二 语法分析
第二讲__现代汉语语法研究层次分析法
编译原理语法分析器实验
- 语法分析器实验报告2
- 语法分析实验报告(实验二)
- LL(1)语法分析实验报告
- 实验二语法分析算符优先法
- 实验二--语法分析程序的设计-
- 实验二：语法分析实验
- 实验二--语法分析程序设计与实现
- 实验二语法分析
- 编译原理实验报告-语法分析
- 编译原理实验二语法分析器LL(1)实现
- 编译原理实验二-语法分析器的设计
- 编译原理实验报告5-语法分析程序的设计(2)
- 实验二--编译原理语法分析(算符优先)
- 编译原理 语法分析实验二
- 实验二LL语法分析器
- 编译原理_实验报告实验二__语法分析(算符优先) 2
- 实验二 语法分析程序设计与实现
- 昆明理工大学_编译原理_实验二_语法分析器
- 语法分析实验报告(实验二)
- 编译原理实验报告-语法分析