而本文讨论分析的对象以含有说话者发问意图的问句为主，对不含发问意图的问句只做简单的功能探讨。
1.２问句的分类
含有说话者发问意图的问句通常又叫疑问句，按照形式上的不同，它们又可以分为四类：是非问、特指问、选择问、正反问。
·是非问结构类似陈述句，一般用升调，句尾一般有“？”，句尾有时兼有语气助词“吗”显化疑问语调，也可以用“啊、哇”，但不可用“呢”［７-８］，如例１所示。
例１：２１世纪人类将要开发月球吗？
·特指问用疑问代词代替未知部分，常用的疑问代词有“谁、什么、哪儿、怎么、多少”等，句尾有时用“呢”或“啊”，不用“吗”［８］，如例２所示。
例２：这是哪里啊？
·选择问有并列的若干分句，前后分句常用“是”“还是”相呼应，有时用语气助词“呢”或“啊”，但不用“吗”。另外，选择问中语气助词和连词可以兼有［８］，如例３所示。
例３：是吃西餐还是吃中餐？
·正反问通常包含否定词“不、没有”，不采取复句的形式，在谓语中心或补语中用肯定和否定并列形式来提问［８－９］，具体情况如表１所示。
1.３问句形式概述
问句形式是判断问句的依据，主要包括语音语调、标点形式、句法格式、特征词。语音语调主要指句子的句调，一般问句的句调均以声调为主。标点形式主要指问号，这是问句的主要形式标记。句法格式指不同问句类型由特定句法单位构成的格式，按照问句类别可以分为是非问句法格式、特指问句法格式、选择问句法格式和正反问句法格式。而特征词是指能够帮助判断问句类别的典型词语，比如特指问的疑问代词，选择问中的“还是”等。
根据承载问句的介质不同，可以从以下两个方面来说明问句形式的作用和特点。
所以在问句判别的领域中，语音语调信息与标点信息形成对立，句法格式和特征词两者相互补充，甚至两者还互有交叉，一定情况下还可以相互转换。问号往往就是问句的标志。本文将重点研究文本中的问句表现形式。
02
问句形式在问句分类中的作用
问答系统一般由问题分类、查询扩展、搜索引擎、答案抽取以及答案排序选择等多部分组成［１０］。问题分类是建构问答系统的重中之重。而对于问题分类而言，目标问句语料的筛选又是问题分类的前提条件。质量高的问句语料可以提高问题分类及后续工作的效率。
问句提取的对象通常都是文章中的对话内容，即引号内的问句，这样做有两个好处：一是可以保证问句提取的自然度，能够最大限度地模拟日常问答；二是为判定问句的意图提供了条件，可以通过问句的上下文来推测说话人的意图，从而判别句子是“有疑而问”还是“无疑而问”。而文本问句的形式在上文已提到包括标点形式、句法格式、特征词三类，下面将围绕这三点说明问句形式在问句语料筛选中的作用。
２.１标点形式
问号是问句的主要标志，根据问句中问号的多少可以把问句大致分为以下两类。
（1）问句中存在多个问号
一般包括两种情况：其一，问句是个连续问句群（例４），此时问句能被分解为若干个单独的问句；其二，问句是选择问句的一种形式变体（例５），此时每一个以问号成句的句子不能单独理解，必须将问句群看作一个整体，因为从语义上来说，单独的问句语义并不完整，只有问句群才能够表达完整的意义。
例４：你是谁？你来自哪里？
例５：你要喝果汁？还是牛奶？
连续问句往往不能成为问句分类分析的典型语料，但其作为问句的组合形式的一种，能拆解成若干个问句来理解。而选择问句的形式变体实际上是标点的一种误用，在形式上与连续问句相同，但它在问句语料中也占有一定数量，应算作问句分类分析中的典型语料，否则会使选择问句在自然语言中的比例不能得到正确的反映。
（2）问句中只存在一个问号
又可根据问句内部是否存在标点分为两类：一类是组合问句群，另一类是常规问句。汉语中的连续问句可以用逗号连接，以问号结尾。此时句子并不是单一的问句，而是一个组合式的问句群，不能成为问句分类分析的典型语料（例６）。
例６：我是谁，来自哪里，又将会去何处？
2.２句法格式
问句中存在一些包含特殊句法格式的句子，这类句子如果按照形式去分析，其问句理解的复杂程度相较其余典型问句要大得多，可细分为以下几类。
（1）“Ｗ＋呢”类
“Ｗ＋呢”类又可细分为“ＮＰ＋呢？”和“ＶＰ＋呢？”两类。
“ＮＰ＋呢”在形式上没有明显的问句形式特征，但可以根据其前行句在深层语义上对其进行不同的扩展，如例７所示。
例７：
陈奶妈：“清少爷，你这一向好啊？”
曾文清：“好，您老人家呢？”（曹２８６）
“您老人家呢？”可以作“您老人家好不好”“您老人家怎么样”“您老人家好吗？”等三种语义理解，且这三种理解分别属于正反问句、特指问句、是非问句。所以可以看出，理解这类问句在语义上需要借助语用信息，在形式上做进一步分类也容易出现分歧。
（2）“ＶＰ＋呢？”
邵敬敏［６］将这类问句分成了三种类型：
甲（要是）ＶＰ呢？
乙（要是）ＶＰ，怎么办呢？
丙（要是）ＶＰ呢？（要是）ＶＰ，怎么办呢？
形式上来看，“ＶＰ＋呢”类问句中，甲句型最简洁，乙句型最完整，丙句型兼具甲、乙句型的特点，三种类型都能表达相同的语法意义。另外，从功能上来看，“ＶＰ＋呢”类问句既能表示假设，也能表示询问，但无论是何种功能，这类问句的理解同样需要语用信息，且问句往往以甲句型出现。当然，如果考虑到根据深层语义补足原有形式的话，这类问句应是特指问，即根据完整句型乙推出。所以，在问句语料的筛选中，这类问句往往因为其功能的复杂性而被排除在典型问句的筛选范围之外。
（3）省略疑问成分的问句一些问句还存在一些缺省疑问成分，但在一定语境下仍旧可以表达疑问［６］。例如，两人初次见面时，一方可以用“您是？”提问，意为“您是哪位／您是谁”；对对方的变化感到疑问，可以用“您这是？”提问，意为“您这是怎么了？”。
这类句子在省略了疑问词的情况下，以是非问句的形式存在，但如果根据深层语义补足原有形式，这类句子大多属于特指问，且要理解句子省略了何种疑问词也需要结合语用信息才能说明。所以，在问句语料的筛选中，这类问句往往排除在典型问句的筛选范围之外。
（4）回声问句
回声问是“对话的问题”，具有更多的交际价值，但对于问题本身来说它需要依托一定的语境才能理解它的含义或补全它的完整问句形式［６］。所以，在问句语料的筛选中，这类问句往往排除在典型问句的筛选范围之外，如例８所示。
例８：
鲁侍萍：“老爷那种绸衬衣不是一共有五件？您要哪一件？”
周朴园：“要哪一件？”（曹６３）
２.３特征词
不同的问句类型有自己的特征词，这些特征词是判定句子类别的标志。如果特征词出现了错误，就可能影响问句的分类，进而影响问句的理解。主要表现为疑问代词，如例９、例１０所示。
例９：在中国有好多人在看摇滚？
例１０：浮云是神马意思？
前者的“好多”带有地域方言色彩，应属疑问词，对应标准式“多少”；后者的“神马”是网络词汇，属于疑问词“什么”一种语言变体。如果在问句理解中不能对这些形式的问句加以区分，则容易在语法结构和语义分析上造成偏差，最后影响问句的理解。由此可知，在问句语料的筛选中，还需要注意特征词的错写对语料筛选的影响。
所以，标点形式、句法格式、特征词在问答系统的任务中具有举足轻重的作用，规范的问句形式和信息正确同等重要，规范的问句形式是保障问句语料正确性、完整性的基础。
２.４问句特征选取与特征集构建
根据语言学对是非问、特指问、选择问和正反问的定义，可以进一步将句法格式和特征词细化为疑问格式、语气词、语气副词以及疑问代词四大类，这四大类在具体语料中又可以细分为七个小类：语气词“呢”类、语气词“吗”类、疑问代词、语气副词、是非问疑问格式、正反问疑问格式以及选择问疑问格式。
在是非问句中，一些句子的显性问句标记过少，不含七小类特征中的任一特征，如是非问“他走了？”。所以为避免没有特征匹配是非问句的情况，我们将增加一类补充特征，即当问句不存在疑问代词、正反问疑问格式和选择问疑问格式任一特征时，默认该句有补充特征，否则没有。所以最终可从以上八个问句特征的角度来描述问句。
03
问句语料库建设
３.１数据标注
为测试问句形式对语料筛选的有效性，同时也为问句数据做进一步的分类，我们从一批小说语料中选取了２４００个问句并将这些句子分成三组，每组８００句，交由６位语言学专业的研究生两两标注，问句的分类标准主要参照上文的问句定义。是非问、特指问、选择问和正反问分别以数字1、2、3、4表示。一个完整标注的问句如下所示，问句前的数字代表问句的类别。
１：还有其他异常情况吗？（问句标注示例）
经统计，三组在没有对抽取句子进行形式上的筛选之前，一致率分别为0.855，0.820，0.845，平均一致率达0.840；而经过对抽取的句子按照常规问句形式的筛选，剔除句意理解与语用信息相关的句子后，一致率分别为0.965，0.943，0.894，平均一致率达到0.943。可见，问句形式在本研究中有助于提高问句标注的一致率。同时，以上实验也表明，根据问句的语言学特征来判定问句种类并不是一个过于复杂的任务，在此基础上可以继续扩大问句标注规模。
3.２问句分布情况
经标注及筛选后，共得到1679个问句。在此基础上，我们还标注了一批形式上较为规整，不依赖语境且可以自足分析的百度知道问句数据集，共2621句。各数据集的问句分布如表２所示。特指问在问句中数量与占比均为最高，其次是是非问、正反问以及选择问，在一定程度上也大致反映了这四类问句在自然语言中的分布情况。
此外，在不同数据集上，四类问句的分布也稍有差异。在小说问句中，是非问与特指问占比相当，特指问略高于是非问；而在百度问答问句中，特指问占比超过70％，远远超过是非问的20.1％，在一定程度上呈现了小说问句与百度问答问句的特点，两者既有联系又有区别。百度知道问句是属于百科问答式问句对概念的提问、事件发生的原因等问句比例较大，致使包含疑问代词的问句较多，也就造成了特指问句在百度问答数据集上分布较多。而小说问句中并没有这种明显的倾向性，使得是非问句与特指问句分布较为均匀，同时小说问句的语境也更接近于日常生活场景的问句使用情况。
3.3问句特征在语料中的分布情况
我们已整理出了问句的八个小类特征，分别用Ｆ１～Ｆ８来表示，在语料库中，这些形式特征的计量统计如表３所示。从表３可以发现，各特征多寡是和不同类型问句占比有关的，部分特征分布情况甚至可以直接反映问句整体的分布情况。如特征Ｆ３、Ｆ４、Ｆ５、Ｆ６的占比与四类问句在数据集中的分布情况相当，反映出特指问和是非问在问句中占比较大，选择问正反问数量更少。另一方面，疑问格式与疑问代词特征的占比相加大于１００％，说明问句分类的结果不是仅由疑问格式决定的，至少存在一个问句包含多个疑问格式或疑问代词的情况，问句分类的复杂性也体现于此。
04
基于问句形式对自动分类
4.1基于统计机器学习的多特征分类
在获得多维度向量及其对应的分类标签后就已经进入了根据特征分布进行问句分类的任务。根据以往分类任务经验，本文拟用支持向量机、逻辑回归分类器、贝叶斯分类器、Ｋ近邻、决策树以及随机森林等六种机器学习方法来验证问句特征对问句的分类效果。
此外，不同特征数量的选择对问句分类的结果也会有影响。Ｆ１～Ｆ８等特征近似于从语言学角度对问句形式进行列举，但哪些特征组合能够使得问句分类效果最佳需要进一步实验证明，所以本文将对Ｆ１～Ｆ８等８个特征做排列组合，共计２２５种组合结果。
我们再将人工标注的１６７９句小说问句作为训练语料，后续标注的２６２１句百度知道问句作为测试语料，将机器学习方法与特征组合结果结合后，下文将从多角度来分析模型的分类效果。
4.2基于形式特征集的有限状态自动机
考虑到不存在问句特征和问句类型完全一一对应的情况，问句特征可以分为充分不必要条件（语气词、疑问格式等）、必要不充分条件（疑问代词、语气副词等）两种。充分不必要条件对判断的贡献程度会高于必要不充分条件，从这个角度来说，问句特征贡献程度便有如下排序，语气词＝疑问格式＞疑问代词＝其他。此外，根据表３我们可以把特征的覆盖率作为问句特征对问句分类的贡献程度的另一参考，便有如下排序：语气词＞疑问格式＞疑问代词＞其他。那么基于此，我们可以让贡献大的问句特征优先参与问句判定，而问句特征无法覆盖的问句可以归入形式最多样的是非问，这样问句分类就是在一个有限规则内进行，只要输入一个问句，必定可以输出问句所属的类别。这样就完成了基于形式特征集的有限状态自动机构建准备。
4.3实验结果
由于问句类别包含四类，我们主要从宏观的角度来分析模型随特征数量变化的情况，即通过不同模型分类的Ｆ１值宏平均和微平均分析问句分类整体的优劣（图１、图２）。考虑到在某一特征数量下，存在不同特征组合影响分类结果准确性的情况，我们只选取某一特征数量下模型的最优结果作为比较对象。
从图１、图２可以看出，特征数量与模型的分类效果并不完全成正比，说明只有特定的典型问句特征组合集才利于问句分类。此外，并得出随机森林模型在特征数量为５时，分类模型的Ｆ１值宏平均和微平均达到最高值，分别是0.98和0.99。此时选取的特征分别是Ｆ２、Ｆ３、Ｆ４、Ｆ５、Ｆ６，即语气词“吗、么、嘛”、疑问代词是非问疑问格式、选择问疑问格式以及正反问疑问格式。随后，我们将百度知道的2621条问句作为实验对象，采用有限状态自动机分类和随机森林模型分类的效果如表５所示。
从模型整体效果来看，随机森林的Ｆ１值宏平均和微平均相较有限状态自动机的分类结果提高了0.04和0.03。这一方面说明了有限状态自动机分类的方法对问句分类也有较好的效果，通过特定的问句规则可以有效覆盖大多数问句，但这种方法往往会出现召回率偏低的情况，无法处理一些组合特征；另一方面也说明了随机森林模型在进行问句分类过程中具有更好的分类效果。
从各个问句小类的分类结果来看，特指问的Ｆ１值在两种分类方法中均为最佳，但在是非问、正反问中，有限状态自动机的Ｆ１值却偏差随机森林颇多，表明是非问句、正反问句的判定受形式特征的多样性影响明显，单一的问句特征不足以覆盖大多数此类问句；而对于正反问句来说，有限状态自动机的方法在精确率上高于随机森林模型，说明正反问的问句形式特征对正反问的判定具有较强的作用，但在召回率上低于随机森林模型，与是问情况相同，也体现了正反问形式特征的多样性。
4.4模型错例分析
按照错判的类别分为以下典型几类：
例11：有谁能帮忙解释一下，吴尊拍这张照片的这时候在干吗？
上述句子是特指问句，却被错判为是非问句。究其原因是“干吗”作为疑问代词，词中含有“吗”字，使得模型误以为含有是非问特征词，加之语气词“吗”属于强形式特征，模型会倾向于将问句分类为是非问。
例12：听说有位明星自杀了真的假的？
例13：韩庚什么的，没上09央视春晚吧？
上述句子是是非问句，却被错判为特指问句。这是由于原是非问句缺少明显的是非问形式特征，但却存在疑问代词，使得模型倾向于将原问句判断为特指问。从另一个角度来说，上述问句的疑问代词“什么”并不是疑问点，而是表示虚指。要正确对此类问句分类，必须分清句中的疑问代词是否表示疑问。
例14：可最近心情又是不好，吃药都没作用啦，难道说还是抑郁症？
上述句子是是非问句，却被错判为选择问句。这是由于句中出现了选择问形式特征，但“还是”前后连接的并不是选择的对象。结合前文中选择问句错判的例句，可以发现选择问问句分类精确率较其他问句低，主要是由于连词“还是”作为选择问的典型特征，易与状中结构“还是”混淆，召回率低则是选择问存在不易归纳的问句形式所致。
例15：如何判断经营者决策是否正确？
例16：怎么看哈士奇纯不纯？
05
结论
本文通过分析了问句形式在问句语料筛选和问句分类中的作用，在问句形式自动分类中证明了问句的形式分类本身是一个特征较为明确、规则性较强的问题，使用规则系统也可以获得不差的效果。当形式特征集为语气词“吗、吧、么、嘛”、是非问疑问格式、疑问代词、选择问疑问格式、正反问疑问格式时，问句分类模型的Ｆ１值能达到0.98。
考虑到不同问句形式可以对应不同语用功能的前提，我们认为，在为问句分类时可以增加一个问句形式分类的接口，一方面问句形式自动分类的精度有一定的保障，另一方面可以在这个问句形式分类接口处集中处理所有问句形式的问题，为问题进一步分类提供分类基础。下一步我们将考虑在不同数据集上验证问句形式的分类效果，增强问句形式对分类的泛化能力。
（参考文献略）
今日责编：牟某人返回搜狐，查看更多