WO2020052059A1 - 用于生成信息的方法和装置 - Google Patents
用于生成信息的方法和装置 Download PDFInfo
- Publication number
- WO2020052059A1 WO2020052059A1 PCT/CN2018/115951 CN2018115951W WO2020052059A1 WO 2020052059 A1 WO2020052059 A1 WO 2020052059A1 CN 2018115951 W CN2018115951 W CN 2018115951W WO 2020052059 A1 WO2020052059 A1 WO 2020052059A1
- Authority
- WO
- WIPO (PCT)
- Prior art keywords
- word
- target
- search
- search term
- term
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Ceased
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING OR CALCULATING; COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F40/00—Handling natural language data
- G06F40/20—Natural language analysis
- G06F40/279—Recognition of textual entities
- G06F40/289—Phrasal analysis, e.g. finite state techniques or chunking
Definitions
- an embodiment of the present application provides a method for generating information.
- the method includes: obtaining a target search term set; and for a target search term in the target search term set, determining whether a preset word set includes the same term as the A corresponding term having a pre-established correspondence relationship for the target search term; in response to determining that at least one corresponding term is included, determining the similarity between the corresponding term in the at least one corresponding term and the target search term; A target number of corresponding words are extracted from the corresponding words as a corresponding word set corresponding to the target search word; based on the obtained corresponding word set, at least one search word set is generated.
- At least one sub-set included in the preset word set is obtained according to the following steps in advance: obtaining a target text set; performing word segmentation on the target text in the target text set to obtain a word set; The words in the word set are clustered with synonyms to obtain at least one sub-set. For the sub-set in the at least one sub-set, the similarity between the words included in the sub-set is greater than or equal to a preset similarity threshold.
- FIG. 5 is a schematic structural diagram of an embodiment of an apparatus for generating information according to an embodiment of the present application
- the above-mentioned execution subject may extract a target number of corresponding words from at least one corresponding word in the order of similarity from large to small as a corresponding word set corresponding to the target search word.
- the target number may be a preset number or a number determined according to a number of corresponding words included in at least one corresponding word corresponding to the target search term. For example, when the number of corresponding words included in the at least one corresponding word is greater than or equal to the preset number, the target number is the preset number; otherwise, the target number is the number of corresponding words included in the at least one corresponding word.
- Step 402 For a target search term in the target search term set, determine whether a preset word set includes a corresponding term having a pre-established correspondence relationship with the target search term; and in response to determining that it includes at least one corresponding term, determine at least one corresponding term.
- step 402 is substantially the same as step 202 in the embodiment corresponding to FIG. 2, and details are not described herein again.
- the process 400 of the method for generating information in this embodiment highlights the steps of searching and outputting search results using the generated at least one search term set. . Therefore, the solution described in this embodiment can use the generated search word set to obtain more comprehensive and targeted search results.
- this application provides an embodiment of an apparatus for generating information.
- the apparatus embodiment corresponds to the method embodiment shown in FIG. 2.
- the device can be specifically applied to various electronic devices.
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Health & Medical Sciences (AREA)
- Artificial Intelligence (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Computational Linguistics (AREA)
- General Health & Medical Sciences (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Abstract
一种用于生成信息的方法和装置,该方法包括:获取至少一个搜索词集合(201);对于目标搜索词集合中的目标搜索词,确定预设的词语集合是否包括与该目标搜索词具有预先建立的对应关系的对应词语;响应于确定包括至少一个对应词语,确定至少一个对应词语中的对应词语与该目标搜索词的相似度;按照相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合(202);基于所得到的对应词语集合,生成至少一个搜索词集合(203)。所述方法有助于提高信息搜索的全面性和针对性。
Description
本专利申请要求于2018年9月14日提交的、申请号为201811075006.X、申请人为北京字节跳动网络技术有限公司、发明名称为“用于生成信息的方法和装置”的中国专利申请的优先权,该申请的全文以引用的方式并入本申请中。
本申请实施例涉及计算机技术领域,具体涉及用于生成信息的方法和装置。
目前,当用户在网络中搜索信息时,通常利用用户输入的搜索词进行搜索,搜索结果中包含与搜索词相同或相近的词语。搜索结果的准确性依赖于将用户输入的搜索词与网络中的信息进行匹配时的匹配规则。
发明内容
本申请实施例提出了用于生成信息的方法和装置。
第一方面,本申请实施例提供了一种用于生成信息的方法,该方法包括:获取目标搜索词集合;对于目标搜索词集合中的目标搜索词,确定预设的词语集合是否包括与该目标搜索词具有预先建立的对应关系的对应词语;响应于确定包括至少一个对应词语,确定至少一个对应词语中的对应词语与该目标搜索词的相似度;按照相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合;基于所得到的对应词语集合,生成至少一个搜索词集合。
在一些实施例中,基于所得到的对应词语集合,生成至少一个搜 索词集合之后,该方法还包括:对于至少一个搜索词集合中的搜索词集合,利用该搜索词集合包括的搜索词进行信息搜索,得到搜索结果及输出。
在一些实施例中,目标搜索词集合是对用户输入的搜索语句进行切词后得到的词语的集合。
在一些实施例中,预设的词语集合包括至少一个子集合;以及确定预设的词语集合是否包括与该目标搜索词具有预先建立的对应关系的对应词语,包括:确定至少一个子集合中是否存在包括该目标搜索词的子集合;响应于确定存在,确定包括该目标搜索词的子集合中的、除该目标搜索词以外的其他词语为与该目标搜索词对应的对应词语。
在一些实施例中,预设的词语集合包括的至少一个子集合预先按照如下步骤得到:获取目标文本集合;对目标文本集合中的目标文本进行切词,得到词语集合;对切词后得到的词语集合中的词语进行近义词聚类,得到至少一个子集合,其中,对于至少一个子集合中的子集合,该子集合包括的词语两两之间的相似度大于等于预设的相似度阈值。
在一些实施例中,预设的词语集合包括的至少一个子集合预先按照如下步骤得到:获取原始搜索词集合;对于原始搜索词集合中的原始搜索词,将该原始搜索词输入预设的搜索引擎,得到至少一条搜索结果;从至少一条搜索结果中,提取具有设定特征的词语作为目标词语;基于所提取的目标词语和该原始搜索词,生成词语集合包括的子集合。
第二方面,本申请实施例提供了一种用于生成信息的装置,该装置包括:获取单元,被配置成获取目标搜索词集合;提取单元,被配置成对于目标搜索词集合中的目标搜索词,确定预设的词语集合是否包括与该目标搜索词具有预先建立的对应关系的对应词语;响应于确定包括至少一个对应词语,确定至少一个对应词语中的对应词语与该目标搜索词的相似度;按照相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合;生成单元,被配置成基于所得到的对应词语集合,生成至少一个搜索 词集合。
在一些实施例中,该装置还包括:搜索单元,被配置成对于至少一个搜索词集合中的搜索词集合,利用该搜索词集合包括的搜索词进行信息搜索,得到搜索结果及输出。
在一些实施例中,目标搜索词集合是对用户输入的搜索语句进行切词后得到的词语的集合。
在一些实施例中,预设的词语集合包括至少一个子集合;以及提取单元包括:第一确定模块,被配置成确定至少一个子集合中是否存在包括该目标搜索词的子集合;第二确定模块,被配置成响应于确定存在,确定包括该目标搜索词的子集合中的、除该目标搜索词以外的其他词语为与该目标搜索词对应的对应词语。
在一些实施例中,预设的词语集合包括的至少一个子集合预先按照如下步骤得到:获取目标文本集合;对目标文本集合中的目标文本进行切词,得到词语集合;对切词后得到的词语集合中的词语进行近义词聚类,得到至少一个子集合,其中,对于至少一个子集合中的子集合,该子集合包括的词语两两之间的相似度大于等于预设的相似度阈值。
在一些实施例中,预设的词语集合包括的至少一个子集合预先按照如下步骤得到:获取原始搜索词集合;对于原始搜索词集合中的原始搜索词,将该原始搜索词输入预设的搜索引擎,得到至少一条搜索结果;从至少一条搜索结果中,提取具有设定特征的词语作为目标词语;基于所提取的目标词语和该原始搜索词,生成词语集合包括的子集合。
第三方面,本申请实施例提供了一种服务器,该服务器包括:一个或多个处理器;存储装置,其上存储有一个或多个程序;当一个或多个程序被一个或多个处理器执行,使得一个或多个处理器实现如第一方面中任一实现方式描述的方法。
第四方面,本申请实施例提供了一种计算机可读介质,其上存储有计算机程序,该计算机程序被处理器执行时实现如第一方面中任一实现方式描述的方法。
本申请实施例提供的用于生成信息的方法和装置,通过获取目标搜索词集合,然后对于目标搜索词集合中的目标搜索词,从预设的词语集合中确定与该目标搜索词对应的至少一个对应词语,并且按照对应词语与该目标搜索词的相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合,最后基于所得到的各个对应词语集合,生成至少一个搜索词集合,从而可以根据目标搜索词集合,生成更多的搜索词集合,有助于提高信息搜索的全面性和针对性。
通过阅读参照以下附图所作的对非限制性实施例所作的详细描述,本申请的其它特征、目的和优点将会变得更明显:
图1是本申请的一个实施例可以应用于其中的示例性系统架构图;
图2是根据本申请实施例的用于生成信息的方法的一个实施例的流程图;
图3是根据本申请实施例的用于生成信息的方法的一个应用场景的示意图;
图4是根据本申请实施例的用于生成信息的方法的又一个实施例的流程图;
图5是根据本申请实施例的用于生成信息的装置的一个实施例的结构示意图;
图6是适于用来实现本申请实施例的服务器的计算机系统的结构示意图。
下面结合附图和实施例对本申请作进一步的详细说明。可以理解的是,此处所描述的具体实施例仅仅用于解释相关发明,而非对该发明的限定。另外还需要说明的是,为了便于描述,附图中仅示出了与有关发明相关的部分。
需要说明的是,在不冲突的情况下,本申请中的实施例及实施例 中的特征可以相互组合。下面将参考附图并结合实施例来详细说明本申请。
图1示出了可以应用本申请实施例的用于生成信息的方法或用于生成信息的装置的示例性系统架构100。
如图1所示,系统架构100可以包括终端设备101、102、103,网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。
用户可以使用终端设备101、102、103通过网络104与服务器105交互,以接收或发送消息等。终端设备101、102、103上可以安装有各种通讯客户端应用,例如搜索类应用、网页浏览器应用、购物类应用等。
终端设备101、102、103可以是硬件,也可以是软件。当终端设备101、102、103为硬件时,可以是各种电子设备,包括但不限于智能手机、平板电脑、电子书阅读器、MP3播放器(Moving Picture Experts Group Audio Layer III,动态影像专家压缩标准音频层面3)、MP4(Moving Picture Experts Group Audio Layer IV,动态影像专家压缩标准音频层面4)播放器、膝上型便携计算机和台式计算机等等。当终端设备101、102、103为软件时,可以安装在上述所列举的电子设备中。其可以实现成多个软件或软件模块(例如用来提供分布式服务的软件或软件模块),也可以实现成单个软件或软件模块。在此不做具体限定。
服务器105可以是提供各种服务的服务器,例如对终端设备101、102、103发送的目标搜索词集合进行处理的后台信息处理服务器。后台信息处理服务器可以对获取的目标搜索词集合进行处理,并生成处理结果(例如至少一个搜索词集合)。
需要说明的是,本申请实施例所提供的用于生成信息的方法一般由服务器105执行,相应地,用于生成信息的装置一般设置于服务器105中。
需要说明的是,服务器可以是硬件,也可以是软件。当服务器为硬件时,可以实现成多个服务器组成的分布式服务器集群,也可以实 现成单个服务器。当服务器为软件时,可以实现成多个软件或软件模块(例如用来提供分布式服务的软件或软件模块),也可以实现成单个软件或软件模块。在此不做具体限定。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
继续参考图2,示出了根据本申请的用于生成信息的方法的一个实施例的流程200。该用于生成信息的方法,包括以下步骤:
步骤201,获取目标搜索词集合。
在本实施例中,用于生成信息的方法的执行主体(例如图1所示的服务器)可以通过有线连接方式或者无线连接方式从远程或从本地获取目标搜索词集合。其中,目标搜索词集合可以是待利用其进行信息搜索的词语的集合。例如,目标搜索词集合可以是用户使用终端设备(例如图1所示的终端设备)输入的、发送给上述执行主体的用于搜索信息的词语的集合。
在本实施例的一些可选的实现方式中,目标搜索词集合可以是对用户输入的搜索语句进行切词后得到的词语的集合。具体地,用户可以使用如图1所示的终端设备输入搜索语句,并将搜索语句发送到上述执行主体,上述执行主体可以按照现有的对语句进行切词的方法(例如最大正向匹配法、N-gram模型方法、隐马尔科夫模型方法等),对搜索语句进行切词,得到目标搜索词集合。
步骤202,对于目标搜索词集合中的目标搜索词,确定预设的词语集合是否包括与该目标搜索词具有预先建立的对应关系的对应词语;响应于确定包括至少一个对应词语,确定至少一个对应词语中的对应词语与该目标搜索词的相似度;按照相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合。
在本实施例中,对于目标搜索词集合中的目标搜索词,上述执行主体可以执行如下步骤:
步骤2021,确定预设的词语集合是否包括与该目标搜索词具有预 先建立的对应关系的对应词语。
具体地,上述词语集合可以预先设置在上述执行主体中,也可以预先设置在与上述执行主体通信连接的其他电子设备中。目标搜索词和对应词语的对应关系可以预先通过各种方式建立。例如,可以通过预先建立的二维表格的方式来表征目标搜索词和对应词语的对应关系,还可以通过键(key)值(value)对、链表等形式预先建立目标搜索词和对应词语的对应关系。
在本实施例的一些可选的实现方式中,上述预设的词语集合包括至少一个子集合。上述执行主体可以按照如下步骤确定词语集合是否包括与该目标搜索词具有预先建立的对应关系的对应词语:
首先,确定预设的词语集合包括的至少一个子集合中是否存在包括该目标搜索词的子集合。然后,响应于确定存在,确定包括该目标搜索词的子集合中的、除该目标搜索词以外的其他词语为与该目标搜索词对应的对应词语。
通常,子集合中的词语两两之间的相似度可以大于等于预设的相似度阈值,即子集合中的词语是同义词或近义词。作为示例,假设目标搜索词为“小孩”,某子集合包括如下词语:儿童,小孩,少年,孩子。则该子集合中的词语“儿童”、“少年”、“孩子”为与目标搜索词“小孩”的对应词语。需要说明的是,子集合中的词语两两之间的相似度可以是上述执行主体或其他电子设备预先利用现有的各种计算词语之间的相似度的算法计算得到的。
在本实施例的一些可选的实现方式中,上述预设的词语集合包括的至少一个子集合可以由上述执行主体或其他电子设备预先按照如下步骤得到:
首先,获取目标文本集合。其中,目标文本可以是待对其进行切词的文本。目标文本集合可以存储在上述执行主体中,也可以存储在与上述执行主体通信连接的其他电子设备中。需要说明的是,目标文本集合中的目标文本可以单独存储在一台电子设备中,目标文本集合中的目标文本也可以存储在由多台电子设备组成的电子设备集群中。
然后,对目标文本集合中的目标文本进行切词,得到词语集合。 具体地,上述执行主体或其他电子设备可以按照现有的各种对语句进行切词的方法,对目标文本包括的各条语句进行切词,得到词语集合。
最后,对切词后得到的词语集合中的词语进行近义词聚类,得到至少一个子集合。其中,对于至少一个子集合中的子集合,该子集合包括的词语两两之间的相似度大于等于预设的相似度阈值。具体地,上述执行主体或其他电子设备可以利用现有的近义词聚类算法,对词语集合中的词语进行近义词聚类,得到至少一个子集合。作为示例,上述执行主体或其他电子设备可以利用现有的词向量模型(例如word2vec、sense2vec等),得到词语集合中的每个词语的词向量。再利用对词向量进行聚类的算法,对各个词向量进行聚类(例如k-means算法、决策树算法等),其中的每个聚类中包括的词向量两两之间的相似度(例如相似度可以为向量之间的欧氏距离、余弦距离等)大于等于预设的相似度阈值。从而将得到的每个聚类中包括的词向量表征的词语的集合确定为词语集合包括的子集合。
在本实施例的一些可选的实现方式中,预设的词语集合包括的至少一个子集合还可以由上述执行主体或其他电子设备预先按照如下步骤得到:
首先,获取原始搜索词集合。其中,原始搜索词可以技术人员预先输入的搜索词。
然后,对于原始搜索词集合中的原始搜索词,执行如下各子步骤:
子步骤一,将该原始搜索词输入预设的搜索引擎,得到至少一条搜索结果。其中,上述搜索引擎(Search Engine)是指根据一定的策略、运用特定的计算机程序从互联网上搜集信息,在对信息进行组织和处理后,为用户提供检索服务,将用户检索相关的信息展示给用户的系统。上述预设的搜索引擎可以是现有的各种搜索引擎。上述至少一条搜索结果中的搜索结果可以包括文本,文本可以包括题目、正文等内容。
子步骤二,从至少一条搜索结果中,提取具有设定特征的词语作为目标词语。具体地,上述设定特征可以是词语具有的各种特征,包括但不限于以下至少一种:字体颜色为预设颜色、文字突出显示的背 景颜色为预设颜色等。作为示例,搜索结果中的文字可以包括红色字体的文字,红色字体的文字通常是与搜索词的词义相同或相近的词语。上述执行主体或其他电子设备可以识别搜索结果中的文字颜色等特征,从而提取出设定特征的词语作为目标词语。
子步骤三,基于所提取的目标词语和该原始搜索词,生成词语集合包括的子集合。作为示例,提取的目标词语的数量可以是至少一个,上述执行主体或其他电子设备可以将该原始搜索词和所提取的目标词语组成子集合。作为另一示例,上述执行主体或其他电子设备可以计算该原始搜索词与各个目标词语的相似度,将大于等于预设的相似度阈值的相似度对应的目标词语与该原始搜索词组合成子集合。
步骤2022,响应于确定包括至少一个对应词语,确定至少一个对应词语中的对应词语与该目标搜索词的相似度。
具体地,上述执行主体可以按照现有的各种计算词语之间的相似度的算法(例如编辑距离(Levenshtein Distance)算法、基于向量空间模型(Vector Space Model,VSM)的余弦距离算法等),确定至少一个对应词语中的对应词语与该目标搜索词的相似度。
步骤2023,按照相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合。
具体地,上述执行主体可以按照相似度由大到小的顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合。其中,目标数量可以是预先设置的数量,也可以是根据该目标搜索词对应的至少一个对应词语中包括的对应词语的数量确定的数量。例如,当至少一个对应词语中包括的对应词语的数量大于等于预设数量时,目标数量即为预设数量;否则,目标数量为至少一个对应词语中包括的对应词语的数量。
实践中,与目标搜索词对应的对应词语可以是目标搜索词的同义词或近义词。按照相似度大小顺序提取出的对应词语集合可以有助于针对性地生成最终的搜索词集合。
步骤203,基于所得到的对应词语集合,生成至少一个搜索词集合。
在本实施例中,上述执行主体可以基于所得到的对应词语集合,生成至少一个搜索词集合。作为示例,上述执行主体可以将所得到的各个对应词语集合与目标搜索词集合组合为搜索词集合。
作为另一示例,上述执行主体可以从所得到的各个对应词语集合中,按照对应词语与对应的目标搜索词的相似度的大小顺序分别提取一个对应词语,或者随机地分别提取一个对应词语,将所提取的各个对应词语与目标搜索词集合中的、不具有对应的对应词语的目标搜索词组合为搜索词集合。
继续参见图3,图3是根据本实施例的用于生成信息的方法的应用场景的一个示意图。在图3的应用场景中,服务器301首先获取到用户利用终端设备302输入的目标搜索词集合303(例如包括目标搜索词“男孩”、“尿不湿”)。然后,服务器301从预设的词语集合304中,确定目标搜索词“男孩”对应的至少一个对应词语3041包括:“儿童”、“宝宝”、“少年”;确定目标搜索词“尿不湿”对应的至少一个对应词语3042包括:“纸尿裤”、“尿芥子”。再然后,服务器301从每个目标搜索词对应的至少一个对应词语中,按照对应词语与对应的目标搜索词的相似度由大到小的顺序,提取两个对应词语作为搜索词对应的对应词语集合。其中,目标搜索词“男孩”对应的对应词语集合305包括:“儿童”、“宝宝”,目标搜索词“尿不湿”对应的对应词语集合306包括:“纸尿裤”、“尿芥子”。接着,服务器301基于所得到的对应词语集合305和306,生成两个搜索词集合307(例如包括“儿童”、“纸尿裤”)、308(例如“宝宝”、“尿芥子”)。
本申请的上述实施例提供的方法,通过获取目标搜索词集合,然后对于目标搜索词集合中的目标搜索词,从预设的词语集合中确定与该目标搜索词对应的至少一个对应词语,并且按照对应词语与该目标搜索词的相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合,最后基于所得到的各个对应词语集合,生成至少一个搜索词集合,从而可以根据目标搜索词集合,生成更多的搜索词集合,有助于提高信息搜索的全面性和针对性。
进一步参考图4,其示出了用于生成信息的方法的又一个实施例的流程400。该用于生成信息的方法的流程400,包括以下步骤:
步骤401,获取目标搜索词集合。
在本实施例中,步骤401与图2对应实施例中的步骤201基本一致,这里不再赘述。
步骤402,对于目标搜索词集合中的目标搜索词,确定预设的词语集合是否包括与该目标搜索词具有预先建立的对应关系的对应词语;响应于确定包括至少一个对应词语,确定至少一个对应词语中的对应词语与该目标搜索词的相似度;按照相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合。
在本实施例中,步骤402与图2对应实施例中的步骤202基本一致,这里不再赘述。
步骤403,基于所得到的对应词语集合,生成至少一个搜索词集合。
在本实施例中,步骤403与图2对应实施例中的步骤203基本一致,这里不再赘述。
步骤404,对于至少一个搜索词集合中的搜索词集合,利用该搜索词集合包括的搜索词进行信息搜索,得到搜索结果及输出。
在本实施例中,对于步骤403中得到的至少一个搜索词集合中的搜索词集合,用于生成信息的方法的执行主体(例如图1所示的服务器)可以利用该搜索词集合包括的搜索词进行信息搜索,得到搜索结果及输出。
具体地,上述执行主体可以将搜索词集合中的搜索词输入预设的搜索引擎中,得到搜索结果。或者,上述执行主体可以利用搜索词集合中的搜索词,在预设的信息集合(例如某网站包括的信息的集合)中进行信息搜索,得到搜索结果。其中,搜索结果可以包括但不限于以下至少一种:图片、文字、链接等。搜索结果可以以各种方式输出,例如可以将搜索结果显示在与上述执行主体连接的显示器上,或者可 以将搜索结果发送到与上述执行主体通信连接的终端设备上。
需要说明的是,搜索词集合对应的搜索结果的数量可以是技术人员预先设置的数量,这样可以使搜索结果更加具有针对性。
从图4中可以看出,与图2对应的实施例相比,本实施例中的用于生成信息的方法的流程400突出了利用生成的至少一个搜索词集合进行搜索及输出搜索结果的步骤。由此,本实施例描述的方案可以利用生成的搜索词集合,得到更全面以及更有针对性的搜索结果。
进一步参考图5,作为对上述各图所示方法的实现,本申请提供了一种用于生成信息的装置的一个实施例,该装置实施例与图2所示的方法实施例相对应,该装置具体可以应用于各种电子设备中。
如图5所示,本实施例的用于生成信息的装置500包括:获取单元501,被配置成获取目标搜索词集合;提取单元502,被配置成对于目标搜索词集合中的目标搜索词,确定预设的词语集合是否包括与该目标搜索词具有预先建立的对应关系的对应词语;响应于确定包括至少一个对应词语,确定至少一个对应词语中的对应词语与该目标搜索词的相似度;按照相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合;生成单元503,被配置成基于所得到的对应词语集合,生成至少一个搜索词集合。
在本实施例中,获取单元501可以通过有线连接方式或者无线连接方式从远程或从本地获取目标搜索词集合。其中,目标搜索词集合可以是待利用其进行信息搜索的词语的集合。例如,目标搜索词集合可以是用户使用终端设备(例如图1所示的终端设备)输入的、发送给上述装置500的用于搜索信息的词语的集合。
在本实施例中,对于目标搜索词集合中的目标搜索词,上述提取单元502可以执行如下步骤:
步骤5021,确定预设的词语集合是否包括与该目标搜索词具有预先建立的对应关系的对应词语。
具体地,上述词语集合可以预先设置在上述装置500中,也可以 预先设置在与上述装置500通信连接的其他电子设备中。目标搜索词和对应词语的对应关系可以预先通过各种方式建立。例如,可以通过预先建立的二维表格的方式来表征目标搜索词和对应词语的对应关系,还可以通过键(key)值(value)对、链表等形式预先建立目标搜索词和对应词语的对应关系的对应关系。
步骤5022,响应于确定包括至少一个对应词语,确定至少一个对应词语中的对应词语与该目标搜索词的相似度。
具体地,上述提取单元502可以按照现有的各种计算词语之间的相似度的算法(例如编辑距离(Levenshtein Distance)算法、基于向量空间模型(Vector Space Model,VSM)的余弦距离算法等),确定至少一个对应词语中的对应词语与该目标搜索词的相似度。
步骤5023,按照相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合。
具体地,上述执行主体可以按照相似度由大到小的顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合。其中,目标数量可以是预先设置的数量,也可以是根据该目标搜索词对应的至少一个对应词语中包括的对应词语的数量确定的数量。例如,当至少一个对应词语中包括的对应词语的数量大于等于预设数量时,目标数量即为预设数量;否则,目标数量为至少一个对应词语中包括的对应词语的数量。
实践中,与目标搜索词对应的对应词语可以是目标搜索词的同义词或近义词。按照相似度大小顺序提取出的对应词语集合可以有助于针对性地生成最终的搜索词集合。
在本实施例中,生成单元503可以基于所得到的对应词语集合,生成至少一个搜索词集合。作为示例,上述生成单元503可以将所得到的各个对应词语集合与目标搜索词集合组合为搜索词集合。
作为另一示例,上述生成单元503可以从所得到的各个对应词语集合中,按照对应词语与对应的目标搜索词的相似度的大小顺序,或者随机地分别提取一个对应词语,将所提取的各个对应词语与目标搜索词集合中的、不具有对应的对应词语的目标搜索词组合为搜索词集 合。
在本实施例的一些可选的实现方式中,该装置500还可以包括:搜索单元(图中未示出),被配置成对于至少一个搜索词集合中的搜索词集合,利用该搜索词集合包括的搜索词进行信息搜索,得到搜索结果及输出。
在本实施例的一些可选的实现方式中,目标搜索词集合是对用户输入的搜索语句进行切词后得到的词语的集合。
在本实施例的一些可选的实现方式中,预设的词语集合包括至少一个子集合;以及提取单元502可以包括:第一确定模块(图中未示出),被配置成确定至少一个子集合中是否存在包括该目标搜索词的子集合;第二确定模块(图中未示出),被配置成响应于确定存在,确定包括该目标搜索词的子集合中的、除该目标搜索词以外的其他词语为与该目标搜索词对应的对应词语。
在本实施例的一些可选的实现方式中,预设的词语集合包括的至少一个子集合可以预先按照如下步骤得到:获取目标文本集合;对目标文本集合中的目标文本进行切词,得到词语集合;对切词后得到的词语集合中的词语进行近义词聚类,得到至少一个子集合,其中,对于至少一个子集合中的子集合,该子集合包括的词语两两之间的相似度大于等于预设的相似度阈值。
在本实施例的一些可选的实现方式中,预设的词语集合包括的至少一个子集合可以预先按照如下步骤得到:获取原始搜索词集合;对于原始搜索词集合中的原始搜索词,将该原始搜索词输入预设的搜索引擎,得到至少一条搜索结果;从至少一条搜索结果中,提取具有设定特征的词语作为目标词语;基于所提取的目标词语和该原始搜索词,生成词语集合包括的子集合。
本申请的上述实施例提供的装置,通过获取目标搜索词集合,然后对于目标搜索词集合中的目标搜索词,从预设的词语集合中确定与该目标搜索词对应的至少一个对应词语,并且按照对应词语与该目标搜索词的相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合,最后基于所得到 的各个对应词语集合,生成至少一个搜索词集合,从而可以根据目标搜索词集合,生成更多的搜索词集合,有助于提高信息搜索的全面性和针对性。
下面参考图6,其示出了适于用来实现本申请实施例的服务器的计算机系统600的结构示意图。图6示出的服务器仅仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
如图6所示,计算机系统600包括中央处理单元(CPU)601,其可以根据存储在只读存储器(ROM)602中的程序或者从存储部分608加载到随机访问存储器(RAM)603中的程序而执行各种适当的动作和处理。在RAM 603中,还存储有系统600操作所需的各种程序和数据。CPU 601、ROM 602以及RAM 603通过总线604彼此相连。输入/输出(I/O)接口605也连接至总线604。
以下部件连接至I/O接口605:包括键盘、鼠标等的输入部分606;包括诸如液晶显示器(LCD)等以及扬声器等的输出部分607;包括硬盘等的存储部分608;以及包括诸如LAN卡、调制解调器等的网络接口卡的通信部分609。通信部分609经由诸如因特网的网络执行通信处理。驱动器610也根据需要连接至I/O接口605。可拆卸介质611,诸如磁盘、光盘、磁光盘、半导体存储器等等,根据需要安装在驱动器610上,以便于从其上读出的计算机程序根据需要被安装入存储部分608。
特别地,根据本公开的实施例,上文参考流程图描述的过程可以被实现为计算机软件程序。例如,本公开的实施例包括一种计算机程序产品,其包括承载在计算机可读介质上的计算机程序,该计算机程序包含用于执行流程图所示的方法的程序代码。在这样的实施例中,该计算机程序可以通过通信部分609从网络上被下载和安装,和/或从可拆卸介质611被安装。在该计算机程序被中央处理单元(CPU)601执行时,执行本申请的方法中限定的上述功能。
需要说明的是,本申请所述的计算机可读介质可以是计算机可读信号介质或者计算机可读介质或者是上述两者的任意组合。计算机可 读介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本申请中,计算机可读介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本申请中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、电线、光缆、RF等等,或者上述的任意合适的组合。
可以以一种或多种程序设计语言或其组合来编写用于执行本申请的操作的计算机程序代码,所述程序设计语言包括面向对象的程序设计语言—诸如Java、Smalltalk、C++,还包括常规的过程式程序设计语言—诸如“C”语言或类似的程序设计语言。程序代码可以完全地在用户计算机上执行、部分地在用户计算机上执行、作为一个独立的软件包执行、部分在用户计算机上部分在远程计算机上执行、或者完全在远程计算机或服务器上执行。在涉及远程计算机的情形中,远程计算机可以通过任意种类的网络——包括局域网(LAN)或广域网(WAN)—连接到用户计算机,或者,可以连接到外部计算机(例如利用因特网服务提供商来通过因特网连接)。
附图中的流程图和框图,图示了按照本申请各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码 的一部分,该模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图和/或流程图中的每个方框、以及框图和/或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
描述于本申请实施例中所涉及到的单元可以通过软件的方式实现,也可以通过硬件的方式来实现。所描述的单元也可以设置在处理器中,例如,可以描述为:一种处理器包括获取单元、提取单元、生成单元503。其中,这些单元的名称在某种情况下并不构成对该单元本身的限定,例如,获取单元还可以被描述为“获取目标搜索词集合的单元”。
作为另一方面,本申请还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的服务器中所包含的;也可以是单独存在,而未装配入该服务器中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被该服务器执行时,使得该服务器:获取目标搜索词集合;对于目标搜索词集合中的目标搜索词,确定预设的词语集合是否包括与该目标搜索词具有预先建立的对应关系的对应词语;响应于确定包括至少一个对应词语,确定至少一个对应词语中的对应词语与该目标搜索词的相似度;按照相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合;基于所得到的对应词语集合,生成至少一个搜索词集合。
以上描述仅为本申请的较佳实施例以及对所运用技术原理的说明。本领域技术人员应当理解,本申请中所涉及的发明范围,并不限于上述技术特征的特定组合而成的技术方案,同时也应涵盖在不脱离上述发明构思的情况下,由上述技术特征或其等同特征进行任意组合而形成的其它技术方案。例如上述特征与本申请中公开的(但不限于)具有类似功能的技术特征进行互相替换而形成的技术方案。
Claims (14)
- 一种用于生成信息的方法,包括:获取目标搜索词集合;对于所述目标搜索词集合中的目标搜索词,确定预设的词语集合是否包括与该目标搜索词具有预先建立的对应关系的对应词语;响应于确定包括至少一个对应词语,确定至少一个对应词语中的对应词语与该目标搜索词的相似度;按照相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合;基于所得到的对应词语集合,生成至少一个搜索词集合。
- 根据权利要求1所述的方法,其中,在所述基于所得到的对应词语集合,生成至少一个搜索词集合之后,所述方法还包括:对于所述至少一个搜索词集合中的搜索词集合,利用该搜索词集合包括的搜索词进行信息搜索,得到搜索结果及输出。
- 根据权利要求1所述的方法,其中,所述目标搜索词集合是对用户输入的搜索语句进行切词后得到的词语的集合。
- 根据权利要求1-3之一所述的方法,其中,所述预设的词语集合包括至少一个子集合;以及所述确定预设的词语集合是否包括与该目标搜索词具有预先建立的对应关系的对应词语,包括:确定所述至少一个子集合中是否存在包括该目标搜索词的子集合;响应于确定存在,确定包括该目标搜索词的子集合中的、除该目标搜索词以外的其他词语为与该目标搜索词对应的对应词语。
- 根据权利要求4所述的方法,其中,所述预设的词语集合包括的至少一个子集合预先按照如下步骤得到:获取目标文本集合;对所述目标文本集合中的目标文本进行切词,得到词语集合;对切词后得到的词语集合中的词语进行近义词聚类,得到至少一个子集合,其中,对于所述至少一个子集合中的子集合,该子集合包括的词语两两之间的相似度大于等于预设的相似度阈值。
- 根据权利要求4所述的方法,其中,所述预设的词语集合包括的至少一个子集合预先按照如下步骤得到:获取原始搜索词集合;对于所述原始搜索词集合中的原始搜索词,将该原始搜索词输入预设的搜索引擎,得到至少一条搜索结果;从所述至少一条搜索结果中,提取具有设定特征的词语作为目标词语;基于所提取的目标词语和该原始搜索词,生成所述词语集合包括的子集合。
- 一种用于生成信息的装置,包括:获取单元,被配置成获取目标搜索词集合;提取单元,被配置成对于所述目标搜索词集合中的目标搜索词,确定预设的词语集合是否包括与该目标搜索词具有预先建立的对应关系的对应词语;响应于确定包括至少一个对应词语,确定至少一个对应词语中的对应词语与该目标搜索词的相似度;按照相似度的大小顺序,从至少一个对应词语中提取目标数量个对应词语作为与该目标搜索词对应的对应词语集合;生成单元,被配置成基于所得到的对应词语集合,生成至少一个搜索词集合。
- 根据权利要求7所述的装置,其中,所述装置还包括:搜索单元,被配置成对于所述至少一个搜索词集合中的搜索词集合,利用该搜索词集合包括的搜索词进行信息搜索,得到搜索结果及输出。
- 根据权利要求7所述的装置,其中,所述目标搜索词集合是对用户输入的搜索语句进行切词后得到的词语的集合。
- 根据权利要求7-9之一所述的装置,其中,所述预设的词语集合包括至少一个子集合;以及所述提取单元包括:第一确定模块,被配置成确定所述至少一个子集合中是否存在包括该目标搜索词的子集合;第二确定模块,被配置成响应于确定存在,确定包括该目标搜索词的子集合中的、除该目标搜索词以外的其他词语为与该目标搜索词对应的对应词语。
- 根据权利要求10所述的装置,其中,所述预设的词语集合包括的至少一个子集合预先按照如下步骤得到:获取目标文本集合;对所述目标文本集合中的目标文本进行切词,得到词语集合;对切词后得到的词语集合中的词语进行近义词聚类,得到至少一个子集合,其中,对于所述至少一个子集合中的子集合,该子集合包括的词语两两之间的相似度大于等于预设的相似度阈值。
- 根据权利要求10所述的装置,其中,所述预设的词语集合包括的至少一个子集合预先按照如下步骤得到:获取原始搜索词集合;对于所述原始搜索词集合中的原始搜索词,将该原始搜索词输入预设的搜索引擎,得到至少一条搜索结果;从所述至少一条搜索结果中,提取具有设定特征的词语作为目标词语;基于所提取的目标词语和该原始搜索词,生成所述词语集合包括的子集合。
- 一种服务器,包括:一个或多个处理器;存储装置,其上存储有一个或多个程序,当所述一个或多个程序被所述一个或多个处理器执行,使得所述一个或多个处理器实现如权利要求1-6中任一所述的方法。
- 一种计算机可读介质,其上存储有计算机程序,其中,该程序被处理器执行时实现如权利要求1-6中任一所述的方法。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201811075006.XA CN109213916A (zh) | 2018-09-14 | 2018-09-14 | 用于生成信息的方法和装置 |
| CN201811075006.X | 2018-09-14 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| WO2020052059A1 true WO2020052059A1 (zh) | 2020-03-19 |
Family
ID=64984182
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| PCT/CN2018/115951 Ceased WO2020052059A1 (zh) | 2018-09-14 | 2018-11-16 | 用于生成信息的方法和装置 |
Country Status (2)
| Country | Link |
|---|---|
| CN (1) | CN109213916A (zh) |
| WO (1) | WO2020052059A1 (zh) |
Families Citing this family (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN112307281B (zh) * | 2019-07-25 | 2024-10-29 | 北京搜狗科技发展有限公司 | 一种实体推荐方法及装置 |
| CN110688837B (zh) * | 2019-09-27 | 2023-10-31 | 北京百度网讯科技有限公司 | 数据处理的方法及装置 |
| CN111078849B (zh) * | 2019-12-02 | 2023-07-25 | 百度在线网络技术(北京)有限公司 | 用于输出信息的方法和装置 |
| CN112347365B (zh) * | 2020-11-25 | 2025-02-07 | 腾讯科技(深圳)有限公司 | 一种目标搜索信息确定方法及装置 |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102855252A (zh) * | 2011-06-30 | 2013-01-02 | 北京百度网讯科技有限公司 | 一种基于需求的数据检索方法和装置 |
| US20140358879A1 (en) * | 2012-05-31 | 2014-12-04 | International Business Machines Corporation | Search engine suggestion |
| CN107544982A (zh) * | 2016-06-24 | 2018-01-05 | 中兴通讯股份有限公司 | 文本信息处理方法、装置及终端 |
| CN108491387A (zh) * | 2018-03-20 | 2018-09-04 | 百度在线网络技术(北京)有限公司 | 用于输出信息的方法和装置 |
Family Cites Families (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20180101606A1 (en) * | 2016-10-07 | 2018-04-12 | Abel Torres Montoya | Method and system for searching for relevant items in a collection of documents given user defined documents |
| CN106547732A (zh) * | 2016-10-14 | 2017-03-29 | 深圳中兴网信科技有限公司 | 近义词识别方法和近义词识别系统 |
| CN107451126B (zh) * | 2017-08-21 | 2020-07-28 | 广州多益网络股份有限公司 | 一种近义词筛选方法及系统 |
| CN108509474B (zh) * | 2017-09-15 | 2022-01-07 | 腾讯科技(深圳)有限公司 | 搜索信息的同义词扩展方法及装置 |
| CN107766498B (zh) * | 2017-10-19 | 2022-01-07 | 北京百度网讯科技有限公司 | 用于生成信息的方法和装置 |
-
2018
- 2018-09-14 CN CN201811075006.XA patent/CN109213916A/zh active Pending
- 2018-11-16 WO PCT/CN2018/115951 patent/WO2020052059A1/zh not_active Ceased
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102855252A (zh) * | 2011-06-30 | 2013-01-02 | 北京百度网讯科技有限公司 | 一种基于需求的数据检索方法和装置 |
| US20140358879A1 (en) * | 2012-05-31 | 2014-12-04 | International Business Machines Corporation | Search engine suggestion |
| CN107544982A (zh) * | 2016-06-24 | 2018-01-05 | 中兴通讯股份有限公司 | 文本信息处理方法、装置及终端 |
| CN108491387A (zh) * | 2018-03-20 | 2018-09-04 | 百度在线网络技术(北京)有限公司 | 用于输出信息的方法和装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| CN109213916A (zh) | 2019-01-15 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106383875B (zh) | 基于人工智能的人机交互方法和装置 | |
| CN111522927B (zh) | 基于知识图谱的实体查询方法和装置 | |
| CN107679039A (zh) | 用于确定语句意图的方法和装置 | |
| CN107944025A (zh) | 信息推送方法和装置 | |
| US10108602B2 (en) | Dynamic portmanteau word semantic identification | |
| US20180329985A1 (en) | Method and Apparatus for Compressing Topic Model | |
| WO2020103899A1 (zh) | 用于生成图文信息的方法和用于生成图像数据库的方法 | |
| CN107526718B (zh) | 用于生成文本的方法和装置 | |
| CN110263142A (zh) | 用于输出信息的方法和装置 | |
| US10572601B2 (en) | Unsupervised template extraction | |
| WO2020042377A1 (zh) | 用于输出信息的方法和装置 | |
| US9830316B2 (en) | Content availability for natural language processing tasks | |
| CN117312641A (zh) | 智能获取信息的方法、装置、设备及存储介质 | |
| WO2020052069A1 (zh) | 用于分词的方法和装置 | |
| WO2020052059A1 (zh) | 用于生成信息的方法和装置 | |
| WO2020052061A1 (zh) | 用于处理信息的方法和装置 | |
| US20150169539A1 (en) | Adjusting Time Dependent Terminology in a Question and Answer System | |
| CN112182255A (zh) | 用于存储媒体文件和用于检索媒体文件的方法和装置 | |
| CN114579703A (zh) | 文本搜索意图识别方法、装置、电子设备及存储介质 | |
| CN114298007A (zh) | 一种文本相似度确定方法、装置、设备及介质 | |
| CN110275962A (zh) | 用于输出信息的方法和装置 | |
| JP2023002690A (ja) | セマンティックス認識方法、装置、電子機器及び記憶媒体 | |
| CN108038172A (zh) | 基于人工智能的搜索方法和装置 | |
| CN113343664B (zh) | 图像文本之间的匹配度的确定方法及装置 | |
| WO2020052060A1 (zh) | 用于生成修正语句的方法和装置 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| 121 | Ep: the epo has been informed by wipo that ep was designated in this application |
Ref document number: 18933655 Country of ref document: EP Kind code of ref document: A1 |
|
| NENP | Non-entry into the national phase |
Ref country code: DE |
|
| 32PN | Ep: public notification in the ep bulletin as address of the adressee cannot be established |
Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205 DATED 24/06/2021) |
|
| 122 | Ep: pct application non-entry in european phase |
Ref document number: 18933655 Country of ref document: EP Kind code of ref document: A1 |