专利名称:训练神经网络的方法和装置以及确定稀疏特征向量
的方法
专利类型:发明专利
发明人:李中华,夏迎炬,孙健,王云芝申请号:CN201410009183.3申请日:20140108公开号:CN104765728A公开日:20150708
摘要:本发明涉及对神经网络进行训练的方法和装置以及确定语料库中的词的稀疏特征向量的方法和装置。神经网络包括输入层、隐含层和输出层,输入层表示语料库中的作为当前词的词的原始特征向量,隐含层表示当前词的中间特征向量,输出层表示语料库中的下一词的预测概率。对神经网络进行训练的方法包括:将语料库中的每个词作为当前词,并将当前词的原始特征向量输入到输入层;以及训练神经网络使得下一词的预测概率总体上最高并利用惩罚项使得隐含层的中间特征向量的元素稀疏。
申请人:富士通株式会社
地址:日本神奈川县
国籍:JP
代理机构:北京集佳知识产权代理有限公司
更多信息请下载全文后查看
因篇幅问题不能全部显示,请点此查看更多更全内容