最新的研究和领域应用充分表明，预训练语言模型在大规模无监督语料和GPU集群算力的支持下，能够将得到的词和句子的表示迁移到广泛的下游任务上，对于智能咨询核心的问题理解和语义匹配具有重要的支撑意义，对于提高智能咨询系统性能具有重要作用。