神州泰岳AI小講堂：Ultra-NLP大揭秘

　　Ultra-NLP是神州泰岳人工智能研究院研發(fā)的集機器學(xué)習、統計學(xué)習、深度學(xué)習以及概念語(yǔ)義理解技術(shù)于一體的自然語(yǔ)言處理技術(shù)平臺。該平臺致力于打造一個(gè)業(yè)界持續領(lǐng)先的、完備的自然語(yǔ)言處理體系，以期快速、有效地解決自然語(yǔ)言處理領(lǐng)域中普遍存在的歧義理解、精準分類(lèi)、高純度聚類(lèi)、精確信息提取、關(guān)聯(lián)信息挖掘等難點(diǎn)、痛點(diǎn)問(wèn)題。平臺實(shí)現文本的語(yǔ)義理解和語(yǔ)義量化計算，提供高效的自然語(yǔ)言理解相關(guān)分析算法，包括自動(dòng)分詞、實(shí)體識別、句法分析、文本分類(lèi)、聚類(lèi)、主題分析、歧義理解、自動(dòng)摘要、關(guān)聯(lián)挖掘等。

　　（1）詞語(yǔ)層面：使用HMM、CRF等統計學(xué)習技術(shù)實(shí)現精準的自動(dòng)分詞和發(fā)現新詞的能力。利用概念語(yǔ)義網(wǎng)絡(luò )模型，能夠符號化的表示詞匯的語(yǔ)義，自動(dòng)識別詞語(yǔ)的一詞多義和多詞一義歧義現象，解決讓機器掌握詞匯的語(yǔ)義，并能正確提取句子中蘊含的關(guān)聯(lián)性：同義、上下位、包含關(guān)系等。

　　（2）句子層面：利用語(yǔ)義網(wǎng)絡(luò )來(lái)自動(dòng)識別句子中各概念間的語(yǔ)義關(guān)系，實(shí)現句子語(yǔ)義的歸一化處理，結合基于依存、n-gram、短語(yǔ)語(yǔ)法等語(yǔ)義理解技術(shù)實(shí)現的文法分析以及句子結構分析，精確識別句子變形，深層理解句子表達語(yǔ)義。

　　（3）篇章層面：結合機器學(xué)習、深度學(xué)習以及概念語(yǔ)義網(wǎng)絡(luò )模型，正確分析篇章中上下文語(yǔ)境特征，實(shí)現分類(lèi)、聚類(lèi)、關(guān)鍵信息提取以及句群的切分與合并等篇章級分析能力。

　　Ultra-NLP是神州泰岳人工智能研究院多年的科研成果，提供領(lǐng)先業(yè)界的中文文本分析處理技術(shù)。源于中國傳統語(yǔ)言學(xué)(訓詁學(xué)—義)、人工智能、認知學(xué)、物理學(xué)、信號處理、哲學(xué)等跨學(xué)科的知識(文字學(xué)—形；音韻學(xué)—音)，突破計算語(yǔ)言學(xué)界源于圖靈標準而采用的句法分析和語(yǔ)法分析標準，解決中文并沒(méi)有所謂主謂賓語(yǔ)法的問(wèn)題。

　　Ultra-NLP已經(jīng)在中國工商銀行、中國銀行、新華社等行業(yè)領(lǐng)先機構得到過(guò)廣泛應用，上線(xiàn)產(chǎn)品均得到業(yè)界一致好評。豐富的行業(yè)應用經(jīng)驗有效的保證了產(chǎn)品成熟度。

　　Ultra-NLP配合基于本體模型實(shí)現的DINFO-OEC非結構化數據分析挖掘平臺，對于語(yǔ)義分析功能可以提供更好的模型建設和算法配置能力，實(shí)現高效便捷的非結構化文本語(yǔ)義分析。

　　Ultra-NLP引入Spark分布式計算框架，實(shí)現了算法的分布式計算能力，解決傳統算法單機運行的瓶頸，大大提高算法的可用性和效率。

　　Ultra-NLP集成Tensorflow深度學(xué)習框架，滿(mǎn)足對大規模語(yǔ)料學(xué)習與復雜模型計算能力的需求。

　　Ultra-NLP自主設計組合不同處理類(lèi)型算法，構建能夠直接處理業(yè)務(wù)場(chǎng)景數據的NLP流程化的場(chǎng)景化算法，提供場(chǎng)景化的分析能力。

　　Ultra-NLP提供靈活、易操作的Pipeline算法管道，支持用戶(hù)結合具體業(yè)務(wù)場(chǎng)景需求，自主定制個(gè)性化的NLP流程，實(shí)現個(gè)性化的場(chǎng)景化算法。

　　設計組合場(chǎng)景化的分類(lèi)流程，優(yōu)化流程內部各算法參數，提供效果較好的Pipeline類(lèi)型的場(chǎng)景化分類(lèi)算法（分類(lèi)流程：分詞->向量轉換->特征選擇->權重計算->分類(lèi)器）