NLPIR語義挖掘技術助力建設大數據智能城市

　　隨着信息技術的高速發展、數據庫管理系統的普遍應用，人們積累的數據量急劇增加，大量的信息給人們帶來方便的同時，也帶來了諸如：信息過量難以消化，信息真假難以辨識，信息安全難以保證，信息形式不一致難以統一處理等問題。如何從海量的數據中提取有用的知識成爲當務之急。數據挖掘就是爲順應這種須要應運而生髮展起來的數據處理技術。
　　數據挖掘做爲近年來新興的一門計算機邊緣學科，其在國內外引發了愈來愈多的關注。而且隨着數據挖掘技術的不斷改進和數據挖掘工具的不斷完善，數據挖掘必將在各行各業中獲得普遍的應用。數據挖掘從大量的數據中經過算法搜索隱藏於其中信息的過程。這項以數據庫技術、統計分析、人工智能等爲依託的綜合性運用技術的出現有其必然性和可行性。首先，信息社會的到來對數據的篩選和利用提出了更高的要求，而少許數據的出現又使得基於傳統數據處理方法的人們面對大量數據無從下手，此時必然要求有更爲先進的數據處理技術;其次，計算機性價比的提高和磁盤存儲器價格的大幅度下降，使得人們藉助計算機來完成數據的分析和處理成爲可能。
　　  城市是生存繁衍最好的地方、是社會交往的地方、是文化享受的地方，按照城市的職能，咱們讓它智能化，好比智慧安防、智慧環保、智慧能源、智慧城管、智慧養老、智慧國土規劃、智慧交通等都是讓人有更好的環境來生存繁衍。在經濟發展方面，能夠推進智慧製造、工業互聯網、物聯網。在文化享受方面，能夠考慮智慧戶外流媒體、智慧教育、智慧旅遊等等。其中，數字城市技術把基礎地理數據、正射影像、街景影像數據、全景影像數據、三維模型數據結合在一塊兒，這產生了大量的地圖數據，而在智慧城市的建設和應用中，將產生從TB到PB級愈來愈多的數據，從而進入大數據時代。而對於這些大數據來講，傳統的數據分析工做已經不適合對現有數據進行合理的分析，致使了一種「數據爆炸但知識貧乏」的現象。目前在智慧城市中的各類應用如智慧交通，智慧國土等應用中的數據庫系統主要侷限於實現數據的錄入、查詢、統計等功能，但沒法有效地發現數據中存在的關係和規則，很難把握數據背後隱藏的知識，沒法根據現有的數據預測將來的趨勢。這在必定程度上阻礙了智慧城市的應用與普及。而數據挖掘技術偏偏是解決這一難題的最佳方法。應用數據挖掘技術，能夠從GIS數據庫中發現更多的地理知識和地理規律、對專題數據進行有效、合理的分析，從而達到城市的智能運行、政府的科學決策、公衆的便捷生活及企業的高效運營。
　　北京理工大學大數據搜索與挖掘實驗室張華平主任研發的NLPIR大數據語義智能分析技術是知足大數據挖掘對語法、詞法和語義的綜合應用。NLPIR大數據語義智能分析平臺是根據中文數據挖掘的綜合需求,融合了網絡精準採集、天然語言理解、文本挖掘和語義搜索的研究成果,並針對互聯網內容處理的全技術鏈條的共享開發平臺。
　　NLPIR大數據語義智能分析平臺主要有精準採集、文檔轉化、新詞發現、批量分詞、語言統計、文本聚類、文本分類、摘要實體、智能過濾、情感分析、文檔去重、全文檢索、編碼轉換等十餘項功能模塊，平臺提供了客戶端工具，雲服務與二次開發接口等多種產品使用形式。各個中間件API能夠無縫地融合到客戶的各種複雜應用系統之中，可兼容Windows，Linux， Android，Maemo5, FreeBSD等不一樣操做系統平臺，能夠供Java，Python，C，C#等各種開發語言使用。
　　在現今社會，數據挖掘技術已經能夠被應用與全部的領域和行業中。在人們生活裏的各個方面幾乎均可以用到數據挖掘技術數據挖掘技術不但給咱們的平常生活帶來了巨大的改變和影響，而且這種影響還深深的改變着咱們的生活方式。在各個領域的應用也會愈來愈普遍和深刻，相關的研究也會愈來愈全面和深刻，綜合應用數據挖掘技術和人工智能技術，爲各個行業提供更多幫助。