方正網際網路輿情分析平台

方正網際網路輿情分析
許敏 北大方正技術研究院
北京方正電子政務信息科技有限公司
[email protected]
u 背景
網際網路作為一個正在加速膨脹的思想陣地，已越來越引起足夠的重視與運用，網際網路的信息繁雜多樣，良莠不齊，進步健康有益的信息大量湧現，同時，反動、迷信、黃色的信息也隨之而來。加之網際網路信息的虛擬性、隱蔽性、發散性、滲透性和隨意性等特點，越來越多的人們願意通過這類渠道表達自己的個人想法，於是，網路輿情的爆發將以“內容威脅”的形式逐漸對社會公共安全形成威脅。北京方正電子政務技術有限公司推出的方正智思輿情預警輔助決策支持系統，成功地實現了針對網際網路海量輿情自動實時的監測分析，有效地解決了宣傳部門以傳統的人工方式對輿情監測的實施難題，對於促進加強網際網路信息監管，組織力量展開信息整理和深入分析，應對網路突發的公共事件，全面掌握社情民意都起到了一定的推動作用。
u 方案特點
北京方正電子政務技術有限公司推出的方正智思輿情預警輔助決策支持系統，以整合網際網路搜尋技術及信息智慧型處理技術，通過知識管理的方法，對網際網路海量信息進行自動抓取、自動分類、自動聚類、主題檢測、專題聚焦，實現用戶的網路輿情監測和新聞專題追蹤等信息需求，形成簡報、報告、圖表等分析結果，為客戶全面掌握民眾思想動態，做出正確輿論引導，提供分析依據。
2 信息採集：網際網路信息（新聞、論壇等）的實時監測、採集、內容提取及排重。
2 信息處理：對抓取的內容進行自動分類聚類、主題檢測、專題聚焦等。
2 信息服務：將採集並分析整理後的信息直接為用戶或為用戶輔助編輯提供信息服務，如自動生成輿情信息簡報、追蹤已發現的輿論焦點並形成趨勢分析，用於輔助各級領導的決策支持。
套用特點
方正智思知識管理平台軟體是一款中文智慧型信息挖掘與處理的平台軟體，它是以北京方正電子政務技術有限公司多年積累的中文信息處理技術、圖形圖像處理技術和中文自然語言處理技術為基礎，融合了最新的人工智慧、信息檢索、文本數據挖掘和網際網路技術的研究成果，實現了對海量文本、圖片、視音頻等數位化內容進行智慧型採集、智慧型處理、智慧型檢索和智慧型分析的功能。
方正智思輿情預警輔助決策支持系統是以北京方正電子政務技術有限公司自主研發的方正智思為基礎，依據市場需求進行針對性的客戶需求定製和開發而形成的套用系統，用以輔助用戶解決在海量數據環境下所面臨的難題，推動各級政府的宣傳機構、大眾傳媒的信息化進程，助力信息傳播。
? 特點一：提高工作效率，擴大監控範圍
方正智思輿情預警輔助決策支持系統針對網際網路的信息進行收集和分析，以計算機智慧型處理技術輔助輿情信息匯集整理和分析，不僅有效的提高工作效率，改善人工輿情監測的弊端，而且通過本系統，能增加設定媒體輿情監測的數量，擴大輿情監測對像範圍，做到了高品質，大範圍的深入分析監測，搞高了監測結論的可信性和準確性，降低了人力成本。
? 特點二：生成智慧型輿情報告（包括輿情簡板和輿情專報）
方正智思輿情預警輔助決策支持系統憑藉北京方正電子政務技術有限公司多年的科研成果，結合內容管理技術、知識管理技術及網際網路相關技術，能夠對一段時間範圍內新出現的社會輿論熱點，生成智慧型輿情報告。輿情簡報圖文並貌，直觀的體現網際網路焦點和熱點新聞主題。輿情專報對重要的熱點新聞信息進行分析和追蹤，對於突發事件引起的網路輿情，可以及時掌握輿情爆發點和事態發展趨勢。
另外，運用該系統，能夠有效的降低人工分析檢測誤差，通過對網路信息源的採集、整理、監測和分析，不僅有效降低人工分析監測誤差，而且利於形成高標準高質量的監測報告，便於相關部門快速掌握社會思想動態，為制定相對應的執行方案提供了可信的分析依據。
? 特點三：輔助判斷網路新聞和評論的正面和負面信息
方正智思輿情預警輔助決策支持系統支持人工判斷標註信息屬性，例如，緊急度、密級度、觀點傾向等等。可按照信息屬性排列信息，例如按照時間排列、觀點傾向排列等等。通過系統的統計分析功能，對某社會突發事件的網路新聞和評論的正面負面信息做數據分析，用直觀的圖表反映網路新聞熱點的發展趨勢分析。
u 技術特點
知識管理技術
? 自然語言處理技術
據統計，當前數位化的信息中80%的信息以非結構化的形式存在，其中大部分信息以自然語言描述形式的文本。方正智思輿情預警輔助決策支持系統作為一個信息資訊分析套用系統，能夠對自然語言描述文本形式進行深入的分析挖掘。
n 自動分詞技術
自動分詞技術是中文信息處理與分析的基礎。錯誤的分詞將導致完全錯誤的信息語義。方正智思輿情預警輔助決策支持系統中以詞典和規則為基礎，綜合利用了基於機率分析的語言模型方法，使分詞的準確性達到99%，並可根據不同的套用進行適合特定要求的分詞。
n 自動關鍵字與自動摘要技術
方正智思輿情預警輔助決策支持系統在篇章語義分析的基礎上，綜合考慮詞頻、詞性、位置信息，實現準確的自動關鍵字與自動摘要。同時利用指代消解等技術使得摘要更具可讀性。
? 信息檢索技術
n 全文檢索技術
方正智思輿情預警輔助決策支持系統的全文引擎將傳統的全文檢索技術與最新的WEB搜尋技術相結合，大大提高檢索引擎的性能指標。同時融合了多種相關技術，提供豐富的檢索手段以及同義詞等智慧型檢索方式。
? 數據挖掘技術
n 自動分類與自動聚類
分類是通過對訓練集的學習，得出每一分類的屬性特徵的模型，然後使用這一模型對未知分類情況的數據進行分類。典型的套用是系統通過對部分已知分類文檔的學習訓練後，對文檔集進行自動分類。它區別於聚類的關鍵是它有個學習的過程。
聚類是將數據集合中的數據劃分為具有一定意義的子集，使得不同子集中的數據差別（距離）儘可能大，而同一子集中的數據差別（距離）儘可能小。典型的套用例子是，在空間資料庫中，根據數據點的空間分布情況，將數據點分成不同的簇。
? 相似搜尋與消重
相似搜尋是在對象集合中，找到與指定的查詢對象相似的對象實例或對象子集。例如：從WEB中找出與指定內容相似的頁面、圖片或其他信息。
在實際套用中，找出輿情信息內容幾乎相同的文章，實現對輿情信息的消重；根據文章主題相似性，形成專題報導，背景分析等等。
u 市場意義
運用方正智思輿情預警輔助決策支持系統，宣傳業務部門可以有效的規範網際網路信息，引導健康有益的輿論導向。該系統對於促進加強網際網路信息監管，組織力量展開信息整理和深入分析，應對網路突發的公共事件，全面掌握社情民意都有著積極的推動作用