樂思網(wǎng)絡(luò)輿情監(jiān)測系統(tǒng)

樂思網(wǎng)絡(luò)輿情監(jiān)測系統(tǒng)是基于全球領(lǐng)先的互聯(lián)網(wǎng)采集監(jiān)控技術(shù)而研發(fā)，具有發(fā)現(xiàn)快，信息全，分析準(zhǔn)的優(yōu)勢?？勺層脩粞塾^六路耳聽八方，在第一時(shí)間發(fā)現(xiàn)負(fù)面輿情。

• 系統(tǒng)概述
• 實(shí)施后的利益
• 系統(tǒng)組成
• 自動(dòng)采集子系統(tǒng)功能描述
• 內(nèi)容分析子系統(tǒng)功能描述
• 界面呈現(xiàn)子系統(tǒng)功能描述
• 系統(tǒng)實(shí)施

一、 系統(tǒng)概述

樂思網(wǎng)絡(luò)輿情監(jiān)測系統(tǒng)是針對互聯(lián)網(wǎng)這一新興媒體，通過對海量網(wǎng)絡(luò)輿論信息進(jìn)行實(shí)時(shí)的自動(dòng)輿情采集，輿情分析，輿情匯總，輿情監(jiān)視，并識別其中的關(guān)鍵輿情信息，及時(shí)通知到相關(guān)人員，從而第一時(shí)間應(yīng)急響應(yīng)，為正確輿論導(dǎo)向及收集網(wǎng)友意見提供直接支持的一套信息化平臺。

其業(yè)務(wù)流程如下圖所示：

圖1： 樂思網(wǎng)絡(luò)輿情監(jiān)測系統(tǒng)的業(yè)務(wù)流程

相比目前的人工輿情監(jiān)測，其優(yōu)勢明顯：

比較指標(biāo)	人工監(jiān)測	采用樂思網(wǎng)絡(luò)輿情監(jiān)測系統(tǒng)
目標(biāo)網(wǎng)站	幾十個(gè)	幾百個(gè)到幾千個(gè)幾萬個(gè)-采3453輿情4533集-
人力成本	需分別登錄各個(gè)網(wǎng)站，手工查閱，還要手工復(fù)制粘貼，疲于奔命	網(wǎng)絡(luò)信息的獲取工作完全由軟件自動(dòng)進(jìn)行，監(jiān)測人員只需在內(nèi)網(wǎng)集中進(jìn)行內(nèi)容的瀏覽與分析
負(fù)面信息識別	需要逐條人工查看確認(rèn)	在自動(dòng)判別的基礎(chǔ)上再人工確認(rèn)
信息保存	零碎，不可避免會出錯(cuò) -采3453輿情4533集-	精確，全面，便于事后追蹤
數(shù)據(jù)存儲	Word文件，分散，很難管理	統(tǒng)一存放在大型關(guān)系數(shù)據(jù)庫中，集中管理
監(jiān)測報(bào)告	基于手工統(tǒng)計(jì)加估計(jì)，數(shù)據(jù)支持不充分	基于自動(dòng)化的統(tǒng)計(jì)分析， 圖文并茂，具有翔實(shí)統(tǒng)計(jì)數(shù)據(jù)支持，可以每日，每周，每月出報(bào)告
監(jiān)測效果	覆蓋片面，不及時(shí) 差強(qiáng)人意，浪費(fèi)人力資源	覆蓋全面，實(shí)時(shí)，幾分鐘到幾十分鐘 自動(dòng)化，系統(tǒng)化

二、 實(shí)施后的利益

監(jiān)測目標(biāo): 一切與本市本省相關(guān)的信息，特別是負(fù)面信息
后續(xù)處理: 人工與目標(biāo)網(wǎng)站負(fù)責(zé)人交涉（要警惕某些所謂刪貼公司乃騙子勒索公司），做好應(yīng)對措施，在第一時(shí)間發(fā)布對應(yīng)處理消息

實(shí)施后好處:
1. 可實(shí)時(shí)監(jiān)測微信、微博，論壇，博客，新聞，搜索引擎中相關(guān)信息web2db knowlesys web2db
2. 可對重點(diǎn)QQ群的聊天內(nèi)容進(jìn)行監(jiān)測
3. 可對重點(diǎn)首頁進(jìn)行定時(shí)截屏監(jiān)測及特別頁面證據(jù)保存
4. 對于新聞頁面可以找出其所有轉(zhuǎn)載頁面web2db knowlesys web2db
5. 系統(tǒng)可自動(dòng)對信息進(jìn)行分類26禁止9盜用0
6. 系統(tǒng)可追蹤某個(gè)專題或某個(gè)作者的所有相關(guān)信息
7. 監(jiān)測人員可對信息進(jìn)行挑選，再分類
8. 監(jiān)測人員可以基于自己的工作結(jié)果輕松導(dǎo)出制作含有圖表的輿情日報(bào)周報(bào)

最終目的：
♦ 可排除或縮小偶發(fā)負(fù)面信息給本省/市形象及本省/市領(lǐng)導(dǎo)帶來的不利影響樂knowlesys思
♦ 可及時(shí)發(fā)現(xiàn)關(guān)于本市本省的輿情呼聲，第一時(shí)間了解民意，在萌芽狀態(tài)化解矛盾樂knowlesys思

三、 系統(tǒng)組成

樂思網(wǎng)絡(luò)輿情監(jiān)測系統(tǒng)由兩個(gè)子系統(tǒng)組成：自動(dòng)采集子系統(tǒng)（采集層）與分析瀏覽 子系統(tǒng)（分析層與呈現(xiàn)層）。其關(guān)系如下圖所示：

圖2：樂思網(wǎng)絡(luò)輿情監(jiān)測系統(tǒng)架構(gòu)

樂思網(wǎng)絡(luò)輿情監(jiān)測系統(tǒng)的網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)如下圖所示，依據(jù)需要也可以分開在隔離的外網(wǎng)與內(nèi)網(wǎng)中實(shí)施。

 

圖3：網(wǎng)絡(luò)拓?fù)浣Y(jié)構(gòu)

四、 自動(dòng)采集子系統(tǒng)功能描述

自動(dòng)采集子系統(tǒng)可以對任意目標(biāo)網(wǎng)站進(jìn)行自動(dòng)采集。

例如：新華網(wǎng)、強(qiáng)國論壇、天涯社區(qū)、西祠社區(qū)、網(wǎng)易社區(qū)、新浪論壇、搜狐社區(qū)、鳳凰網(wǎng)、百度貼吧、以及用戶指定的其他動(dòng)態(tài)網(wǎng)站?？梢猿槿∷行侣勎恼禄蛑黝}帖或者最新主題帖內(nèi)容，還可以抽取某個(gè)主題帖的所有回復(fù)帖或者最新回復(fù)帖的內(nèi)容。即可指定某個(gè)目標(biāo)網(wǎng)站進(jìn)行監(jiān)測，也可以不指定目標(biāo)網(wǎng)站對于全球范圍內(nèi)網(wǎng)站進(jìn)行監(jiān)測，或者進(jìn)行兩者混合監(jiān)測。既可以監(jiān)測國內(nèi)網(wǎng)站，也可以監(jiān)測國外網(wǎng)站如Facebook， Twitter，BBC，CNN。

自動(dòng)采集子系統(tǒng)還可以對基于應(yīng)用程序的聊天室程序監(jiān)測。

后端數(shù)據(jù)庫支持任意的主流關(guān)系型數(shù)據(jù)庫，如Oracle， IBM DB2， MS SQL Server， MySQL， Sybase以及文件型數(shù)據(jù)庫Access等。

自動(dòng)采集子系統(tǒng)的全方位監(jiān)測功能如下圖所示：

圖4：自動(dòng)采集子系統(tǒng)全方位監(jiān)測

自動(dòng)采集子系統(tǒng)具有以下幾個(gè)顯著特點(diǎn)：

1. 全球領(lǐng)先的自動(dòng)采集功能
樂思軟件的網(wǎng)絡(luò)信息采集技術(shù)全球領(lǐng)先，支持對任意網(wǎng)頁內(nèi)任意數(shù)據(jù)的精確采集。樂思軟件每天都為國內(nèi)外用戶針對各種各樣的網(wǎng)站提供采集服務(wù)，沒有高效穩(wěn)定的采集平臺是無法做到的。

2. 支持各種監(jiān)測對象
可以實(shí)時(shí)監(jiān)測微信，微博，新聞，論壇，博客，公共聊天室，搜索引擎，留言板，應(yīng)用程序，報(bào)刊網(wǎng)站電子版等。

3. 無需配置直接監(jiān)測幾千個(gè)新聞網(wǎng)站
系統(tǒng)內(nèi)置對全球范圍內(nèi)網(wǎng)站的監(jiān)測配置，只需輸入關(guān)鍵詞，自動(dòng)采集出文章標(biāo)題與正文。

4. 強(qiáng)大的多語言統(tǒng)一處理功能26禁止9盜用0
可自動(dòng)處理并保存中文，英文，法文，德文，日語，韓語，維文，阿拉伯語等多種語言。

5. 智能文章提取
對于文章類型網(wǎng)頁，可以無需配置，直接自動(dòng)提取文章正文與標(biāo)題，以及作者發(fā)布日期等，自動(dòng)去除廣告，欄目，版權(quán)等無關(guān)的垃圾內(nèi)容

6. 完美支持各種網(wǎng)頁情況
支持當(dāng)前流行的Web 2.0 AJAX動(dòng)態(tài)網(wǎng)站
支持用戶名與密碼自動(dòng)登錄
支持表單查詢
支持下一頁自動(dòng)瀏覽功能
支持多頁面文章內(nèi)容自動(dòng)抽取與合并
可以自動(dòng)下載正文內(nèi)圖片以及各類附件
可以選擇保存原文快照以備查
支持多種互聯(lián)網(wǎng)協(xié)議： HTTP、HTTPS、以及FTP
支持多種網(wǎng)絡(luò)文件格式：HTML/XML/CSV/TEXT/RSS/ATOM
…
您知道嗎？--我們的系統(tǒng)所提供的各種特性組合起來可以處理成千上萬種網(wǎng)頁或數(shù)據(jù)的不同情況

7. 自動(dòng)去重功能
每次采集時(shí)，對于同一個(gè)URL，僅采集最新的沒有采集過的文章內(nèi)容或回復(fù)，對于已經(jīng)采集過的內(nèi)容，自動(dòng)忽略。對于轉(zhuǎn)載文章，可以選擇自動(dòng)去重。

8. 內(nèi)置各種后期數(shù)據(jù)處理功能
數(shù)據(jù)從網(wǎng)頁上獲取后，可進(jìn)一步精加工為各種更細(xì)粒度的字段數(shù)據(jù)或者合并整合，替換統(tǒng)計(jì)等. 例如關(guān)鍵詞抽取，街道地址抽取，省市名稱抽取，郵編抽取，電話號碼抽取，傳真號碼抽取，電子郵件地址抽取，QQ/MSN/Skype抽取，URL抽取等。26禁止9盜用0

9. 可無人值守全天候自動(dòng)采集
可定時(shí)運(yùn)行，也可7×24小時(shí)運(yùn)行，可設(shè)置采集時(shí)間間隔最短為1分鐘。

10. 用戶可以自行添加目標(biāo)監(jiān)測網(wǎng)站
利用系統(tǒng)提供的采集平臺，用戶可以很容易地對目標(biāo)網(wǎng)站進(jìn)行可視化分析，配置出采集任務(wù)文件，加入調(diào)度過程，從而可以任意修改，增加，移除監(jiān)測目標(biāo)。

五、 內(nèi)容分析子系統(tǒng)功能描述

內(nèi)容分析子系統(tǒng)抽取出內(nèi)容的元信息，基于用戶的關(guān)鍵詞設(shè)置，對內(nèi)容進(jìn)行實(shí)時(shí)地自動(dòng)分類自動(dòng)聚類。
樂思研發(fā)的超高速關(guān)鍵詞提取技術(shù)，在3萬字的文章中查找1萬個(gè)關(guān)鍵詞的出現(xiàn)次數(shù)， 不超過6.9毫秒。

六、 界面呈現(xiàn)子系統(tǒng)功能描述

功能架構(gòu)如下圖所示：

圖5: 界面呈現(xiàn)子系統(tǒng)功能架構(gòu)

分析瀏覽 子系統(tǒng)具有以下顯著特點(diǎn)：

1. 多人協(xié)同工作
不同用戶瀏覽不同內(nèi)容，執(zhí)行不同操作，完成不同職責(zé)

2. 文章要素顯示， 疑似負(fù)面信息自動(dòng)提示
?對于新聞文章與博客文章，可采集標(biāo)題，正文，作者，發(fā)布時(shí)間，來源
對于關(guān)鍵詞用高亮背景彩色顯示

3. 帖子要素顯示， 疑似負(fù)面信息自動(dòng)提示
對于論壇帖子，可采集標(biāo)題，正文，作者，發(fā)貼時(shí)間，查看次數(shù)，回復(fù)貼數(shù)， 發(fā)貼人IP
對于關(guān)鍵詞用高亮背景彩色顯示

4. 分類與編輯
對于采集后的信息內(nèi)容，可以進(jìn)行過濾，分類，備注，與編輯，便于后期管理與分析

5. 強(qiáng)大的搜索功能
既可以精確搜索也可以模糊搜索，既可以按分類搜索，也可按來源搜索

6. 支持人工采集
對于某些緊急或異常情況，可以人工輸入采集到的信息

7. 反網(wǎng)站限制功能
可采集被國內(nèi)屏蔽的國外網(wǎng)站，可采集限制了來源IP與訪問頻率的網(wǎng)站，可自動(dòng)獲取代理IP，無需設(shè)置

8. 短信通知功能
可以設(shè)定關(guān)鍵詞，凡是采集內(nèi)容出現(xiàn)了一個(gè)或多個(gè)關(guān)鍵詞，就可以將該條記錄發(fā)送給相關(guān)短信接收人員，便于無人值守實(shí)時(shí)監(jiān)測。

9. 利用輿情分析引擎生成輿情報(bào)表
熱點(diǎn)話題列表、發(fā)貼數(shù)量、評論數(shù)量、作者個(gè)數(shù)
敏感話題列表
自動(dòng)摘要
自動(dòng)關(guān)鍵詞抽取
各類別趨勢圖表
新聞?lì)悎?bào)表： 標(biāo)題、出處、發(fā)布時(shí)間、內(nèi)容、點(diǎn)擊次數(shù)、評論人、評論內(nèi)容、評論數(shù)量等
論壇類報(bào)表： 帖子的標(biāo)題、發(fā)言人、發(fā)布時(shí)間、內(nèi)容、回帖內(nèi)容、回帖數(shù)量等

七、 系統(tǒng)實(shí)施

系統(tǒng)主要應(yīng)用于政府部門以及大中型企業(yè)的公關(guān)部門。
由于互聯(lián)網(wǎng)的復(fù)雜性，樂思網(wǎng)絡(luò)輿情監(jiān)測系統(tǒng)實(shí)施起來需要客戶的配合。
針對客戶需求，我們提供如下系統(tǒng)實(shí)施服務(wù)：

編號	名稱	內(nèi)容
1	交鑰匙工程	提供樂思網(wǎng)絡(luò)輿情監(jiān)測系統(tǒng)的整套軟件與文檔， 提供用戶指定的N個(gè)網(wǎng)站的采集配置文件。 保證系統(tǒng)上線后即可實(shí)時(shí)監(jiān)測到目標(biāo)網(wǎng)站內(nèi)容。
2	培訓(xùn)	提供遠(yuǎn)程培訓(xùn)或上門培訓(xùn)服務(wù)
3	后續(xù)服務(wù)	定期提供目標(biāo)網(wǎng)站更新后的配置參數(shù)文件 定期回訪，提供技術(shù)咨詢，疑難解答 提供遠(yuǎn)程運(yùn)維服務(wù)，減少對客戶相關(guān)支持人員的技術(shù)水平要求
4	技術(shù)支持	通過電話、Email、QQ/MSN/Skype 回答用戶的問題 進(jìn)行技術(shù)支持