德扑之星有限公司官方网站

 

德扑之星官网下载網絡抓取系統操作指南

德扑之星网页版入口網絡抓取軟件主要以抓取互聯網資訊為主✵✶✷✸✹✺✻✼❄❅,基于Drupal系統❋❀⚘☑✓✔√☐☒✗✘ㄨ✕✖✖⋆✢✣,目前已經開放源代碼⒔⒕⒖⒗⒘⒙⒚⒛ⅠⅡⅢⅣⅤⅥⅦⅧⅨⅩⅪⅫⅰⅱ,請大家到drupal官方網站查看:https://www.drupal.org/project/ccloud_feeds

德扑之星网页版入口網絡抓取系統主要包括以下四大主要功能欄目✺ϟ☇♤♧♡♢♠♣♥,分別為:用戶管理欄目ⒺⒻⒼⒽⒾⒿⓀⓁⓂⓃⓄⓅⓆⓇⓈⓉ、信息采集及管理欄目♦☜☞☝✍☚☛☟✌✽✾✿❁❃、抓取信息配置欄目已經測試采集結果欄目❋❀⚘☑✓✔√☐☒✗✘ㄨ✕✖✖⋆✢✣。各欄目功能及操作流程如下:

  • 一⓱⓲⓳⓴⓵⓶⓷⓸⓹⓺⓻⓼⓽⓾、用戶管理欄目 

① 用戶登錄:管理系統必須使用系統管理員賬號登錄方能使用❣❦❧♡۵,在系統首頁左側用戶登錄面板或者訪問“/user”路徑均可登錄⓱⓲⓳⓴⓵⓶⓷⓸⓹⓺⓻⓼⓽⓾。登錄成功①②③④⑤⑥⑦⑧⑨⑩⑪⑫⑬⑭⑮⑯,頁面顯示如下:

<圖1>

② 添加用戶:用戶登錄成功后⓱⓲⓳⓴⓵⓶⓷⓸⓹⓺⓻⓼⓽⓾,點擊頁面上方系統菜單中的“人員”☾☽❄☃,“添加用戶”即可進入添加用戶界面♦☜☞☝✍☚☛☟✌✽✾✿❁❃,如下圖所示:

<圖2>

在<圖2>頁面㊀㊁㊂㊃㊄㊅㊆㊇㊈㊉,填寫相關信息后⒔⒕⒖⒗⒘⒙⒚⒛ⅠⅡⅢⅣⅤⅥⅦⅧⅨⅩⅪⅫⅰⅱ,點擊“創建新賬號”即可成功添加用戶☈⊙☉℃℉❅。

③ 用戶權限管理:在<圖2>頁面♦☜☞☝✍☚☛☟✌✽✾✿❁❃,點擊頁面右上角的“權限”權限按鈕㈧㈨㈩⑴⑵⑶⑷⑸⑹⑺⑻⑼⑽⑾⑿⒀⒁⒂,即可對用戶權限進行管理♦☜☞☝✍☚☛☟✌✽✾✿❁❃,具體的用戶權限請按需要進行設置♀☿☼☀☁☂☄。用戶權限管理界面如下:

<圖3>

  • 二⑰⑱⑲⑳⓪⓿❶❷❸❹❺、信息采集及管理欄目 

信息采集的過程主要分為:創建內容類型及導入器♀☿☼☀☁☂☄、配置內容類型❋❀⚘☑✓✔√☐☒✗✘ㄨ✕✖✖⋆✢✣、配置導入器❻❼❽❾❿⓫⓬⓭⓮⓯⓰,創建導入源信息웃유ღ♋♂、測試采集結果⒃⒄⒅⒆⒇⒈⒉⒊⒋⒌⒍⒎⒏⒐⒑⒒⒓,首先웃유ღ♋♂,如果創建內容類型及導入器的具體操作步驟如下:(注:采集軟件內已附帶一個配置好的例子(第一新聞網 – 要聞)供測試及參考)

用戶登錄成功后ⒺⒻⒼⒽⒾⒿⓀⓁⓂⓃⓄⓅⓆⓇⓈⓉ,點擊系統菜單的“創建”即可進入快速創建內容類型及導入器的界面❣❦❧♡۵。填寫名稱及關鍵字❣❦❧♡۵,點擊“創建”即可ⓊⓋⓌⓍⓎⓏⓐⓑⓒⓓⓔⓕⓖⓗⓘⓙ。本操作頁面如下圖所示:

<圖4>

內容類型創建成功⒜⒝⒞⒟⒠⒡⒢⒣⒤,頁面顯示如下:

<圖5>

  • 三⒜⒝⒞⒟⒠⒡⒢⒣⒤、配置抓取信息欄目 

① 配置內容內心:在內容類型及導入器創建成功后㈠㈡㈢㈣㈤㈥㈦,點擊內容類型的鏈接即可跳轉到相應頁面✺ϟ☇♤♧♡♢♠♣♥,頁面如下圖所示:

<圖6>

在<圖6>頁面上ⅲⅳⅴⅵⅶⅷⅸⅹⒶⒷⒸⒹ,可以按需要進行配置⒃⒄⒅⒆⒇⒈⒉⒊⒋⒌⒍⒎⒏⒐⒑⒒⒓,如對字段進行編輯❣❦❧♡۵、新增字段⒥⒦⒧⒨⒩⒪⒫⒬⒭⒮⒯⒰⒱⒲⒳⒴⒵❆❇❈❉❊†☨✞✝☥☦☓☩☯、刪除字段等ⒺⒻⒼⒽⒾⒿⓀⓁⓂⓃⓄⓅⓆⓇⓈⓉ。

② 配置導入器(importer):在內容類型及導入器創建成功后⑰⑱⑲⑳⓪⓿❶❷❸❹❺,點擊導入器的鏈接即可跳轉到相應頁面♀☿☼☀☁☂☄。如下圖所示

<圖7>

以新聞類為例☈⊙☉℃℉❅,共有兩個importerⒺⒻⒼⒽⒾⒿⓀⓁⓂⓃⓄⓅⓆⓇⓈⓉ,其中一個為新聞列表獲取的importer❻❼❽❾❿⓫⓬⓭⓮⓯⓰,另一個為單個新聞內容采集的importer⒔⒕⒖⒗⒘⒙⒚⒛ⅠⅡⅢⅣⅤⅥⅦⅧⅨⅩⅪⅫⅰⅱ,兩者的設置步驟類似⒥⒦⒧⒨⒩⒪⒫⒬⒭⒮⒯⒰⒱⒲⒳⒴⒵❆❇❈❉❊†☨✞✝☥☦☓☩☯。下面以新聞列表importer為例解釋配置步驟:

第一步:在<圖7>中❻❼❽❾❿⓫⓬⓭⓮⓯⓰,點擊左側“基本設置”區塊下的“設置”按鈕⑰⑱⑲⑳⓪⓿❶❷❸❹❺,配置基本設置❣❦❧♡۵。主要為“關聯到內容類型”及“周期性導入”兩項㈧㈨㈩⑴⑵⑶⑷⑸⑹⑺⑻⑼⑽⑾⑿⒀⒁⒂。

第二步:在<圖7>中ⅲⅳⅴⅵⅶⅷⅸⅹⒶⒷⒸⒹ,點擊左側“提取器”右邊的“更改”☾☽❄☃,可選擇獲取數據來源的方法:通過文件上傳㈠㈡㈢㈣㈤㈥㈦、通過HTTP請求⒜⒝⒞⒟⒠⒡⒢⒣⒤。選擇不同的方法✺ϟ☇♤♧♡♢♠♣♥,其“設置”頁面會相應顯示不同的配置項①②③④⑤⑥⑦⑧⑨⑩⑪⑫⑬⑭⑮⑯。如下圖所示:

<圖8>

注意:請使用HTTP Fetcher (CCloud)ⒺⒻⒼⒽⒾⒿⓀⓁⓂⓃⓄⓅⓆⓇⓈⓉ,它基于 HTTP FetcherⅲⅳⅴⅵⅶⅷⅸⅹⒶⒷⒸⒹ,增加了針對中文編碼㈠㈡㈢㈣㈤㈥㈦、正文內容翻頁等功能♦☜☞☝✍☚☛☟✌✽✾✿❁❃。

第三步:在<圖7>中ⒺⒻⒼⒽⒾⒿⓀⓁⓂⓃⓄⓅⓆⓇⓈⓉ,點擊左側“提取器”右邊的“更改”☧☬☸✡♁✙♆。,、':∶;,可選擇解析提取器獲取到的數據的方法⓱⓲⓳⓴⓵⓶⓷⓸⓹⓺⓻⓼⓽⓾。選擇不同的方法㈠㈡㈢㈣㈤㈥㈦,其“設置”頁面會相應顯示不同的配置項㈧㈨㈩⑴⑵⑶⑷⑸⑹⑺⑻⑼⑽⑾⑿⒀⒁⒂。

第四步:在<圖7>中♦☜☞☝✍☚☛☟✌✽✾✿❁❃,點擊左側“處理器”右邊的“更改”⒔⒕⒖⒗⒘⒙⒚⒛ⅠⅡⅢⅣⅤⅥⅦⅧⅨⅩⅪⅫⅰⅱ,可選擇數據使用方法(保存成內容✤✥❋✦✧✩✰✪✫✬✭✮✯❂✡★✱✲✳✴、用戶⒥⒦⒧⒨⒩⒪⒫⒬⒭⒮⒯⒰⒱⒲⒳⒴⒵❆❇❈❉❊†☨✞✝☥☦☓☩☯、術語)㊀㊁㊂㊃㊄㊅㊆㊇㊈㊉。選擇不同的方法✺ϟ☇♤♧♡♢♠♣♥,其“設置”頁面會相應顯示不同的配置項⒃⒄⒅⒆⒇⒈⒉⒊⒋⒌⒍⒎⒏⒐⒑⒒⒓。點擊“映射”❻❼❽❾❿⓫⓬⓭⓮⓯⓰,可對保存字段的對應關系進行配置⒃⒄⒅⒆⒇⒈⒉⒊⒋⒌⒍⒎⒏⒐⒑⒒⒓。

第五步:在<圖7>中✤✥❋✦✧✩✰✪✫✬✭✮✯❂✡★✱✲✳✴,頁面右方的菜單“Tamper”⒜⒝⒞⒟⒠⒡⒢⒣⒤,可對保存前的數據進行預處理

德扑之星官网下载 网站地图