概述
Spider Analyser是一款用於跟蹤WordPress網站各種搜尋引擎蜘蛛爬行日誌的外掛，並進行詳細的蜘蛛爬行資料統計、蜘蛛行為分析、蜘蛛爬取分析及偽蜘蛛攔截等。
1. 蜘蛛概況
支援檢視網站日常各大搜尋引擎蜘蛛來訪的資料；
- 今日蜘蛛-方便站長快速瞭解當日、昨日及30天平均的來訪蜘蛛數、爬取URL數及平均爬取URL數。
- 趨勢圖-支援按今天、昨天、最近7天及最近30天檢視蜘蛛數、爬取URLs總量、響應狀態碼及熱門蜘蛛爬取連結數走勢折線圖，並可檢視上一週期資料，以作對比分析。
- Top10蜘蛛-支援按今天、昨天、最近7天及最近30天檢視Top10蜘蛛的爬取URL數及佔比相關資料。
- Top10蜘蛛爬取URL-支援按今天、昨天、最近7天及最近30天檢視Top10蜘蛛爬取URL的爬取次數及佔比，方便站長對熱門蜘蛛爬取頁面URL進行分析。
- Top10熱門文章-按今天、昨天、最近7天及最近30天檢視Top10熱門文章，以便於站長分析熱門文章蜘蛛爬取情況以進一步最佳化文章頁SEO。
2. 蜘蛛日誌
支援按今天、最近7天及最近30天檢視蜘蛛日誌，包括蜘蛛訪問時間、狀態碼、訪問連結、蜘蛛IP及蜘蛛名稱等引數。
並且支援按蜘蛛名稱、狀態碼及時間進行篩選日誌；以及可透過訪問URL、蜘蛛IP搜尋蜘蛛日誌。支援單個或者批次忽略/攔截日誌對應蜘蛛。
3. 蜘蛛列表
蜘蛛列表包含蜘蛛清單、蜘蛛IP段、疑似偽蜘蛛及蜘蛛攔截四部分的功能，其中：
- 蜘蛛清單-清單包括蜘蛛名稱、蜘蛛型別、蜘蛛地址、最近來訪時間、爬取URLs及佔比情況等資料，支援按蜘蛛名稱、蜘蛛型別及時間段篩選查詢；並且支援單個或者批次忽略或者攔截指定蜘蛛。
- 蜘蛛IP段-在該列表可以檢視不同蜘蛛對應IP段及其佔比情況，支援按蜘蛛名、時間進行篩選查詢。且支援單個或者批次攔截蜘蛛IP段。注：蜘蛛IP段攔截屬於泛攔截，應審慎操作。
- 疑似偽蜘蛛-協作站長快速發現疑似偽蜘蛛名稱及IP地址，便於快速對偽蜘蛛執行單個或者批次攔截操作。站長應該積極對偽蜘蛛進行攔截操作，避免偽蜘蛛的頻繁爬取導致伺服器效能下降。
- 蜘蛛攔截-蜘蛛攔截列表用於站長管理蜘蛛攔截清單，支援站長按名稱、IP/IP段或者名稱+IP/IP段對蜘蛛進行攔截操作。該攔截列表也支援對攔截動作反操作，即可單個或者批次移除攔截。
注：蜘蛛攔截可透過蜘蛛日誌列表、蜘蛛清單列表、蜘蛛IP段列表及疑似偽蜘蛛列表對蜘蛛進行攔截。
4. 訪問路徑
支援按今天、最近7天及最近30天檢視蜘蛛訪問路徑（爬取頁面URL）具體資訊列表，包括URL、URL型別、爬取次數及佔比情況等資料。
並且支援按蜘蛛名稱、型別、狀態、時間、訪問URL及蜘蛛IP進行篩選查詢。同時，站長還可以快速檢視各型別的訪問路徑的蜘蛛爬取佔比餅狀分佈圖。
5. 文章爬取
此功能模組是為了方便站長按蜘蛛名稱、不同狀態的文章型別及時間，快速瞭解網站文章蜘蛛訪問量、出鏈數及入鏈數。站長再根據這幾個指標，對文章進行內鏈佈局處理，提升蜘蛛爬取頻率，從而提升網站收錄量。
6. 外掛設定
- 記錄管理-支援自定義蜘蛛型別及設定蜘蛛記錄狀態。
- 連結自定義-允許透過設定連結規則來區分蜘蛛爬取URL連結型別，支援新增自定義或者修改新增現有連結型別的規則。
- 日誌設定-支援設定外掛日誌保留時間週期（最近30天、最近3個月、最近6個月、最近1年或永久），日誌備份及刪除和自定義蜘蛛。
Spider Analyser外掛非常適合站長作為網站SEO最佳化的輔助工具，透過資料統計深入瞭解更大搜尋引擎蜘蛛爬取頁面URL的行為習慣。WordPress站長可以利用該外掛，並結合WordPress網站SEO最佳化外掛、百度推送外掛和關鍵詞推薦外掛，對WordPress網站內容的搜尋引擎收錄及排名最佳化可以做到事半功倍的效果！
外掛安裝
方式1：線上安裝(推薦)
1. 進入WordPress儀表盤，點選’外掛-安裝外掛’，關鍵詞搜尋’Spider Analyser’，找搜尋結果中找到’Spider Analyser’外掛，點選’現在安裝’；
2. 安裝完畢後，啟用 `Spider Analyser` 外掛.
3. 透過儀表盤左側選單’蜘蛛分析’即可檢視蜘蛛概況及蜘蛛日誌.
方式2：上傳安裝
FTP上傳安裝
1. 解壓外掛壓縮包spider-analyser.zip，將解壓獲得資料夾上傳至wordpress安裝目錄下的 `/wp-content/plugins/`目錄.
2. 訪問WordPress儀表盤，進入’外掛’-‘已安裝外掛’，在外掛列表中找到’Spider Analyser’，點選’啟用’.
3. 透過儀表盤左側選單’蜘蛛分析’即可檢視蜘蛛概況及蜘蛛日誌.
儀表盤上傳安裝
1. 進入WordPress儀表盤，點選’外掛-安裝外掛’；
2. 點選介面左上方的’上傳按鈕’，選擇本地提前下載好的外掛壓縮包spider-analyser.zip，點選’現在安裝’；
3. 安裝完畢後，啟用 `Spider Analyser` 外掛；
4. 透過儀表盤左側選單’蜘蛛分析’即可檢視蜘蛛概況及蜘蛛日誌.
常見問題
售前答疑
-
付費主題外掛是否可以提供試用？截止目前，由於產品的特殊性，暫時不提供付費主題外掛試用。您可以通過下載免費版本體驗，又或者檢視主題Demo演示，瞭解主題或者外掛相關功能。
-
主題外掛授權最多支援多少個域名？主題外掛頁面顯示的價格均為單一域名授權價格。多域名授權，可以在下單的時候選擇所需要的授權域名數量，檢視最終價格。 注：子域名和頂級域名均計算授權域名數量。請在授權前，再次確認所需要繫結的域名。
-
購買主題外掛後是否可長期使用？是的。購買主題外掛後在授權域名下即可長期擁有對應產品更新和使用權。
-
購買主題外掛是否提供技術支援服務？僅提供半年的技術支援服務（如主題外掛相關的遠端技術支援、相容性問題排查等），但如在使用過程中遇到任何問題，均可以通過工單反饋問題，我們將盡快處理。
-
是否支援退款政策？由於主題或者外掛屬於虛擬產品，原則上不支援7天無理由退款（特殊情況除外），請在購買前充分了解產品資訊，如有疑問可以聯絡我們進一步瞭解。 以下特殊情況下，支援退款申請： （1）購買後未繫結任何域名，且未超過7天，可以通過工單申請退款； （2）如主題外掛存在嚴重bug，相容性問題，且聯絡我們無法解決問題，可在購買後14天內申請退款。
售後支援
-
購買付費主題或者外掛是否可以獲得安裝部署服務？很抱歉。購買主題或者外掛後，需您自行下載安裝。但，如果您在安裝的過程中遇到問題，可以聯絡我們獲得支援。
-
主題和外掛在使用過程中出現無法解決的問題？在使用我們的主題和外掛中出現無法解決的問題，可以通過我們的線上工單提交具體問題，我們將會盡快回復您。 注意，為了保證更快速地解決您的問題，請儘可能詳細描述問題（不侷限於文字內容）。 此外，我們僅處理主題和外掛本身的問題，與我們主題和外掛無關問題，需您自行解決。
-
我們的線上服務工作時間？
-
付費主題和外掛的版本更新週期是多久？關於付費主題和外掛的版本更新週期，我們無法給出一個具體的時間。您可以通過查閱主題或者外掛的更新日誌來了解過往的版本更新情況。 一般情況下，當對主題和外掛進行較多功能更新迭代時，週期會比較久。但對於缺陷修復的更新，我們會盡快迭代更新。
-
購買主題和外掛是否可以獲得技術支援？是的。購買我們的主題和外掛均可以獲得半年的技術服務支援。 當然，即時超出技術服務支援期限，當你遇到問題的時候，還是可以通過我們的線上工具尋求幫助。
使用問題
-
安裝外掛後無資料顯示或者顯示為空白，如何處理？首先，如果是首次安裝，資料可能有延遲，應該稍後再次檢視外掛後臺資料顯示情況； 然後，如果不是首次安裝，可檢視蜘蛛日誌列表確認是否有蜘蛛到訪，若有資料，嘗試強刷瀏覽器清除快取及暫停快取外掛，檢視是否正常； 上述兩個方法均不管用，則應該在外掛異常頁面，滑鼠右鍵點選“檢查”跳出瀏覽器開發工具，切換至Console標籤項，檢視是否存在報錯資訊。如果有，通過“閃電博工單”反饋資訊。
-
百度、谷歌、搜狗、360等搜尋引擎蜘蛛基本不到訪，怎麼辦？該外掛的主要作用是用於統計分析搜尋引擎蜘蛛行為。如需要吸引搜尋引擎蜘蛛到訪或者增加蜘蛛訪問深度。建議如下：
- 儘可能地將網站sitemap提交至各大搜尋引擎，檢視sitemap相關教學；
- 儘可能通過各種方式將URL資料推送至搜尋引擎，使用閃電博的搜尋自動推送管理外掛可以自動推送url資料至百度、Bing、360、神馬和頭條等搜尋引擎。
- 適當地佈局站外和站內連結，可以增加搜尋引擎蜘蛛到訪網站頻率及提升爬取網站深度。推薦學習網站內部連結SEO優化實操指南和外鏈建設在SEO中的重要性及策略.
-
為什麼外掛統計的蜘蛛日誌與伺服器日誌資料有差異?外掛僅統計前端頁面的蜘蛛訪問日誌，伺服器日誌則統計所有資料訪問日誌。因此，理論上伺服器日誌蜘蛛訪問資料應該大於外掛的蜘蛛訪問資料。但外掛統計的資料已經足以作為搜尋引擎蜘蛛分析。
-
Spider Analyser外掛的蜘蛛資料存放在哪裡?資料庫。由於該資料僅用於網站管理分析時使用，存放在資料庫更加實時和準確，主要是佔資料庫空間，對伺服器效能影響可以忽略不計。
-
如何應對蜘蛛日誌過多導致資料庫反應緩慢？由於伺服器配置、網站每日各類蜘蛛爬取頻次等原因，可能部分網站安裝了蜘蛛統計分析外掛後會造成一定的網站效能下降。如出現此種情況，請執行以下操作：
- 將外掛日誌保留週期改為最近30天；
- 及時刪除歷史日誌；
- 對不必要的蜘蛛日誌，設定為忽略或者新增至攔截列表。
-
Spider Analyser外掛是否會識別偽蜘蛛?暫不對偽蜘蛛進行識別，如站長髮現可以偽蜘蛛，甚至任意你不希望對網站內容爬取的其他蜘蛛，可以通過Robots.txt進行遮蔽。檢視教學《如何編寫和優化WordPress網站的Robots.txt?》，但不是所有蜘蛛不一定遵循該協議。
-
訪問路徑統計中URL型別為什麼有些現實為unknown？部分歷史資料及一些未能夠識別類別的蜘蛛訪問URL地址，均列為unknown。在後面的外掛版本，將會加入URL型別分組自定義功能。
更新日誌
V2.1.1
2025.04.27
- 修復啟用異常bug。
V2.1.0
2025.04.26
- 新增pot檔案以實現本地化，並預翻譯繁體中文和英文；
- 修正升級提醒相關。
- 設定蜘蛛預設圖片。
V2.0.1
2025.02.14
- 解決部分伺服器開啟防盜鏈導致後臺介面問題。
- 樣式及互動細節優化。
- 清理失效檔案。
V2.0.0
2025.01.20
- 更直觀的全新外掛操作介面。
- 增加外掛及相關教程和指南模組。
- 優化功能開關以保證UI和體驗上的一致性。
- 增加外掛功能傳統WordPress選單快捷入口。
V1.4.2
2024.07.30
- 修復網站更換域名外掛無法正常使用問題。
- 修復智慧攔截無資料問題。
- 優化外掛PHP程式碼。
V1.4.1
2024.04.20
- 基於編碼規範進一步優化PHP程式碼；
- 優化PHP程式碼以提升效能；
- 優化PHP程式碼以增強程式碼安全性。
V1.4.0
2023.12.06
- 增加疑似偽蜘蛛列表篩選選項；
- 增加蜘蛛攔截列表篩選選項；
- 增加文章爬取列表文章編輯操作項；
- 其他已知問題修復和體驗優化。
V1.3.11
2023.03.24
- 優化移動端樣式和體驗；
- 主題外掛儀表盤UI規範化處理；
- 其他已知問題及bug修復。
V1.3.10
2023.03.10
- 優化趨勢統計表互動效果；
- 優化溫馨提示移動端樣式；
- 優化表單資料移動端篩選查詢互動。
V1.3.9
2023.03.09
- 完善和新增各個模組對應溫馨提示，以幫助站長更高效地利用外掛；
- 優化資料統計圖表，提升資料檢視互動體驗；
- 合併301/302狀態碼日誌資料，提升資料篩選效率及呼叫便利性；
- 刪除各個資料列表無關篩選項；
- 優化統計資料快取規則，提升外掛效率；
- 優化移動端篩選項互動體驗。
V1.3.8
2022.06.09
- 新增智慧攔截一鍵清除按鈕；
- 新增日誌設定選項，支援日誌更新方式可選及日誌刪除等；
- 新增部分操作項再次確認視窗，以免誤操作；
- 修復版本更新提示連結點選無效bug；
- 相容WordPress 6.0；
- 進一步優化蜘蛛日誌寫入邏輯以提升效率。
V1.3.6
2022.04.08
- 修復智慧攔截開關狀態無法儲存問題；
- 新增智慧攔截彈窗提示，以再次確認站長操作。
V1.3.5
2022.04.01
- 新增日誌保留週期“最近7天”選項;
- 新增偽蜘蛛智慧攔截開關；
- 優化外掛設定記錄管理，支援攔截相關操作；
- 其他已知小問題及體驗優化。
V1.3.4
2022.02.17
- 相容WordPress 5.9；
- 優化列表批量操作互動體驗；
- 優化多處移動端樣式及互動體驗。
V1.3.2
2021.12.27
- 新增以WP安全標準規範化外掛程式碼；
- 優化蜘蛛攔截邏輯提高攔截準確率；
- 修復搜狗蜘蛛名稱未能正確匹配為sogou spider的bug。
V1.3.1
2021.10.26
- 修復新安裝外掛部分資料表無法正常顯示的bug。
V1.3.0
2021.10.11
- 新增蜘蛛爬蟲資訊檢視快捷入口；
- 新增蜘蛛爬蟲IP搜尋快捷入口；
- 修復疑似偽蜘蛛列表免費版本下為空白；
- 補充部分列表說明文字及資料來源。
V1.2.4
2021.05.18
- 新增列表批量操作選項（批量忽略/攔截/移除）；
- 新增訪問路徑分佈餅狀圖；
- 新增Pro版本升級入口連結；
- 新增限時優惠活動入口；
- 優化版本升級提示與WordPress預設樣式一致。
V1.2.3
2021.03.22
- 優化蜘蛛概況趨勢圖，移除爬取URLs均值資料統計，新增蜘蛛爬取連結狀態碼、熱門蜘蛛爬取連結數趨勢；
- 列表新增資料列升降序排列支援；
- 優化蜘蛛日誌列表，增加狀態碼篩選項及列表資料；
- 優化內容推薦版塊展示邏輯；
- 加入快取機制，以提升部分資料載入效能；
- 增加Pro及免費版本功能對比列表。
V1.2.2
2021.03.03
- 優化列表攔截/忽略操作互動體驗，攔截/忽略記錄不在原列表顯示；
- 修復列表忽略操作無效bug；
- 蜘蛛攔截列表新增路徑及攔截方式列；
- 優化文章爬取列表顯示資料，支援全域性資料讀取；
- 引入全新列表UI庫，增強互動體驗；
- 修復蜘蛛清單所有狀態篩選項錯誤bug，改為所有型別篩選項；
- 進步優化外掛相關頁面移動端相容性。
V1.2.1
2021.01.26
- 新增部分資料列表資料項檢視更多入口；
- 優化蜘蛛概況資料統計圖表UI佈局；
- 重新調整蜘蛛列表，拆分為蜘蛛清單、蜘蛛IP、疑似偽蜘蛛和蜘蛛攔截多個Tab標籤頁；
- 優化蜘蛛攔截規則，支援名稱、IP/IP段或名稱+IP/IP段三種攔截方式；
- 重新調整外掛設定，拆分為記錄管理、連結規則和日誌設定多個Tab標籤頁；
- 新增蜘蛛日誌備份下載功能；
- 修正搜狗蜘蛛日誌無法記錄bug。
V1.2.0
2020.12.07
- 新增熱門文章列表，支援站長了解文章蜘蛛爬取量、出鏈數及入鏈數；
- 新增蜘蛛IP段列表，以便於站長了解不同蜘蛛對應IP段資料；
- 新增疑似偽蜘蛛識別功能；
- 新增蜘蛛名稱及蜘蛛IP攔截功能，以便於站長對不需要的蜘蛛或者IP進行攔截；
- 蜘蛛概況新增訪問路徑快捷入口；
- 蜘蛛日誌、蜘蛛列表及訪問路徑等列表新增攔截操作選項；
- 其他功能體驗優化及已知問題修復。
V1.1.4
2020.11.13
- 緊急修復蜘蛛忽略設定可能導致相似名稱蜘蛛被忽略bug.
V1.1.3
2020.11.10
- 新增日誌保留時間選項及刪除日誌操作；
- 新增蜘蛛列表管理，支援自定義蜘蛛，蜘蛛型別及記錄開關；
- 新增連結自定義型別及規則設定，支援新增或者修改URL型別及連結規則；
- 優化蜘蛛列表，新增按蜘蛛名稱篩選支援。
V1.1.2
2020.10.12
- 新增蜘蛛訪問路徑資料列表功能；
- 新增訪問路徑型別資料統計，支援按首頁、文章頁、獨立頁、分類頁、搜尋頁、作者頁、Feed、Sitemap、API和其他型別歸類URL；
- 其他已知問題及bug修復。
V1.1.1
2020.09.08
- 新增蜘蛛列表功能，支援檢視站點更多蜘蛛相關資料資訊；
- 新增更多蜘蛛資料統計，支援300+不同型別蜘蛛資料統計；
- 優化外掛移動端介面樣式。
V1.1.0
2020.08.15
- 新增日誌篩選搜尋功能；
- 新增版本升級提示功能；
- 修復部分蜘蛛無法統計bug。
V1.0.3
2020.07.29
- 優化爬蟲日誌記錄規則，由每小時更新改為實時更新；
- 刪除原有的本地日誌記錄功能，改為直接資料庫記錄。
V1.0.2
2020.07.16
- 修復資料圖表縱座標參考值出現小數的bug；
- 修復統計圖表資料取值異常問題；
- 優化資料統計圖表當期及上期折線樣式（當期實線，上期虛線）。
V1.0.1
2020.07.11
- 修復部分網站無資料展示bug；
- 優化外掛部分統計資料術語，統一標準；
- 優化移動端展示外觀;
- 刪除非必要檔案。
V1.0.0
2020.07.10
- 新增今日蜘蛛資料統計功能；
- 新增蜘蛛資料趨勢圖功能；
- 新增Top10搜尋引擎蜘蛛統計功能；
- 新增Top10蜘蛛爬取URL統計功能；
- 新增蜘蛛日誌功能，統計蜘蛛訪問時間、狀態碼、訪問連結、蜘蛛IP及蜘蛛名稱等資料。
外掛特色
- 1. 多維度資料
- 可按不同的時間、不同資料型別維度檢視蜘蛛資料，便於對比分析。
- 2. Top資料排行
- Top10蜘蛛&蜘蛛爬取URL資料清單，網站內容搜尋引擎友好程度。
- 3. 日誌可查
- 記錄最近30天蜘蛛爬取網站連結記錄，蜘蛛爬取痕跡一目瞭然。
- 4. 文章抓取
- 基於文章蜘蛛爬取、出鏈數、入鏈數及收錄情況進行分析優化。
外掛要求
- 最新版本: 2.1.1
- 最新更新: 2025.04.27
- PHP版本要求: 7.0+
- WP版本要求: 5.4+
- 授權型別: 付費
產品評論
評論留言
脣槍舌劍 (81)
丢塔手游网
2024.11.12 15:11
要是能排除假蜘蛛就更牛了
陈大民@WBOLT
2024.11.13 10:11
插件有识别伪蜘蛛及拦截的功能部分哦。
包子
2024.11.6 17:11
蜘蛛IP段这个功能是啥样的？ 这里没有任何的示意图，我想知道这个是按啥做的区分
WBOLT_COM
2024.11.7 12:11
这纯粹就是对访问蜘蛛的IP范围进行划分，即一个按蜘蛛和IP段做的列表。
beek
2024.7.23 14:07
重定向响应状态都归类到302下了吗？浏览器访问看状态是301.插件日志中显示的302
?
2024.4.3 11:04
1.建议蜘蛛的名称使用中文替代，例如：bingbot=必应，Googlebot =谷歌，YisouSpider=神马，要很直观，很直白的体现，小白很多。没必要让大家再去查询这是什么蜘蛛。
2..蜘蛛建议使用中文名称+蜘蛛类型
WBOLT_COM
2024.4.3 17:04
中文蜘蛛寥寥无几。暂无打算，感谢建议。
裴先生
2024.3.4 15:03
在蜘蛛清单页面，点击最近来访排序，SQL查询报错了：WordPress database error Unknown column ‘a.last_visit’ in ‘order clause’ for query SELECT a.spider,COUNT(1) num,MAX(a.visit_date) last_visit,b.bot_type,b.bot_url,b.status AS udg FROM wp_wb_spider_log a LEFT JOIN wp_wb_spider b ON a.spider=b.name WHERE DATE_FORMAT(a.visit_date,’%Y-%m-%d’) = ‘2024-03-04’ GROUP BY a.spider ORDER BY a.last_visit ASC made by do_action(‘wp_ajax_spider_analyser’), WP_Hook->do_action, WP_Hook->apply_filters, WP_Spider_Analyser::spider_analyser_ajax, referer: https://blog.peiluming.com/wp-admin/admin.php?page=wp_spider_analyser
橙光
2023.10.23 23:10
Spider Analyser 插件坏了读取不出来 怎么办？
XX
2023.9.26 09:09
经常一直卡bug 点击插件后就一直转圈加载不出蜘蛛概况
WBOLT_COM
2023.9.26 15:09
查看日志数量是否过大。如果存在此问题，尝试设置更短的日志保留时间，拦截非必要的蜘蛛爬虫。
技术SOLO
2023.9.11 16:09
如果使用多层CDN，蜘蛛ip获取有问题
WBOLT_COM
2023.9.12 10:09
多层CDN不是获取蜘蛛IP有问题，是无法获取蜘蛛IP。
大江
2023.5.18 21:05
百度蜘蛛。前段时间是出现一部分返回码是302，这几天全部是返回码302，只有tag的返回码是200.其他蜘蛛正常。盼复，谢谢。
WBOLT_COM
2023.5.19 10:05
工单提供详细反馈一些。
痕风的起点
2023.5.5 22:05
免费版不让用了！！！
momo
2023.5.11 10:05
我的也报错了
2023/05/11 02:05:40 [error] 1941#0: *59346 FastCGI sent in stderr: ＂PHP message: PHP Warning: error_log(/www/wwwroot//wp-content/plugins/spider-analyser/#log/log-1110.txt): failed to open stream: No such file or directory in /www/wwwroot//wp-content/plugins/spider-analyser/spider.class.php on line 2900＂ while reading upstream, client: 172.70.142.216, server: , request: ＂GET /author/28?orderby=date&status=follow&tab=forum HTTP/2.0＂, upstream: ＂fastcgi://unix:/tmp/php-cgi-74.sock:＂, host: ＂＂
避世血族-暗
2022.9.14 15:09
WP多站点，能用么？还是只能授权一个域名？
WBOLT_COM
2022.9.14 15:09
页面价格为单一域名授权价格。
神经蛙
2022.8.27 09:08
这个插件可以开发一个路径功能吗？就是爬虫进入网页A以后，是不是点击了A中的内链，然后又去爬了B（A中的一条内链）。
就像一个爬虫路线图，爬虫进入网站以后，爬的深度是怎么样的
WBOLT_COM
2022.8.27 11:08
暂无这样的计划。
993
2022.6.27 23:06
跟楼主一样的故障，我是6月23号就获取不到了
993
2022.6.28 19:06
谢谢！
根据作者的建议，删除了全部日志，设置为保留30天，及时更新，最后记得保存设置，立马刷新后台，就有蜘蛛记录了。
兵哥
2022.6.27 15:06
V1.3.8版本从6月26日开始突然就获取不到蜘蛛数据了，前几天都正常
WBOLT_COM
2022.6.27 16:06
进入蜘蛛后台，右键查看元素，看是否有任何报错。
993
2022.6.27 23:06
这是报错：不可用
chunk-vendors.be52a27d.js:11 Uncaught (in promise) Error: timeout of 10000ms exceeded
at e.exports (chunk-vendors.be52a27d.js:11)
at XMLHttpRequest.f.ontimeout (chunk-vendors.be52a27d.js:16)
4d9e7db…:1 Failed to load resource: net::ERR_CONNECTION_TIMED_OUT
WBOLT_COM
2022.6.28 12:06
尝试将插件的日志设置，执行日志删除，将保留周期改为最近30天，更新方式为每天更新。最后保存设置。
如果网站蜘蛛日志数据过多，应该将比必要的蜘蛛进行拦截，也可以选择不记录部分无关紧要的蜘蛛记录。
推荐仅记录国内外重点关注的搜索引擎蜘蛛，其他蜘蛛可以不理会的。
酷酷的文
2023.1.5 11:01
一样的问题，我也出现过。
o︻|樱桃*$
2022.5.6 11:05
这个插件是不是不适合wp站群系统啊？每个站点都需要单独授权才可以使用吗
wbolt_陈大民
2022.5.6 14:05
提交订单时可选择多域名授权，并享优惠。
CoImPFv-kedLMTmfOrSZYifzh67vI
2022.4.22 19:04
这个能获取到 他人采集我网站的 信息吗？
Ghost_chu
2022.3.27 19:03
archive.org 的 bot 似乎没被识别
UA为：Mozilla/5.0 (compatible; special_archiver/3.1.1 +http://www.archive.org/details/archive.org_bot)
展小白
2022.3.20 12:03
为什么一个蜘蛛都没有呢？百度是有抓取记录的，这个需要给到什么权限才能获取到蜘蛛记录吗？
WBOLT_COM
2022.3.20 13:03
不需要的呢。耐心等待下它的出现呗。
康
2021.12.30 15:12
更新后蜘蛛大量减少
WBOLT_COM
2021.12.30 15:12
正在看你们反馈的问题，初步判断是Free版本的数据读取问题，Pro没有这种情况。
juebanheise
2021.12.29 17:12
新版更新后 蜘蛛记录大量减少，莫名其妙的状态码全部都是302
WBOLT_COM
2021.12.29 18:12
针对您的问题以工单的形式提交反馈，以便于我们进一步排查。
刘
2021.12.29 21:12
返回码都是302
搬主题
2021.12.30 10:12
我也一样，更新后蜘蛛记录大量减少。