企業(yè)網(wǎng)站設(shè)計(jì)發(fā)布采集組件管理
日期 : 2020-10-06 14:28:54
發(fā)布采集組件管理。
系統(tǒng)中的發(fā)布組件與后臺(tái)爬蟲管理系統(tǒng)密切相關(guān), 系統(tǒng)管理員在后臺(tái)配置站點(diǎn)的網(wǎng)站編號、網(wǎng)站URL、列表URL、詳情URL等參數(shù),系統(tǒng)將自動(dòng)完成爬取。
系統(tǒng)默認(rèn)的是每隔一分鐘對所有需要文檔同步的欄目進(jìn)行處理, 文檔同步任務(wù)一般不需要人為修改, 如果需要, 用戶可以調(diào)整任務(wù)的開始時(shí)間和時(shí)間間隔, 以減少系統(tǒng)的負(fù)擔(dān), 提高系統(tǒng)性能。
系統(tǒng)中的發(fā)布組件與后臺(tái)爬蟲管理系統(tǒng)密切相關(guān), 系統(tǒng)管理員在后臺(tái)配置站點(diǎn)的網(wǎng)站編號、網(wǎng)站URL、列表URL、詳情URL等參數(shù),系統(tǒng)將自動(dòng)完成爬取。
系統(tǒng)默認(rèn)的是每隔一分鐘對所有需要文檔同步的欄目進(jìn)行處理, 文檔同步任務(wù)一般不需要人為修改, 如果需要, 用戶可以調(diào)整任務(wù)的開始時(shí)間和時(shí)間間隔, 以減少系統(tǒng)的負(fù)擔(dān), 提高系統(tǒng)性能。