增量更新,簡單來說,就是只采集網頁中新增的內容,之前已經采集到內容不會重復采集。
如何設置增量更新?
首先,我們要選擇一個字段,這個字段能夠保證這條記錄是唯一
的。 比如新聞標題、內容頁鏈接。
然后,點擊字段下拉列表。 選擇 不得重復
。
更新模式
如果我們要對采集的數據進行更新采集,比如我們要采集一篇文章每天的閱讀量,并且更新。 我們就需要使用更新模式
設置更新模式,我們需要選擇一個不得重復字段,比如采集文章的話,可以設置文章地址為不得重復字段。
增量更新,簡單來說,就是只采集網頁中新增的內容,之前已經采集到內容不會重復采集。
如何設置增量更新?
首先,我們要選擇一個字段,這個字段能夠保證這條記錄是唯一
的。 比如新聞標題、內容頁鏈接。
然后,點擊字段下拉列表。 選擇 不得重復
。
如果我們要對采集的數據進行更新采集,比如我們要采集一篇文章每天的閱讀量,并且更新。 我們就需要使用更新模式
設置更新模式,我們需要選擇一個不得重復字段,比如采集文章的話,可以設置文章地址為不得重復字段。