有的網址,一直都是一樣的,只是里面的數據會變,比如pubg的新浪微博,這是微博的json數據 https://m.weibo.cn/profile/info?uid=6037906900 這網址一直不會變,但里面的數據就會變,如果可以單獨指定此任務網址允許重復采集(采集了此網址只要不入庫已采集網址就可以了),或者允許在網址后面加個隨機數的參數,比如https://m.weibo.cn/profile/info?uid=6037906900&rand=rand() 就象顯示驗證碼一樣,加一個隨機數就每次不一樣,采集的時候就是網址不重復的
另外數據處理希望添加采集的數據進行base64等加密處理,因為有些系統的內容不是明白保存的,使用了base64等加密保存,采集直接入庫是明文!
還有你們的論壇注冊不方便,即然云注冊了,登錄進來還要注冊論壇用戶,為什么注冊的時候不直接注冊論壇帳號?最不可理解的,是注冊的時候用郵箱注冊了,發驗證碼到郵箱了,說明郵箱真實可用,登錄進來再注冊論壇帳號,居然還要驗證郵箱,論壇可以設置去掉郵箱驗證激活,這樣操作重復了!
好的,感謝反饋,后續會改善
- 1藍天采集器BUG反饋
- 2dedecms后臺用嗎密碼忘記了-找回的簡單操作方法
- 3藍天采集器自動采集-訪問觸發 里面的參數怎么???有沒有大神解答一下
- 4藍天采集器資訊列表頁鏈接采集規則教程分享
- 5藍天采集器無法檢測到本地CMS
- 6藍天采集器安裝的時候報錯了。。。
- 7寶塔控制面板php.ini文件在那個文件目錄里面
- 8藍天采集器采集重復: 被采集的內容頁網址會自動變導致重復
- 9搜索引擎SEO優化需要了解它的運算邏輯和工作流程
- 10藍天采集器論壇招版主,截止12月底
- 11PbootCMS升級時文件IndexController.php更新失敗,請重試!解決辦法
- 12藍天采集器為什么我的采集間隔失效了
- 13藍天采集器幫忙設置下采集規則
- 14163K網站系統圖片系統+七牛云存儲配置教程
- 15藍天采集器Z-BlogPHP 1.5.1 Zero發布插件有誰成功的
- 16藍天采集器PHP7的版本什么時候出
- 17藍天采集器安裝好后登錄提示這個
- 18藍天采集器如何循環采集某一個頁面
- 19蜀戎seo教你分分鐘破解eval(function(p,a,c,k,e,d){}))的JavaScript代碼
- 20163K網站系統X10_V1升級教程
-
SEO月推廣運維服務參考
一個好的SEO學習人員應該給自己制定一個SEO計劃表B2B商鋪第一個:<一呼百應>商鋪 http://www.youboy.com/第二個:<95供求網>商鋪&n···
-
FastAdmin系統-Bty分銷系···
Bty分銷系統v5數據庫表:“admin_id” 管理員ID-在管理員頁面看對應的數字“sort_id” 欄目ID-登錄后臺----文章管理---分類管理---ID···
-
藍天采集器有沒有可能增加這么一個“采···
2.2版本 數據處理》關鍵詞過濾或者條件判斷
-
藍天采集器如何導入函數插件使用操作教···
藍天采集器如何導入函數插件操作教程,在許多時候我們需要對采集來的內容作處理,這個時候呢就需要用到我們的函數插件來進行處理。今天蜀戎網絡給大家講解一下如何導入函數插件使用。登陸我們的藍天采集器后臺,依次選擇---云端---函數插件右上角---···
-
藍天采集器發布到mysql出錯
在后臺已經清除了緩存 再試的結果還是如下,數據庫測試成功 但保存成功后,再測試又提示數據連不上了,再試測試采集 還是連不上了 數據庫編碼 utf8和 utf-8都試了 結果還是一樣。 是不是php7?藍天采集···