全新熱搜熱門榜內容系統聚合源碼

全新熱搜熱門榜內容系統聚合源碼

特色:

1. 前端純 HTML+JS+JSON(鏈接統計除外),后端 python 生成標準 JSON

2. 自帶 30 幾個常用網站采集規則

3. 多線程抓取,30+ 網站 5 秒內采集完畢

4. 相同網站放在一個框架內,可局部刷新和滾動

5. 更新時間顯示 (按采集頁的自帶更新時間或按時間排序的第一條時間采集,沒有的為采集完成時間)

6. 內容鏈接防盜鏈, 鏈接通過 base64+ 字符逆序 + 大小寫反轉 +base64 實現加密 (更換大小寫轉換順序或增加數字替換可實現不同密碼加密)

7. 內容鏈接點擊統計

8. 部分內容鼠標懸停提示 (如 appstore 排行有更新內容、時間、版本號)

安裝:

1.python3 caiji.py 采集(保持后臺運行請用 screen 或 nohup)

2. 打開首頁訪問

注:

caiji.py 為后端采集程序,其余為前端需在同一目錄

相應設置修改請查看源碼中的注釋

admin.php 為第三方數據庫管理程序,用于內容鏈接統計查看(默認密碼 admin, 請在文件中修改)

點擊統計數據庫 log.db 會在首次訪問內容鏈接時生成,如未建立請保證主目錄可寫

為了安全,后端程序 caiji.py 和數據庫查看程序 admin.php 請改為復雜文件名, 或移動到非 web 目錄 (需同時修改文件內的生成 json 保存目錄為網站根目錄,默認為當前目錄)

默認使用多線程抓取,如有問題請改用單線程

今日頭條的采集請更換為自己的 cookie,頭條短時間采集內容相同的太多 (目前 1 分鐘采一次合并 10 次數據),相同 cookie 分段采集后幾乎不會有重復的,但采集一段時間后推薦的都是雜七雜八無關的垃圾內容 (請定期更換 cookie 或自行加入隨機的頭條 cookie 生成規則)

采集站的 logo 大部分已修改為透明圖層 png,在非白色背景下可能會很難看

 

下載地址;

? 版權聲明
THE END
喜歡就支持一下吧
點贊10 分享