源码简介：

在移动互联网时代，我们每天都会接收到大量的信息，但是想要知道哪些是最热门的话题和内容，往往需要花费很多精力去搜索和筛选。因为有这个需要，一个全新整合热搜榜单热门榜单内容系统聚合源码就应运而生了，它可以帮助用户快速获取最新、最热门的内容。

这是一个高效且安全的网站内容采集工具，前端使用纯HTML+JS+JSON技术，后端采用Python生成标准JSON数据。它自带了30多个常用网站的采集规则，实现多线程抓取，30多个网站5秒内可以采集完毕。同一个网站的内容放在一个框架内，局部刷新和滚*能操作方便。采集内容会显示近的更新时间，如果采集页没有自带更新时间则会以时间排序的第一条采集时间作为更新时间，采集完成时间也可被视为更新时间。内容链接防盗链使用base64 + 字符逆序 + 大小写反转 + base64算法进行加密，可根据需要重新设置密码算法。同时还支持内容链接的点击统计，部分内容鼠标悬停提示等功能。安装简单，只需运行python3 caiji.py监控后台运行即可。

为了保证系统的安全性，建议将后端程序caiji.py和数据库查看程序admin.php改为复杂文件名，并移动到非web目录。如需修改相应设置，请查看源码中的注释。另外，为了避免采集数据量过大，今日头条的采集请更换为自己的cookie，并定期更换或自行加入随机的头条cookie生成规则，以保证采集数据的有效性。
————————————————

特色：

1.前端纯HTML+JS+JSON(链接统计除外)，后端python生成标准JSON

2.自带30几个常用网站采集规则

3.多线程抓取，30+网站5秒内采集完毕

4.相同网站放在一个框架内，可局部刷新和滚动

5.更新时间显示(按采集页的自带更新时间或按时间排序的第一条时间采集，没有的为采集完成时间)

6.内容链接防盗链,链接通过base64+字符逆序+大小写反转+base64实现加密(更换大小写转换顺序或增加数字替换可实现不同密码加密)

7.内容链接点击统计

8.部分内容鼠标悬停提示(如appstore排行有更新内容、时间、版本号)

安装：

1.python3 caiji.py采集（保持后台运行请用screen或nohup）

2.打开首页访问

注：

caiji.py为后端采集程序，其余为前端需在同一目录

相应设置修改请查看源码中的注释

admin.php为第三方数据库管理程序，用于内容链接统计查看（默认密码admin,请在文件中修改）

点击统计数据库log.db会在首次访问内容链接时生成，如未建立请保证主目录可写

为了安全，后端程序caiji.py和数据库查看程序admin.php请改为复杂文件名,或移动到非web目录(需同时修改文件内的生成json保存目录为网站根目录，默认为当前目录)

默认使用多线程抓取，如有问题请改用单线程

今日头条的采集请更换为自己的cookie，头条短时间采集内容相同的太多(目前1分钟采一次合并10次数据)，相同cookie分段采集后几乎不会有重复的，但采集一段时间后推荐的都是杂七杂八无关的垃圾内容(请定期更换cookie或自行加入随机的头条cookie生成规则)

采集站的logo大部分已修改为透明图层png，在非白色背景下可能会很难看

图片：