laravel+queryList爬虫各大壁纸网站,打造自己的壁纸网站

壁纸爬虫网站#

项目已经适配的壁纸网站

项目地址:github.com/Juenfy/wallpaper

git clone https://github.com/Juenfy/wallpaper.git

cd wallpaper

composer install

项目里有两个数据库文件,自己导入,.env 里做好配置
这是爬的壁纸数据,是按源壁纸网站各分类分页爬虫的,数据不会重复
laravel+queryList爬虫各大壁纸网站,打造自己的壁纸网站

项目技术栈:

  1. laravel 队列,爬虫任务都是丢到队列里跑的,延时执行,避免频繁请求,爬出来的壁纸数据会持久化到数据库中。
    执行下面命令监听消费队列:

    php artisan queue:listen --queue=default --timeout=0

  2. 定时任务配合 totem 管理面板去管理定时任务。
    访问 totem:自己项目域名 /totem,比如我的就是 wallpaper.com/totem
    laravel+queryList爬虫各大壁纸网站,打造自己的壁纸网站

  1. QueryList,一款基于 phpspider 二次开发的爬虫框架。

  2. 后台直接用 laravel-admin 的,省事。
    访问后台:自己项目域名 /admin,比如我的就是 wallpaper.com/admin
    账号:admin 密码:admin

  3. 随便写了一个壁纸的展示列表。
    访问:直接域名即可,比如我的就是 wallpaper.com
    瀑布流加载,但加载下一页动画效果有 bug,会重叠
    laravel+queryList爬虫各大壁纸网站,打造自己的壁纸网站

本作品采用《CC 协议》,转载必须注明作者和本文链接
《L05 电商实战》
从零开发一个电商项目,功能包括电商后台、商品 & SKU 管理、购物车、订单管理、支付宝支付、微信支付、订单退款流程、优惠券等
《L04 微信小程序从零到发布》
从小程序个人账户申请开始,带你一步步进行开发一个微信小程序,直到提交微信控制台上线发布。