技术饭 微信图片防盗链“此图片来自微信公众平台 未经允许不得引用”的解决方案
微信图片防盗链“此图片来自微信公众平台 未经允许不得引用”的解决方案，已经获取微信公众号发布的图片，但不能正常显示 ，提示：此图片来自微信公众平台 未经允许不得引用。这是怎么回事呢？遇到这种问题是因为微信公众平台对图片采用了防盗链设置，微信对外提供了API接口，让我们可以通过授权的方式获取到自己公众号里面的文章，或者你也可以通过爬虫去抓取微信的文章，但是微信的图片默认是不允许外部调用的。
阅读全文 » 1961天前2018年12月19日
技术饭 thinkphp5分页抓取数据并入库
PHP可以通过curl抓取其他网站接口数据，抓取到的数据量有时候很多，这个时候如果进行入库的话会造成执行时间过长而停止报错500，解决方案有：1、php配置值max_execution_time修改大一些，还有就是nginx的执行时间也可以修改大一些，但这回造成网页一直卡着也很消耗服务器内存；2、进行分页抓取。
阅读全文 » 2032天前2018年10月09日
技术饭 PHP抓取远程图片到本地保存
最近在工作中需要开发了一个用户素材功能，里面需要将网上的各种图片素材进行本地化存储。于是在网上找了一些相关资料，并根据自身开发需要，整理了一下主要的逻辑代码。
阅读全文 » 2054天前2018年09月17日