scrapy+splash问题504 Gateway Time-out解决办法

1.3k 记录 发表评论
本地用scrapy + splash调试的时候好好的，到了服务器上就奇慢无比，爆出来的错误是： 504 Gateway Time-out 这明显是在服务器上，splash渲染页面的时候超时了。 而且在服务器上用curl，或者用浏览器访问，都是非常快的，就是走splash慢了。 导致这个问题的主要原因是：splash在下载某些资源的时候，花的时间太长了，这些资源可能是某个…

Docker Linux如何检测目录(或文件)变化来执行给定命令

517 记录 发表评论
在此以PHP容器为例，当网站上传文件时，同步文件到云存储。 同步的方法很多，直接写在PHP网站代码中，或者用本章所讲的内容，利用Linux来侦测目录及目录下文件的变化，来异步实现文件同步。 首先，在Dockerfile或者容器中安装inotify： apt-get install inotify-tools 然后，编写Bash脚本，并运行： ##################################…

Nginx root和alias的区别

792 服务器 发表评论
root和alias的主要区别是： 使用root，实际的路径就是：root值 + location值。 使用alias，实际的路径就是：alias值。 例如， 有一张图片，URL是：www.awaimai.com/static/a.jpg 它在服务器的路径是：/var/www/app/static/a.jpg 那么用root的配置是： location /static/ { root /var/www/app/; } 用alias的配置就是： location /static/…

WordPress开发之插件启用错误抓取

237 记录 发表评论
开发WordPress插件时，如果启用时出现错误，用try...catch时抓不到错误的。 WordPress有内置的错误处理方法，使用如下： function custom_save_error($plugin_name) { $out = '===================BEGIN===================='.PHP_EOL; $out .= 'Time : '.date("Y/m/d H:i:s").PHP_EOL; $out .= 'Plugin :'.$plugin_name.PHP_EOL; $out …

Youtube API使用proxy代理

189 记录 发表评论
通过YouTube API，我们可以轻松获取YouTube播放列表、视频和分类等信息。不过前提是首先先申请一个DEVELOPER_KEY，申请地址：https://console.cloud.google.com/apis/credentials。 不过，在国内并不能直接连接YouTube，也不能直接连接YouTube API。下面以获取视频信息为例，代码： from googleapiclient.discovery import build YOUTU…

高效程序员Windows系统安装什么程序？

326 记录 发表评论
Sumatra PDF - 免费小巧的pdf阅读工具 Beyond Compare - 非常好用的文本/代码比较工具 Navicat Premium - 数据库管理工具 JetBrains 全家桶 PHPStorm - PHP IDE编辑器 IntelliJ IDEA - Java IDE 编辑器 Pycharm - Python IDE编辑器 Webstorm - 前端开发编辑器 babun - Windows版本的zsh命令行工具 Sublime Text - 简洁优雅的轻量级代码…

约瑟夫环问题（猴子选大王）PHP版

548 算法 一条评论
约瑟夫斯问题问题有时候也被描述成猴子选大王问题，题目如下。（最后会贴上约瑟夫问题的来历） 一群猴子排成一圈，按1,2,…,n依次编号。 然后从第1只开始数，数到第m只,把它踢出圈，从它后面再开始数，再数到第m只，在把它踢出去…，如此不停的进行下去，直到最后只剩下一只猴子为止，那只猴子就叫做大王。 要求编程模拟此过程，输入m、n,…

如何记忆PHP的ceil、floor、round函数

349 PHP教程 一条评论
ceil()、floor()和round()是PHP中的3个取整函数， 这3个函数用法都一样，但是结果不同， 在经常运算的场景下，记住他们的区别就很受用。 ceil：进一法取整 英文意思装天花板，注意跟cell（细胞）不是同一个词 floor：舍去法取整 英文意思是地板、装地板 round：四舍五入法取整 英文意思是圆、大约 这些函数我们跟英语意思结合起来，就很轻松了。