pipline， 这里用到setting的设置大家也可以学下，在pipeline里引用spider定义的 custom_setting
# -*- coding: utf-8 -*-
# Define your item pipeli...
admin
4天前 4℃ 0评论
0喜欢
错误如下
cross-env NODE_ENV=development webpack --progress --hide-modules --
config=node_modules/laravel-mix/setup/webpack....
admin
7个月前 (08-06) 174℃ 0评论
0喜欢
pyDash是一个轻量且基于web的Linux性能监测工具，它是用Python和Django加上Chart.js来写的，可以监视Linux服务器资源，比如CPU、内存、网络统计、在线用户的进程等。仪表盘完全由主要的Python发行版本所提...
admin
8个月前 (07-06) 66℃ 0评论
1喜欢
Netstat 简介
Netstat 是一款命令行工具，可用于列出系统上所有的网络套接字连接情况，包括 tcp, udp 以及 unix 套接字，另外它还能列出处于监听状态（即等待接入请求）的套接字。如果你想确认系统上的 Web 服务有没有...
admin
8个月前 (06-14) 88℃ 0评论
0喜欢
先上代码
import re
import requests
url = 'https://www.qidian.com/all?chanId=4&orderId=5'
head...
admin
9个月前 (05-31) 85℃ 0评论
0喜欢
思路
对日志进行正则匹配，通过读行，一条条分析，分析结果存入sqlite数据库
日志格式
babyhealth:[2016-05-03 19:21:23] INFO orderinfo:472 - v41/nbCode/getauth||1...
admin
9个月前 (05-24) 97℃ 0评论
0喜欢
CentOS 6 系统默认 Python 版本是：2.6.6 平时在使用中遇到很多的库要求是 2.7.x 版本的库，比如使用 ConfigParser 库，在 2.6 版本库就不支持没有 value 值的配置项，需要升级到 2.7 以上的库...
admin
9个月前 (05-23) 104℃ 0评论
0喜欢
nginx的nginx.cnf中，使用log_format字段可以指定日志的格式文件。
log.fromat：
log_format access ' [$time_local] | $host | $remote_addr | $requ...
admin
9个月前 (05-17) 73℃ 0评论
0喜欢
github上找了一个活跃度很高的代理池，python版本，感觉比较适合当前项目，大家可以试用下：
https://github.com/jhao104/proxy_pool
下载源码:
git clone git@github.com:j...
admin
11个月前 (03-28) 93℃ 0评论
0喜欢
对于静态文件发布浏览器无法自动刷新，只需要在代码中加入发布版本控制，有静态文件修改时，浏览器会重新加载静态文件，不需要手动清除缓存或者等待缓存过期
示例如下：
<link rel="stylesheet" type="text/css...
admin
11个月前 (03-23) 108℃ 0评论
0喜欢
