分类:技术

wordpress转存json数据

PYTHON存入json文件数据,文章内容保存为对应的文件 # -*- coding: utf-8 -*- import json import sys reload(sys) sys.setdefaultencoding("u...

admin 6个月前 (02-25) 62℃ 0评论 0喜欢

git hook自动发布代码

每次开发完提交代码到测试服务器都要进行相同的操作,是否可以直接触发操作? gitlab服务器提供了此功能 这里分为几个部分,gitlab服务器(github,自己搭建的gitlab, oschian的码云),线上代码(测试代码,生产代码),...

admin 6个月前 (02-25) 72℃ 0评论 0喜欢

centos下gitlab ce安装(简单入门版本)

我这里使用的是centos 7 64bit 虚拟机里unbuntu16.04是完整版本的,速度慢,果断放弃了 这里注意gitlab版本的ce与ee的区别,ce是免费的社区版本,ee是企业版本,个人开发者用ce就可以了,ee是付费的,免得后面...

admin 6个月前 (02-22) 69℃ 0评论 0喜欢

scrapy 分布式爬取并去重配置

这里的分布式去重用到三个东西 第一个为调度器, 第二个为优先级队列 第三个为持外化pipeline 这个需要安装scrapy-redis模块 1 # DUPEFILTER_CLASS = "scrapy_redis.dupefilte...

admin 6个月前 (02-21) 72℃ 0评论 0喜欢

scrapy setting log

Logging Scrapy提供了log功能,可以通过 logging 模块使用,程序初步调试阶段可以开启error级别日志,这样信息会少很多,方便定位初级错误 LOG_FILE = "mySpider.log" LOG_LEVEL = ...

admin 6个月前 (02-20) 72℃ 0评论 0喜欢

centos 安装php56

history命令历史 8 yum provides php #自带的只有5.4版本 9 rpm -Uvh https://mirror.webtatic.com/yum/el7/epel-release.rpm #更新源 10 rpm -...

admin 8个月前 (12-26) 139℃ 0评论 0喜欢