feapder v1.4.3

更新

1. 批次爬虫获取task值的方式支持以下几种

# 列表方式
id, url = task
id = task[0]
url = task[1]
# 字典方式
id, url = task.id, task.url
id, url = task.get("id"), task.get("url")
id, url = task["id"], task["url"]

feapder v1.4.2

Bug Fixes

1 . 修复代理池问题

feapder v1.4.1

更新

1. response支持BeautifulSoup

feapder 1.4.1-beta1

新增

1. AirSpider 支持item自动入库

feapder v1.3.8-beta1

Bug Fixes

1. 修复feapder使用阿里云redis集群，lua报错问题

feapder v1.4.0

更新

1. 将不常用的库拆出来，安装分为通过版，完整版

feapder v1.3.9

Bug Fixes

1. 修复邮箱报警导入包的bug

feapder v1.3.8

新增

1. 支持邮件报警，钉钉报警，可设置报警等级

feapder v1.3.7

Bug Fixes

1. 修复去重bug

feapder v1.3.6

Change List

1. Item中的per_to_db函数修正为pre_to_db， per_to_db函数废弃

优化

1. 优化pre_to_db函数调用位置，使其在spider向ItemBuffer中存放item时调用，而不是ItemBuffer将item入库前才调用