Commit Graph
1530 Commits
Author SHA1 Message Date
marvzhang 7a75e643ea 加入批量运行爬虫 2020-02-22 19:12:24 +08:00
marvzhang 8c059c912e 加入批量删除爬虫任务 2020-02-22 17:35:51 +08:00
marvzhang 4365d14ece 暂时停用自动检测Scrapy项目功能 2020-02-22 12:48:15 +08:00
marvzhang 15ea0da0f3 加入批量删除爬虫 2020-02-22 12:44:58 +08:00
marvzhang 52ba29045e updated dockerpush.yml 2020-02-22 11:31:44 +08:00
marvzhang 57feee8268 优化加载效果 2020-02-21 22:32:59 +08:00
marvzhang a346b64bdc 加入scrapy spider跳转 2020-02-21 22:28:41 +08:00
marvzhang b4fa3db0b6 点击爬虫跳转相应文件 pipelines.py 2020-02-21 19:05:32 +08:00
marvzhang d7437c4eb1 加入scrapy pipelines支持 2020-02-21 17:12:57 +08:00
marvzhang 0ce810da20 更新名称 2020-02-21 16:49:59 +08:00
marvzhang 893ede30e2 修复scrapy items问题 2020-02-21 16:46:16 +08:00
marvzhang d931f9af8e 加入scrapy items.py支持 2020-02-21 15:07:54 +08:00
marvzhang f17f3ef2cf 支持添加scrapy爬虫时选择模版 2020-02-20 18:30:07 +08:00
marvzhang c350d7d3d9 加入添加scrapy项目 2020-02-20 17:33:45 +08:00
marvzhang 6e3ce8a1bc updated CHANGELOG 2020-02-20 13:51:48 +08:00
marvzhang c18921ce4b refactor code 2020-02-20 12:28:26 +08:00
marvzhang e3883faf1c 优化爬虫列表页面 2020-02-20 11:52:28 +08:00
marvzhang 7de40f415b Merge remote-tracking branch 'origin/develop' into develop 2020-02-19 17:24:39 +08:00
marvzhang 010f3ec1fa 加入长任务支持 2020-02-19 17:24:16 +08:00
marvzhang 80aef95e48 加入版本检测 2020-02-19 13:17:01 +08:00
marvzhang e4c012cf2f 加入版本检测 2020-02-19 13:16:46 +08:00
marvzhang 2b084d8670 updated CHANGELOG 2020-02-19 10:42:51 +08:00
marvzhang 3bd3c0117b added dockerpush.yml 2020-02-19 10:31:50 +08:00
marvzhang 74f3463659 updated docker_init.sh 2020-02-18 22:30:45 +08:00
marvzhang 48ff9324f0 fixed crawlab-sdk issue 2020-02-18 17:10:08 +08:00
marvzhang 51a01e1f32 fixed ssh-keygen issue 2020-02-18 15:20:57 +08:00
marvzhang 06f1d6a8ac fixed unable to update is_scrapy issue 2020-02-18 14:57:57 +08:00
marvzhang 5c65ed4da1 更改ssh逻辑 2020-02-18 13:42:31 +08:00
marvzhang 92c190b104 添加爬虫加入git 2020-02-18 12:19:46 +08:00
marvzhang 575d68a6d8 code cleanup 2020-02-18 12:17:44 +08:00
marvzhang 0cb2e8134c 加入Git同步 2020-02-18 12:15:40 +08:00
marvzhang f83a041cd1 加入git同步 2020-02-17 18:12:59 +08:00
marvzhang a52c94c7cc 加入统计 2020-02-17 15:24:31 +08:00
marvzhang 93f1cf1f2e 更新添加scrapy爬虫 2020-02-17 14:20:42 +08:00
marvzhang bb972e98ef 加入添加scrapy爬虫 2020-02-17 14:06:16 +08:00
marvzhang 25b4c7d272 完成scrapy设置 2020-02-17 11:52:26 +08:00
marvzhang dc38642dca 加入settings.py同步 2020-02-17 11:15:16 +08:00
marvzhang cdaf3363c8 添加Scrapy设置后端 2020-02-17 10:31:59 +08:00
marvzhang 25cee2b492 添加Scrapy设置 2020-02-17 10:30:32 +08:00
marvzhang d80b977f49 加入自动搜索 2020-02-16 11:25:04 +08:00
marvzhang 69e4c23115 更新scrapy参数 2020-02-16 10:38:41 +08:00
marvzhang f3f8d3aeb8 在定时任务中加入Scrapy参数 2020-02-16 10:32:56 +08:00
marvzhang cec35a2855 加入scrapy参数 2020-02-16 10:23:09 +08:00
marvzhang 01fefbee88 加入scrapy日志选择 2020-02-15 21:25:21 +08:00
marvzhang acdf4d5951 加入scrapy爬虫支持 2020-02-15 18:28:37 +08:00
marvzhang e2b9d285da updated README 2020-02-14 15:19:55 +08:00
marvzhang 127e4ffca6 加入统计 2020-02-14 15:18:08 +08:00
marvzhang 0a7f3e8f2e updated CHANGELOG 2020-02-14 09:28:04 +08:00
marvzhang 96a3be99a1 updated CHANGELOG 2020-02-14 09:27:35 +08:00
marvzhang 60c8c4dcb4 fixed modal issue 2020-02-13 17:23:31 +08:00