有没有Python爬虫大佬？

做一个数据采集系统需要哪些东西？
1,爬去的数据要存到哪儿？
数据库里吗？
还是哪儿？
2,爬虫需要用什么框架吗？什么框架比较好？
3,数据采集系统需不需要什么界面呢？需不需要做UI?#Python#
全部评论
2，scrapy 3,可以添加界面进行监控控制
1 回复 分享
发布于 2019-04-04 00:01
Scrapy 爬到mongodb，用django做界面
1 回复 分享
发布于 2019-04-04 03:39
1 ，数据库，或者excel表
点赞 回复 分享
发布于 2019-04-04 00:01
scrapy，pyspider
点赞 回复 分享
发布于 2019-04-04 07:45
先谢谢大佬们了😛
点赞 回复 分享
发布于 2019-04-04 13:16

相关推荐

10-27 15:35
门头沟学院 大数据开发工程师
直冲大厂！大数据开发学习路线
很多小伙伴在跟我交流的过程中，会问我这样一个问题："大数据框架这么多，学了有啥用，有没有一些框架可以不学，企业里面开发要求会用这么多框架吗"我刚开始学习大数据的时候也和大家一样，这么多框架，不知道从何下手，又想速战速决，还不知道自己学习的内容是否能够对付未来在企业的开发工作...之前自己在学习大数据的时候浪费了很多的时间，这里为了帮助大家在学习大数据的时候少走弯路，同时也是对自己过去三年学习大数据过程的一个总结，今天就好好跟小伙伴们说一说如何高效学习大数据，一路直通大厂！！！学习路线预览编程语言Java：对于目标岗位是数仓开发的同学来说，只需要学习Java基础部分即可，后续...
点赞 评论 收藏
分享
10-12 23:34
广东工商职业技术大学 Java
点赞 评论 收藏
分享
10-13 00:42
阿里巴巴灵犀互娱_前端开发(准入职员工)
点赞 评论 收藏
分享
10-16 19:05
江苏大学 Java
点赞 评论 收藏
分享
11-04 12:35
北京交通运输职业学院 Java
点赞 评论 收藏
分享
点赞 3 评论
分享

招聘动态

查看更多

杉川机器人

2025校园招聘

字节跳动

2025校园招聘

字节跳动Data

2025校园招聘

快手Star

2025届招聘

快手

销售类投递专区

库洛游戏

全站热榜

正在热议
# 晒一晒我的offer #
9711675次浏览 104845人参与
# 应届生被毁约被毁意向了怎么办 #
24625次浏览 232人参与
# 北方华创开奖 #
21335次浏览 244人参与
# 地方国企笔面经互助 #
2101次浏览 6人参与
# 查收我的offer竞争力报告 #
13831次浏览 192人参与
# 机械应届生薪资要多少才合适？ #
11892次浏览 57人参与
# 我的工作日记 #
20486次浏览 268人参与
# 寒假躺平还是提前实习 #
57116次浏览 419人参与
# 总结:哪家公司面试体验感最差 #
23813次浏览 116人参与
# 实习，投递多份简历没人回复怎么办 #
2383605次浏览 34203人参与
# 公司情报交流地 #
31117次浏览 219人参与
# 秋招OC许愿 #
224499次浏览 1855人参与
# 00后45度躺现状 #
35274次浏览 303人参与
# 不给转正的实习，你还去吗 #
1512952次浏览 16940人参与
# 没有实习经历，还有机会进大厂吗 #
803188次浏览 13774人参与
# 机械人，签完三方你在忙什么？ #
23228次浏览 119人参与
# 来聊聊机械薪资天花板是哪家 #
63542次浏览 431人参与
# 选完offer后，你后悔学本专业吗 #
7198次浏览 45人参与
# 0offer是寒冬太冷还是我太菜 #
880092次浏览 7868人参与
# 大家都开始春招面试了吗 #
409782次浏览 5222人参与
# 机械人怎么评价今年的比亚迪 #
41043次浏览 141人参与
牛客网
牛客企业服务