突然跳水暴跌,咋回事? |
有熟悉爬虫技术的吗?
1、具备数据采集,爬虫相关工作经验;
2、精通JAVA 或者Python, 熟悉一种以上主流的爬虫工具优先,如webmagic,nutch;
3、精通网页抓取原理及技术,正则表达式、xpath,能够从结构化和非结构化的数据中获取信息;
能搞定这些,我倒是很愿意交流。
@tianshi4444 Python 对应的是 scrapy,而且看你采集啥,有些不需要框架。我之前采集过股票数据,不过当时不知道怎么利用,现在炒股水平略有提高,准备弄个炒股的公众号玩玩。
@mclxly 你采集哪些数据?网页端的?移动端的?数据如何清洗,如何入库?我不建议你搞公众号玩,这个浪潮过了。
@tianshi4444 东财官网交易相关数据。没有清洗。直接存入MySQL。我自己玩,因为发觉券商APP对历史交易的数据没有充分利用,而且连交易成本都不告知,需要手动计算。
@mclxly 其实,可以做的更深入一些,你看,我们能不能合作一把,你帮我搭建一个爬虫程序,对指定的网页,app端的交易数据进行下载,存储。按照软件外包的价格来算。
@tianshi4444 我对你这个有兴趣,之前简单的爬过h网的图片
@tianshi4444 python 写
@tianshi4444 我之前弄了一堆数据,但不会建策略就放弃了。咱们WX聊聊吧: legoo8(弓**)
过早客微信公众号:guozaoke • 过早客新浪微博:@过早客 • 广告投放合作微信:fullygroup50 鄂ICP备2021016276号-2 • 鄂公网安备42018502001446号