adrianyoung 最近的时间轴更新 adrianyoung 最近的时间轴更新 |
adrianyoungV2EX 第 356398 号会员，加入于 2018-10-16 12:44:19 +08:00 |
adrianyoung
adrianyoung 最近回复了
2019-03-31 20:27:42 +08:00 回复了 adrianyoung 创建的主题 › 分享创造 › 写了一个 celery 爬虫监控 demo |
@6d6f33 我想吐槽一下的是我现在也没搞懂 celery 到底哪个版本是真正稳定的，定时任务的话肯定就跟时区问题挂钩我还没实际碰到过，如果有问题的话应该上去找找 issue，rq 没用过我了解下。
2019-03-30 09:45:34 +08:00 回复了 CriseLYJ 创建的主题 › Python › 人生的第一个 5k-star 项目诞生，感谢 V2EX 上所有的人，为此我要贡献一篇爬虫从入门到熟练的教程 |
支持一下，自己也写爬虫，借楼主宝地打个广告 [爬虫监控 demo]( https://github.com/adrianyoung/CrawlerMonitor)
2019-03-29 11:27:58 +08:00 回复了 sunhk25 创建的主题 › Python › 如何比较两个列表的相似度 |
或者两个列表直接构建一个向量空间，算余弦距离
2019-03-29 11:19:00 +08:00 回复了 sunhk25 创建的主题 › Python › 如何比较两个列表的相似度 |
可以参考一下 BLEU 的惩罚因子
能够解决你提到的方法一的问题
能够解决你提到的方法一的问题
@huangdayu 大概是 k-max pooling 取了 3
2019-03-28 12:37:15 +08:00 回复了 ls904704081 创建的主题 › Python › 萌新求问一段代码的意思 |
网易云音乐的歌词数据抓下来就是这样的，一首歌里包含比较多的重复句，前面对应的一些播放时间。
2019-03-28 12:31:49 +08:00 回复了 adrianyoung 创建的主题 › 分享创造 › 写了一个 celery 爬虫监控 demo |
@pandachow 哈哈哈哈都是路人
2019-03-27 09:21:14 +08:00 回复了 zhangslob669 创建的主题 › Python › scrapy 去重与 scrapy_redis 去重与布隆过滤器 |
False Postive
2019-03-21 12:56:56 +08:00 回复了 szq8014 创建的主题 › 程序员 › 有多少 vimer 遇到过这个场景然后一通瞎按退出的? ::doge:: |
手快可进入
2019-03-19 20:02:37 +08:00 回复了 deepall 创建的主题 › Python › scrapy-redis 如何实现 post 请求 |
FormRequest 不起作用吗
Select Language