V2EX › Fing 的所有回复 › 第 2 页 / 共 3 页

V2EX = way to explore

V2EX 是一个关于分享和探索的地方

现在注册

已注册用户请登录

1 2 3

❮

❯

2015-08-12 17:53:11 +08:00

回复了 funCoder 创建的主题 › 问与答 › 有什么专门搜索博客文章的搜索引擎？

这个问题你应该@我

2015-08-12 17:38:32 +08:00

回复了 694380889 创建的主题 › 问与答 › 这样的搜索引擎，谁知道？

你可以去看看googlebridge，有源码

2015-08-11 11:36:03 +08:00

回复了 Fing 创建的主题 › Python › 基于 python 写的一个 google 的爬虫

@sinosure bottle site:v2ex.com/t
http://googlebridge.com/search/?q=+bottle+site%3Av2ex.com%2Ft&start=

2015-08-06 14:00:18 +08:00

回复了 Fing 创建的主题 › Python › 基于 python 写的一个 google 的爬虫

@WKPlus 目前是的，以后可能只存一天或者根据热度来决定保存时间

2015-08-05 23:05:53 +08:00

回复了 chenhuang1973 创建的主题 › 酷工作 › 急招 Python 开发工程师，工资待遇都不错

给个邮箱啊

2015-08-05 17:59:37 +08:00

回复了 Fing 创建的主题 › Python › 基于 python 写的一个 google 的爬虫

@heaton_nobu 你是棒棒的

2015-08-05 15:45:27 +08:00

回复了 recall704 创建的主题 › 求职 › 一年 django 求职

@recall704 大哥我问的是你在上海的待遇

2015-08-05 15:38:13 +08:00

回复了 recall704 创建的主题 › 求职 › 一年 django 求职

@KeC 邮箱呢

2015-08-05 15:33:42 +08:00

回复了 recall704 创建的主题 › 求职 › 一年 django 求职

@recall704 你在上海目前啥待遇能透露下吗？

2015-08-05 13:59:17 +08:00

回复了 recall704 创建的主题 › 求职 › 一年 django 求职

@KeC 上海的啥要求，能说下吗？

2015-08-05 13:13:46 +08:00

回复了 Fing 创建的主题 › Python › 基于 python 写的一个 google 的爬虫

@invite 你可以给我一个关键词，我给演示一下

2015-08-05 13:11:19 +08:00

回复了 Fing 创建的主题 › Python › 基于 python 写的一个 google 的爬虫

@zhuzhenyu ......

2015-08-05 10:52:29 +08:00

回复了 Fing 创建的主题 › Python › 基于 python 写的一个 google 的爬虫

@tdifg 你说了算咯~

2015-08-05 09:11:18 +08:00

回复了 Fing 创建的主题 › Python › 基于 python 写的一个 google 的爬虫

@limuxy 我也跟你有同样的想法，所以我才想到到V2发贴，多一点访问我好在后台看状态。然后目前的情况就是：
1,服务器负载很小，做这些读写操作不会影响到服务器的运行。
2,内存处理跟这种读写的方式也许会有延时，不过是ms为单位，而这个站点主要做的是抓取google国外站，抓取分析可能要2-6秒，所以后者是s为单位，所以前者的ms级别对于这个站点就微乎其微了。而且对于常用关键词放到数据库反而是个缓存，这是我目前的想法。

2015-08-04 23:28:21 +08:00

回复了 Fing 创建的主题 › Python › 基于 python 写的一个 google 的爬虫

@anexplore bingo

2015-08-04 23:27:12 +08:00

回复了 Fing 创建的主题 › Python › 基于 python 写的一个 google 的爬虫

@est 我技术很菜，但我还是想保持一点神秘感~

2015-08-04 23:22:23 +08:00

回复了 Fing 创建的主题 › Python › 基于 python 写的一个 google 的爬虫

@anexplore 我能用阿里云爬，我就能让他封不了。

2015-08-04 23:21:27 +08:00

回复了 Fing 创建的主题 › Python › 基于 python 写的一个 google 的爬虫

@limuxy 刚做出来的时候不放，后来由于国内要备案，而且做这个站的目的很单纯，所以我选择要过滤一批数据，用数据库过滤，感觉跟栈的概念差不多，先放进去再拿出来~