yyyyyyyyyyyyyyyyyyyy

博客园 首页 新随笔 联系 订阅 管理
上一页 1 ··· 275 276 277 278 279 280 281 282 283 ··· 367 下一页

2015年8月11日 #

摘要: JAVA爬虫 WebCollector 爬虫简介: WebCollector是一个无须配置、便于二次开发的JAVA爬虫框架(内核),它提供精简的的API,只需少量代码即可实现一个功能强大的爬虫。 爬虫内核: WebCollector 致力于维护一个稳定、可扩的爬虫内核,便于开发者进行灵活的二次开发。 阅读全文
posted @ 2015-08-11 02:29 xxxxxxxx1x2xxxxxxx 阅读(649) 评论(1) 推荐(0)

摘要: Nutch是一个开源Java实现的搜索引擎。它提供了我们运行自己的搜索引擎所需的全部工具。包括全文搜索和Web爬虫。Nutch的创始人是Doug Cutting,他同时也是Lucene、Hadoop和Avro开源项目的创始人。Nutch诞生于2002年8月,是Apache旗下的一个用Java实现的开... 阅读全文
posted @ 2015-08-11 02:28 xxxxxxxx1x2xxxxxxx 阅读(313) 评论(0) 推荐(0)

摘要: 主要是配置larbin.conf文件和options.h注意:更改前者可以直接运行,如果更改了第二个就要重新make了!!! 如果你英文够好的话就可以直接看了,都有详细的解释。不行的话就看翻译吧http://blog.chinaunix.net/uid-26548237-id-3391533.htm 阅读全文
posted @ 2015-08-11 02:07 xxxxxxxx1x2xxxxxxx 阅读(546) 评论(0) 推荐(0)

摘要: methanol模块化的可定制的网页爬虫软件,主要的优点是速度快。下载:http://sourceforge.net/projects/methabot/?source=typ_redirectREADME安装SpiderMonkeyhttps://developer.mozilla.org/en-... 阅读全文
posted @ 2015-08-11 02:06 xxxxxxxx1x2xxxxxxx 阅读(145) 评论(0) 推荐(0)

2015年8月10日 #

摘要: Tornado就是我们在 FriendFeed 的 Web 服务器及其常用工具的开源版本。Tornado 和现在的主流 Web 服务器框架(包括大多数 Python 的框架)有着明显的区别:它是非阻塞式服务器,而且速度相当快。得利于其 非阻塞的方式和对epoll的 运用,Tornado 每秒可以处理... 阅读全文
posted @ 2015-08-10 16:48 xxxxxxxx1x2xxxxxxx 阅读(141) 评论(0) 推荐(0)

摘要: Python 技术专题Python 是由 Guido van Rossum 开发的,可免费获得的。是一种非常高级的解释型语言。其语法简单易懂,而且面向对象的语义功能强大又灵活,Python 可以广泛使用并具有高度的可移植性。本专题内容包括可爱的 Python 系列、Python 探索系列、Pytho... 阅读全文
posted @ 2015-08-10 16:42 xxxxxxxx1x2xxxxxxx 阅读(261) 评论(0) 推荐(0)

摘要: 1icedx 241 天前 via Android ♥ 1考虑到Windows 下的类Alfred 软件都太傻逼 自己用PyQT 写了一个 2 crazyxin1988 2... 阅读全文
posted @ 2015-08-10 16:36 xxxxxxxx1x2xxxxxxx 阅读(1290) 评论(0) 推荐(0)

摘要: 2013年Python社区诞生了很多实用的开发工具,这些工具 在一定程度上 可以帮助你节省更多的时间。本文为你汇总了这些工具,它们大部分都是开源的,你还可以通过源码来学习更多的Python开发知识。 1. Radon Radon是一个用于 ... 阅读全文
posted @ 2015-08-10 15:53 xxxxxxxx1x2xxxxxxx 阅读(209) 评论(0) 推荐(0)

摘要: 以正确的方式开源 Python 项目大多数Python开发者至少都写过一个像工具、脚本、库或框架等对其他人也有用的工具。我写这篇文章的目的是让现有Python代码的开源过程尽可能清 晰和无痛。我不是简单的指——“创建一个GitHub库,提交,在Reddit上发布,每天调用它”。在本文的结尾,你可以把... 阅读全文
posted @ 2015-08-10 15:47 xxxxxxxx1x2xxxxxxx 阅读(371) 评论(0) 推荐(0)

摘要: 如果你喜欢Python 那么你不得不知的几个开源项目1.Trac Trac拥有强大的bug管理功能,并集成了Wiki用于文档管理。它还支持代码管理工具Subversion,这样可以在 bug管理和Wiki中方便地参考程序源代码。Trac有着比较强大的插件系统,可以通过插件来实现各种各样的功能,比如支... 阅读全文
posted @ 2015-08-10 15:32 xxxxxxxx1x2xxxxxxx 阅读(223) 评论(0) 推荐(0)

上一页 1 ··· 275 276 277 278 279 280 281 282 283 ··· 367 下一页