jsoup爬虫java爬虫框架都有什么？哪个比较好学易用？谢谢！知道有nutch和heritrix可以，但是学习

用java 编写爬虫是不是很简单

用java编写爬虫, 有丰富的第三方包, 使用起来比较容易 JSOUP : 强大的HMTL解析能力, 但抓取能力较弱. HttpClient: 强大专业的爬取能力.功能强大, 代码量较多. 解析起来稍微麻烦点 HtmlUnit: 可以模拟浏览器.没有界面,可以模拟填表,模拟点击等,甚至还支持JavaScript.但是内存占用较多,速度较慢. 一般根据需要,进行搭配使用 经常使用的搭配. HttpClient?爬取---->Jsoup解析-->MySQL存储

爱伦坡诗《爬虫》的赏析

您指的应该是埃德加·爱伦·坡（Edgar Allan Poe)的《征服者爬虫》The Conqueror Worm 吧 　　征服者爬虫 　　瞧！这是个喜庆之夜 　　在最近这些寂寞的年头！ 　　一群天使，收拢翅膀，遮 　　好面纱，掩住泪流， 　　坐在一个剧场，观看 　　一出希望与恐怖之剧， 　　此时乐队间间断断 　　奏出天外之曲。

　　装扮成上帝的一群小丑， 　　叽叽咕咕，自言自语， 　　从舞台这头飞到那头—— 　　他们只是木偶，来来去去 　　全由许多无形物支配， 　　无形物不断把场景变换， 　　从它们秃鹰的翅膀内 　　拍出看不见的灾难！ 　　那出杂剧——哦，请相信 　　将不会被人遗忘！ 　　因为它那被抓不住它的人 　　永远在追求的幻想， 　　因为一个永远旋转的怪圈 　　最后总是转回原处， 　　因为情节之灵魂多是罪愆， 　　充满疯狂，充满恐怖。

　　可看哟，就在那群小丑之中 　　闯进了一个蠕动的怪物！ 　　那可怕的怪物浑身血红 　　从舞台角落扭动而出！ 　　它扭动——扭动！真是可怕， 　　小丑都成了它的美餐， 　　天使们呜咽，见爬虫毒牙 　　正把淋淋人血浸染。

　　熄灭——熄灭——熄灭灯光！ 　　罩住每一个哆嗦的影子， 　　大幕像一块裹尸布一样， 　　倏然落下像暴风骤雨， 　　这时脸色苍白的天使， 　　摘下面纱，起身，肯定 　　这是一幕叫《人》的悲剧， 　　而主角是那征服者爬虫。

　　赏析：爱伦坡在征服者爬虫中表现出的人类宿命，以及那荒诞的人类天性，爱伦坡主张恐怖美学，此诗表现了荒诞得近乎疯狂的氛围。

借爬虫来抒发内心的愤懑不平，语言生动，结尾“这是一幕叫《人》的悲剧， 而主角是那征服者爬虫。

”引人深思 　　参考/view/63457.htm#5/09/1012/20/5LEV94SU00923M2M.html

如何用java实现网络爬虫抓取页面内容

下面的工具都可以实现java爬虫

JDK原生的类:HttpURLConnection HttpURLConnection : 优点是 jdk自带,?速度较快. 缺点是方法较少, 复杂一点的功能自己实现起来往往要大量的代码.

第三方的爬虫工具: JSOUP,HttpClient,HttpUnit 一般情况是HttpClient+ JSOUP配合完成爬取. HttpClient 获取页面. JSOUP解析网页, 得到数据 HttpUnit:相当于无界面的浏览器,缺点是内存占用较大,速度较慢. 优点是能执行js, 功能强大

java爬虫框架都有什么？哪个比较好学易用？谢谢！知道有nutch和heritrix可以，但是学习

登录的，建议你用jsoup带着cookie进去。

动态的，建议你用htmlunit。

webmagic和jsoup都很好学。

有时间学学，虽然不是必会，但是这种小工具说不定什么时候就用得上。