java怎么写爬虫？
爬虫都是基于现有的框架来开发的，基于Java语言实现的爬虫框架很多，这里列举一个:WebMagic，它的架构设计参照了Scrapy，应用了httpClient、Jsoup等JAVA成熟的工具，包含四个组件(Downloader、PageProcessor、Scheduler、Pipeline)，Spider是WebMagic内部流程的核心，上面的四个组件都相当于Spider的一个属性，通过设置这个属性可以实现不同的功能。
用什么软件编写j***a？
J***A编程常用的软件：
1、eclipse：
Eclipse 是一个开放源代码的、基于 J***a 的可扩展。就其本身而言，它只是一个框架和一组服务，用于通过插件组件构建开发环境。***的是，Eclipse 附带了一个标准的插件集，包括 J***a 开发工具（J***a Development Tools，JDT）。
2、MyEclipse：
MyEclipse是Eclipse的升级版，也是一款功能强大的J2EE集成开发环境，由Genuitec公司发布，提供免费版和收费版。被誉为最好用的J***a IDE之一。
MyEclipse 是对Eclipse IDE的扩展，利用它可以在数据库和J***aEE的开发、发布以及应用程序服务器的整合方面极大的提高工作效率。
3、IntelliJ IDEA：
IntelliJ IDEA是一款综合的J***a 编程环境，被许多开发人员和行业专家誉为市场上最好用的IDE之一，与MyEclipse齐名。
它提供了一系列最实用的的工具组合：智能编码辅助和自动控制，支持J2EE，Ant，JUnit和CVS集成，非平行的编码检查和创新的GUI设计器。
4、NetBeans：
在这里只推荐两个最常用的：
1、 eclipse：eclipse是几年前比较流行的一款IDE，优点是开源并且免费的，而且eclipse是不需要安装的，下载下来就直接可以用；缺点是代码提示不够友好，界面不是很美观。
2、 IDEA：这是jet brain推出的一款IDE，而且目前正在逐渐取代eclipse，它的功能十分强大，代码补全也很完善，还有丰富的在线插件市场，但是是付费的。不过学生可以免费用，也可以去找破解版
j***a开发环境的安装和配置？
要安装和配置J***a开发环境，首先需要下载并安装JDK（J***a Development Kit），然后设置J***A_HOME环境变量，将JDK的bin目录添加到系统的Path变量中。
接着下载并安装一个J***a集成开发环境（IDE），比如Eclipse或者IntelliJ IDEA等。
