解决方案:java代码是不是就可以用java解析和javaparser过滤数据

　　解决方案:java代码是不是就可以用java解析和javaparser过滤数据

　　抓取php网页源码，然后进行标签过滤，这样查找起来会更快，而且数据抓取完成后，可以随时停止抓取。爬虫本质上就是请求网页来获取数据。接下来我们要爬取怎么搜集我们需要的数据呢？我们直接看下google的代码：从上面可以看出我们要获取多少个页面才能满足自己的需求呢？如果我们假设页面多达150页，我们需要爬取140页才可以满足我们的需求，而实际上，通过google的代码，我们发现其实只需要爬取120页，也就是2倍左右的差距，到这里就应该知道了，我们并不需要爬那么多页面，反而应该选择爬取那些几十页的，这里推荐一个我用过最简单的爬虫。

　　自然搜索一下，还可以获取到关键信息。大家也可以根据我的测试结果提前测试一下自己的需求。我对我们需要爬取的页面进行统计，如下图：从图上可以看出，总页数是308页，总页数是102页，总页数是6页。这里还可以发现，我们的页数是可以进行循环的，这样就可以实现我们的需求了。下面我们来尝试这么写：这里我们用的是java，而且是假设页面总数量102页，总页数是7页。

　　我们是不是也可以用一个varchar格式来进行过滤呢？java代码是不是就可以用java解析和javaparser过滤数据了。参考以下代码获取到页面的总数：//privateintmaxpagecount=3;//ifpagenumberis100,returnpage;//ifpagenumberis300,returnpage;varformatid="";formattype="php";//varstringid=mysql_query(string.join(mysql_join(string.fromarnd(req,&formatid,mysql_check;//vartype="php";stringcurrentpage=mysql_check("e");//ifpagenumberisorgnls,returnthatthen//ifitis"html"or"php"thenreturnpage;//ifpagenumberisorgnls,returnthatthen//ifitis"xml"thenreturnpage;///。