抓取网站数据代码实例下载-最代码

丶附耳聆听 LV21 2016年11月7日

原nodejs抓取大众点评网站数据,mysql+webstorm复制粘贴就能用

前二天运营部的同事让我帮爬下数据，爬完了发出来大家分享。sql脚本代码都有。甩进去就能跑，快上车，滴，学生卡！...

浏览449 评论6 下载49 牛币2 NodeJS 抓取网站数据 JavaScript

丶附耳聆听 LV21 2016年10月10日

原nodejs爬百度糯米数据,拿去就能用，ide是webstorm+Mysql

nodejs爬百度糯米图片,拿去就能用。这里演示第五条数据...

浏览393 评论3 下载22 牛币5 NodeJS 抓取网站数据 JavaScript

hackxhao LV15 2016年7月3日

原精java使用jsoup实现网页抓取---案例智联招聘求职信息抓取

{代码...}

浏览742 评论1 下载112 牛币5 jsoup 抓取网站数据 Java

依然在路上 LV17 2016年7月1日

原httpClient与jsoup的结合使用实现网页抓取数据的简单测试

本项目使用了httpClient与jsoup两个技术，可以运用在项目中，在这里只是简单的测试，在真实的web项目中我们可以创建一个实体类，然后将获取到的数据保存到数据库中，比如我们需要大量的新闻进行展示，我们就可以才要该技术就行获取新闻保存到数据库中即可。...

浏览937 评论3 下载297 牛币0 Apache HttpClient jsoup 抓取网站数据 Java

FlyHeLanMan LV11 2016年6月29日

原java swing开发的一个抓取快递100查询接口的小工具

最近对swing挺感兴趣，做了个小工具练手查询接口是抓取的快递100的查询接口快递单号查询很简单的一个xiao东西，适合新手学习欢迎交流~以下是效果图：做了下优化：增加了记录备注功能，如果已经存在备注则更新备注以下是效果图：有问题可以交流哦~代码已经更新重新打包上传~PS:不知道之前下载...

浏览409 评论6 下载84 牛币3 抓取网站数据快递查询 Java

Garfields LV9 2015年11月18日

原精一个基于Jsoup的java工具包,通配爬取,特别方便,支持任意导出

不用开发，直接使用。支持伪造头，伪造Cookie等可以导出文件可以使用div 页面元素就能爬取内容导入Eclipse直接用[+]com.pga.* [-]crawler.* //爬虫处...

浏览951 评论4 下载138 牛币6 jsoup 抓取网站数据 Java

已注销用户 LV34 2015年9月17日

原Java语言和Python语言编写相同功能脚本请求网页刷某个网站的博客阅读量

{代码...}这两天发现一个新网站，无聊就去注册了一个账号。为了混个脸熟，写了一篇博客，写完后，习惯性的去浏览看看。然后发现一个小小的bug，阅读量变了，于是想到了最代码貌似没有这回事。最代码里面没有登录的时候去浏览文章或博客或分享的时候浏览量都不没有增加。所以无聊就写写代码，刷刷浏览量思路：用循环获取网页内容打...

浏览368 评论12 下载0 牛币0 网页访问次数抓取网站数据 Python

serical LV12 2015年5月19日

原精apache HttpClient代理ip刷投票源码

前几天有个朋友给我发了个链接说是让我去投票，我去看了下，选择了目标投票，再点的时候给我说一个IP只能投一次，作为一只猿当然得想法去突破它，就想着用HttpClient去代理提交请求实现刷票，由于朋友的活动已经关闭了，这里找了另一个网站做测试，http://www.hnxdf.com/vote/ind...

浏览826 评论8 下载113 牛币10 Apache HttpClient 抓取网站数据 Java

浪子逍遥遥 LV18 2015年4月23日

java jsoup解析迅雷会员账号分享网并提前迅雷VIP帐号与密码

利用jsoup解析迅雷官网并提取迅雷VIP帐号与密码,这是一个学习的程序,所以不喜勿喷....

浏览601 评论5 下载100 牛币2 jsoup 抓取网站数据 Java

Edson188 LV22 2015年3月4日

原精apache HttpClient 4.3.4自动登录并抓取中国联通网页用户基本信息和账单数据

{代码...}1.新建一个maven项目httpclient2.登录中国联通并抓取数据3.使用Get模拟登录,抓取每月账单数据中国联通有两种登录方式:上面两图的区别一个是带验证码,一个是不带验证码, 下面将先解决不带验证码的登录.这里有两个难点,一是验证码,二uvc码;验证码,这里将其写到本地,然后人工输入,这个...

浏览686 评论1 下载46 牛币11 Apache HttpClient 抓取网站数据自动登录脚本 Java

shengke LV17 2015年2月5日

java通过java.net.HttpURLConnection类抓取网页源码工具类分享

看到牛哥分享了一个获取网页内容的例子，想到以前页写过类似的，目的是抓取网页上的内容，拿到后给自己的站点用。一般是通过正则表达式搞到自己想要内容，不知到有没有其他好的方法。本例子只是获取特定网站的源码。...

浏览345 评论0 下载76 牛币2 抓取网站数据工具类 Java

何果财 LV3 2014年11月12日

python爬虫抓取哪儿网页上的一些字段

分享的是一段较简单的爬虫，采用的网页分析方法是HTMLparser，抓取某个特定标签下的内容并存入excel表中。...

浏览701 评论2 下载346 牛币0 抓取网站数据 Python

洛庚 LV13 2014年7月22日

原java抓取html网页数据内容demo

产生背景：公司有文员要从互联网上录入一些信息，效率低，费时费力，准确度不高。我没事就做了个小小的demo ,设置相关参数，就可以快速抓取网站上的信息。流程(此 demo抓取对象是赶集)：此信息展示列表的展示页的链接URL作为参数，首先抓取所有信息列表的链接，获得每条信息的链接后，依次打开链接，获得...