本发明提供一种基于探测网页更新周期的抓取方法，所述方法为通过周期性探测网页内容获取网页更新时间进行设置规则，设置内容包括页面url链接，ip地址，网页获取方式，网页获取UA等。页面的url链接主要是指定抓取网页的目标链接，此链接可以依据给予的网页源进行设置或者依旧历史抓取信息进行设置。Ip地址用于指明此链接服务器的ip地址信息，获取方式为服务器返回或者历史信息中获得。网页获取方式依据网页更新时间进行修改设置。网页获取UA可依据需求进行设置为实名和匿名。本发明能够在获取不同网页的同时很好地获取同一网页源的不同时期的网页信息。