手机
当前位置:查字典教程网 >编程开发 >asp.net教程 >正则方式的自动小偷抓网程序
正则方式的自动小偷抓网程序
摘要:有一些瑕疵没时间细化,只是实现了效果,大家看一看这个正则该怎么写好:URL:http://news.szhome.com/83642.htm...

有一些瑕疵没时间细化,只是实现了效果,大家看一看这个正则该怎么写好:

URL:http://news.szhome.com/83642.html

内容:

复制代码 代码如下:

object></div></div>

</div>

<div><div>

这两个标记之间的代码。END标记的问题解决了,但是郁闷的是START截取的标记因为第二个DIV和第三个中间有换行,我无语了不知道怎么处理这个正则。

而且郁闷的是有多处有这种重复型标记,对正则不太熟悉,我的解决方法如下:

复制代码 代码如下:

MatchCollection mc = Regex.Matches(ghoPage.Trim(), @"(?<=<div class=['""]txtmsg['""]>)[sS]*?(?=<div class=['""]share['""]><div class=)", RegexOptions.CultureInvariant | RegexOptions.IgnoreCase);

foreach (Match mm in mc)

{

sb.Append(mc[0].Value.Substring(1933, mc[0].Value.Length - 1933));

}

我算出截取出来多处两个FLASH广告DIV的长度是1933,然后处理字符串截取后得到我想要的文本,这样做的劣势就是万一该站改变了两个FLASH广告DIV的长度我获取的数据就不是完整的呢,有兴趣的研究下,看看换行的DIV正则问题怎么处理。

里面用到了自己写的一个BUTTON控件,可以在点击后禁止重复点击,然后就是一些判断,在思路上蛮不错,可以做到一直抓取,因为不经常用就没做成WINDOWS服务类型,这样的程序可以做成WINDOWS服务,把规则写在INI文件中,抓录的规则和正则也放在配置文件中,这样就能实现自动抓录。

很短的代码,对这种抓录有兴趣的朋友可以尝试下。下载

【正则方式的自动小偷抓网程序】相关文章:

asp.net中导出excel数据的方法汇总

ASP.NET中使用AspnetAccessProvider

asp.net使用ODP即oracle连接方式的的防注入登录验证程序

asp.net 网页编码自动识别代码

ASP.NET AJAX 1.0 RC开发10分钟图解

asp.net 继承自Page实现统一页面验证与错误处理

log4net教程日志分类和自动维护示例

ashx文件的使用小结

如何合并多个 .NET 程序集

asp.net上传execl文件后,在页面上加载显示

精品推荐
分类导航