php正则函数抓取网页连接( 本文实例讲述Python正则抓取新闻标题和链接的方法-本文)

优采云 发布时间: 2021-11-06 06:01

  php正则函数抓取网页连接(

本文实例讲述Python正则抓取新闻标题和链接的方法-本文)

  

  本文介绍了Python定时抓取新闻标题和链接的方法。分享给大家,供大家参考,如下:

  

#-*-coding:utf-8-*-

import re

from urllib import urlretrieve

from urllib import urlopen

#获取网页信息

doc = urlopen("http://www.itongji.cn/news/").read() #自己找的一个大数据的新闻网站

#抓取新闻标题和链接

def extract_title(info):

pat = &#39;<a target=\"_blank\"(.*?)/a/h3&#39;

title = re.findall(pat, info)

titles=&#39;\n&#39;.join(title)

#print titles

#修改指定字符串

titles1=titles.replace(&#39;class="title"&#39;,&#39;title&#39;)

titles2=titles1.replace(&#39;>&#39;,&#39;:&#39;)

titles3=titles2.replace(&#39;href&#39;,&#39;url:&#39;)

titles4=titles3.replace(&#39;="/&#39;,&#39;"http://www.itongji.cn/&#39;)

#写入文件

save=open(&#39;xinwen.txt&#39;,&#39;w&#39;)

save.write(titles4)

save.close()

titles = extract_title(doc)

  PS:这里有两个非常方便的正则表达式工具供大家参考:

  JavaScript 正则表达式在线测试工具:

  正则表达式在线生成工具:

  关于Python的更多信息请参考本站专题:《Python正则表达式使用总结》、《Python数据结构与算法教程》、《Python Socket编程技巧总结》、《Python函数使用技巧总结》 、《Python字符串操作技巧总结》、《Python入门及进阶经典教程》、《Python文件与目录操作技巧总结》

  希望这篇文章对你的 Python 编程有所帮助。

  

  关于寻找教程网络

0 个评论

要回复文章请先登录注册


官方客服QQ群

微信人工客服

QQ人工客服


线