时间:2021-05-22
本文实例讲述了Python正则抓取新闻标题和链接的方法。分享给大家供大家参考,具体如下:
#-*-coding:utf-8-*-import refrom urllib import urlretrievefrom urllib import urlopen#获取网页信息doc = urlopen("http://www.itongji.cn/news/").read() #自己找的一个大数据的新闻网站#抓取新闻标题和链接def extract_title(info): pat = '<h3><a target=\"_blank\"(.*?)</a></h3>' title = re.findall(pat, info) titles='\n'.join(title) #print titles#修改指定字符串 titles1=titles.replace('class="title"','title') titles2=titles1.replace('>',':') titles3=titles2.replace('href','url:') titles4=titles3.replace('="/','"http://www.itongji.cn/')#写入文件 save=open('xinwen.txt','w') save.write(titles4) save.close()titles = extract_title(doc)PS:这里再为大家提供2款非常方便的正则表达式工具供大家参考使用:
JavaScript正则表达式在线测试工具:
http://tools.jb51.net/regex/javascript
正则表达式在线生成工具:
http://tools.jb51.net/regex/create_reg
更多关于Python相关内容可查看本站专题:《Python正则表达式用法总结》、《Python数据结构与算法教程》、《Python Socket编程技巧总结》、《Python函数使用技巧总结》、《Python字符串操作技巧汇总》、《Python入门与进阶经典教程》及《Python文件与目录操作技巧汇总》
希望本文所述对大家Python程序设计有所帮助。
声明:本页内容来源网络,仅供用户参考;我单位不保证亦不表示资料全面及准确无误,也不保证亦不表示这些资料为最新信息,如因任何原因,本网内容或者用户因倚赖本网内容造成任何损失或损害,我单位将不会负任何法律责任。如涉及版权问题,请提交至online#300.cn邮箱联系删除。
复制代码代码如下:无标题文档新闻标题新闻标题新闻标题新题新闻标题新闻标新闻标新闻标题2010-04-03新闻标题新闻标题闻闻标题新闻标新标新闻标题2010-04
在列出新闻标题的时候,如果新闻标题长,就是改变网页的长度,引起页面难看。这种情况下,可使用left和len两个函数来解决。但是遇到新闻标题中有英文或字母的时候,
本文实例讲述了Python正则抓取网易新闻的方法。分享给大家供大家参考,具体如下:自己写了些关于抓取网易新闻的爬虫,发现其网页源代码与网页的评论根本就对不上,所
网站建设公司推荐网站新闻标题的5大要素。网站建设公司推荐网站新闻写作时,你必须从如下几大要素来考虑和布局新闻标题:访客;潜在客户;吸引力;关键词布局;投放站点情
本文实例讲述了python获取指定网页上所有超链接的方法。分享给大家供大家参考。具体如下:这段python代码通过urllib2抓取网页,然后通过简单的正则表达