抓取的网址为:http://news.qq.com/china_index.shtml
coding=utf-8 # author = 'pengwei' import urllib import re def main(): url = "http://news.qq.com/china_index.shtml" f = urllib.urlopen(url) html = f.read().decode('gbk') #print(html) pattern = re.compile(r"(.*)") for m in pattern.finditer(html): #print(m.group()) //获取匹配的内容,等同于m.group(0) print("url:"+m.group(1)+" title:"+m.group(2)) # 输入正则中的分组 if name == "main": main()
运行结果:
url:/a/20140810/010517.htm title:王毅等克里半小时:你迟到了 克里:真的很抱歉 url:/a/20140810/008223.htm title:媒体曝高雄政府早知气爆管线存在 市长被要求下台 url:/a/20140810/008271.htm title:彭丽媛树立公益形象典范 先后肩负4个“大使” url:/a/20140810/011206.htm title:中方拒绝菲方“三步走”南海解决方案 url:/a/20140810/006193.htm title:官媒解读:中央纪念邓小平诞辰110周年的政治深意 url:/a/20140810/003104.htm title:今年我国出境游即将迈入“亿人次时代” url:/a/20140810/006721.htm title:探司法部燕城监狱:官员参观目睹老上级铁窗生活 url:/a/20140810/002622.htm title:灾区村民:上面规定埋葬期限 晚1天抚恤金扣5千元 url:/a/20140810/002177.htm title:深圳沃尔玛被曝熟油一月不换 用过期原料制熟食 url:/a/20140810/002074.htm title:青藏高原交通兵:军嫂1年仅能探亲1个月(图) url:/a/20140809/023580.htm title:河南虞城政府大楼依山傍水 被指迷信“有靠山” url:/a/20140809/021847.htm title:石家庄现约9层楼高垃圾山 已堆积30年(组图) url:/a/20140809/008854.htm title:河南白沙水库出现大面积死鱼 数量约有数十万斤 url:/a/20140809/014663.htm title:多地省委巡视工作现“五人小组”设置 url:/a/20140809/005945.htm title:深圳破获一处山林地下赌场 布局如澳门赌场(图) url:/a/20140809/004062.htm title:乌鲁木齐一家影院以13岁为界实施电影分级 url:/a/20140809/003407.htm title:第4代海上猛虎艇泉州舰入列 前2代曾参与2次海战 url:/a/20140807/034678.htm title:反腐风暴后 中央委员等重要职位“虚位以待” url:/a/20140807/033813.htm title:人大教授:反腐可分“打虎拍蝇灭蟑螂”三部曲 url:/a/20140807/032149.htm title:湖南衡阳2名官员电视问政现场被停职(图) url:/a/20140807/018530.htm title:陈水扁涉携巨款赴帕劳洗钱案以查无实据签结 url:/a/20140807/020302.htm title:军队调整再现文职干部改现役并被授予少将案例 url:/a/20140807/014070.htm title:龙头山镇银厂坡未有人救援 男孩用石块堆“SOS” url:/a/20140807/001868.htm title:两名省部级官员被立案侦查 沈培平涉与人通奸 url:/a/20140807/000919.htm title:黑老大刘汉刘维上诉案今宣判 一审均被判死刑 url:/a/20140807/015963.htm title:陕西耗资43万将68米高废弃烟囱改成温度计(图) url:/a/20140807/001003.htm title:中国31省份上半年GDP出炉 超全国总量逾3万亿 url:/a/20140806/038542.htm title:广州花都区书记涉万庆良案由中纪委带走 url:/a/20140806/031845.htm title:刘建宏被传将离开央视 本人回应:还在考虑 url:/a/20140806/030378.htm title:谢樵战友:石头击中他 挣扎了一阵就消失在水中