python 网页爬虫怎么抓多页内容

想抓网页上的内容，但页面有多页，怎么抓都只能抓到一个页面的内容，怎么实现把所有页面都抓出来，求大神指教。自己写的下面这样的，python3的

import urllib.request
import re

def getHtml(url):
page = urllib.request.urlopen(url)
html = page.read()
html = html.decode('GBK')
return html

def getMeg(html):
reg = re.compile(r'******')
meglist = re.findall(reg,html)
for meg in meglist:
with open('out.txt',mode='a',encoding='utf-8') as file:
file.write('%s\n' % meg)

if __name__ == "__main__":
html = getHtml(url)
getMeg(html)

python 网页爬虫怎么抓多页内容

您可能感兴趣问答

Collapsible

热门标签

热点问答