python爬取指定微信公众号文章

def openUrl():
  print(\"启动爬虫，打开搜狗搜索微信界面\")
  # 加载页面
  url = \'http://weixin.sogou.com/weixin?type=1&s_from=input&query=要爬取的公众号名称\'
  htmlContentObj = urllib2.urlopen(url)
  # 将页面转化为文本
  html = htmlContentObj.read()
  # 正则匹配
  str = re.findall(r\"http://mp.weixin.qq.com/profile.+==\",html)
  # 替换转义符得到可访问的链接地址
  tempHref = re.sub(r\"&\",\"&\",str[0])
  return tempHref

# 获取页面文本方法
def getHtmlStr(conurl):
  # 相当于把页面转化为文本
  response = urllib2.urlopen(conurl)
  # 读取文本的字符串
  htmlStr = response.read()
  return htmlStr

# 文本转换为所需要的json对象
def htmlToJsonObj(htmlStr):
  # 正则匹配并得到需要的json字符串
  jsonObjstr = re.findall(r\"{\\\"list\\\":\\[.+\\]\\}\", htmlStr)
  # 字符串转json
  jsonObj = json.loads(jsonObjstr[len(jsonObjstr)-1])
  return jsonObj

# 从json对象中取出所需要的url
def jsonObjToArray(jsonObj):
  hrefs = []
   s = []
  # url中的&在html中是& ，故需要替换，下面为正则
  patten = re.compile(r\"&\")
  # 数组
  arr = jsonObj[\"list\"]
  # 循环添加
  for i in range(len(arr)):
    # 每次替换字符串
    fixHref = re.sub(patten,\"&\",arr[i][\"app_msg_ext_info\"][\"content_url\"])
    # 添加到数组
     s.append(arr[i][\"app_msg_ext_info\"][\" \"])
    hrefs.append(\"https://mp.weixin.qq.com\"+fixHref)
  jsons = {\"hrefs\":hrefs,\" s\": s}
  return jsons
#打开浏览器，进行工作
def start():
  tempHref = openUrl()
  # 获取页面文本
  htmlStr = getHtmlStr(tempHref)
  # 文本转json对象
  jsonObj = htmlToJsonObj(htmlStr)
  # f返回所需要的url数组
  return jsonObjToArray(jsonObj)

if __name__==\'__main__\': 
  try:
    hrefs = start()
    count = len(hrefs[\"hrefs\"])
    for i in range(count):
      print(\"标题：\"+hrefs[\" s\"][i].encode(\"utf-8\"))
      print(\"爬取到的路径：\"+hrefs[\"hrefs\"][i].encode(\"utf-8\"))
    print(\"------------->>爬取并打印完毕\")
  except Exception as e:
    print(str(e))

import urllib2
import json
import re