python3简单实现微信爬虫
作者：hebedich 发布时间：2022-10-22 20:55:12
标签：python,网络爬虫
使用ghost.py 通过搜搜 的微信搜索来爬取微信公共账号的信息
# -*- coding: utf-8 -*-
import sys
reload(sys)
import datetime
import time
sys.setdefaultencoding("utf-8")
from ghost import Ghost
ghost = Ghost(wait_timeout=20)
url="http://weixin.sogou.com/gzh?openid=oIWsFt8JDv7xubXz5E3U41T0eFbk"
page,resources = ghost.open(url)
result, resources = ghost.wait_for_selector("#wxmore a")
from bs4 import BeautifulSoup
c=0
while True:
if c>=30:
break
soup = BeautifulSoup(ghost.content)
for wx in soup.find_all("h4"):
print wx
page, resources = ghost.evaluate(
"""
var div1 = document.getElementById("wxbox");
div1.innerHTML = '';
""")
ghost.click("#wxmore a")
result, resources = ghost.wait_for_selector(".wx-rb3")
c=c+1
pass
以上所述就是本文的全部内容了，希望对大家学习Python能够有所帮助
0
投稿猜你喜欢
- 我就废话不多说了，还是直接看代码吧！#!/usr/bin/env python3#coding = utf-8def is_triangle
1. 案例【三酷猫列表记账】操作需求：（1）用列表对象记录三酷猫每天钓鱼的种类和数量（2）统计三酷猫所钓水产品的总数量和预计收获金额（3）打- 1.虚拟机数据库设置--重启数据库(1)vi /etc/my.cnfbind = 0.0.0.0(2).远程不能用root用户连，得新建用户
- 说明1、如果数据集是高维度的，选择谱聚类是子空间的一种。2、如果数据量是中小型的，比如在100W条以内，K均值会是更好的选择；如果数据量超过
- 本文实例讲述了php实现的三个常用加密解密功能函数。分享给大家供大家参考，具体如下：算法一：//加密函数function lock_url(
- 今天继续给大家介绍Python相关知识，本文主要内容是Python asyncio异步编程常见问题。一、asyncio编程简单示例首先，我们
- YAML是一种直观的能够被电脑识别的的数据序列化格式，容易被人类阅读，并且容易和脚本语言交互。YAML类似于XML，但是语法比XML简单得多
- 首先，啰嗦几句废话如下： （1）触发器（trigger）是个特殊的存储过程，它的执行并不需要我们去显式调用，而是由一些事件触发，这有点类似C
- Hello,World，几乎是程序猿学习各种语言的第一个程序，心血来潮，有空拿主流开发语言如何实现，汇总并整理了下.包括大致快速了解下这门语
- 一、异步的“并行”同时处理，相互之间没啥依赖// 执行FN1返回一个promise实例，实例中管理了
- 开发堡垒机之前，先来学习Python的paramiko模块，该模块基于SSH用于连接远程服务器并执行相关操作安装paramiko模块pip3
- UNIONUNION语义：取两个子查询结果的并集，重复的行只保留一行表初始化CREATE TABLE t1(id INT PRIMARY K
- 本文实例讲述了php实现转换html格式为文本格式的方法。分享给大家供大家参考，具体如下：有时候需要转换html格式的字符串为文本，但又需要
- 如下所示：def list_all_files(rootdir): import os _files = [] list = os.list
- 看例子： 数 据表 collect ( id, title ,info ,vtype) 就这4个字段，其中 title 用定长，info 用
- 学习golang不久，在定义全局变量的时候遇见了坑。写个小例子，增强记忆。错误版本var p intfunc main() { p, err
- TCP是建立可靠连接，并且通信双方都可以以流的形式发送数据。相对TCP，UDP则是面向无连接的协议。使用UDP协议时，不需要建立连接，只需要
- 定义总是很抽象。存储进程其实就是能完成一定操作的一组SQL语句，只不过这组语句是放在数据库中的(这里我们只谈SQL SERVER)。如果我们
- 前面的深入理解Routing章节，我们讲到了在MVC中，除了使用默认的ASP.NET 5的路由注册方式，还可以使用基于Attribute的特
- 数据import numpy as npimport pandas as pddata = [{'Name': '小
