可以参考以下代码,自己修改。 #! /usr/bin/env python #coding=utf-8 #百度推送 by tools.bugscaner.com import httplib data = open("s…
标签:python
python 多线程threading锁机制与异常处理的问题
前言 前几天做了一个爬虫,其作用大体是在网上爬取数据并把数据插入数据库。由于收集数据实在是太慢,于是使用了多线程爬取,因为其中有插入数据的操作,为以防多线程同时向数据库插入数据时抛出异常,于是加了锁机制,或许是因为死锁执…
Django全文索引 Whoosh模块遇到的问题
前言 我现在遇到一个问题就是我自己有上百篇文章的数据,因为嫌一个一个复制文章内容太麻烦所以我是直接在mysql中批量导入的,确实这样文章也在网站中显示了,但是问题是如果是要进行全文搜索功能的话是搜索不到文章的内容的,甚至…
python安装库时报错 ERROR:Command errored out with exit status1以及'Microsoft Visual C++ 14.0 is required'问题
前言 昨天晚上在windows上练习部署django,在使用 pip install -Ur requirements.txt 的时候出现了一些报错 具体问题如下 UnicodeDecodeError: 'gbk' co…
python 虚拟环境 virtualenv virtualenvwrapper
前言 为什么需要虚拟环境: 到目前位置,我们所有的第三方包安装都是直接通过pip install xx的方式进行安装的,这样安装会将那个包安装到你的系统级的Python环境中。但是这样有一个问题,就是如果你现在用Djan…
selenium 添加删除标签的属性值
前言 在用selenium做自动化时,有时需要更改标签的属性值,有时是添加,有时是删除。如何来操作呢,这里我们又要用到JS来处理了。 (ps:突然感觉JS能做很多事情...估计哪天又要攻克一下javascript了,嘿嘿…
python selenium 点击页面元素时报错:ElementClickInterceptedException
在用selenium做自动签到时遇到了一个棘手的问题,弄得半天查了许多资料终于解决了! 问题 在查找页面中的一个元素并对其进行点击时selenium抛出错误,按字面上解释是“其他元素会接受点击”。 具体错误如下 sele…