-
文件读写操作
文件的读写操作 一般来说文件的读写分三步: 打开文件 对文件进行读写操作 关闭文件 语法: file_object = open(file_name[,access_mode][,buffering]) 文件读写操作... file_object.close() 在读取或写入文件之前,必须使用python的内置open()函数打开文件。此函数将...
-
pymysql 的简单使用
一、环境 Windows 7 x64 python 3.7.1 pymysql 0.9.3 mysql5.6.43 二、pymysql的简单使用 1、准备数据库demo_temp create database demo_temp; 2、连接数据库 import pymysql.cursorsconnect = pymysql.connect( host = ' 127.0.0.1 ' , user = ' root ' , password =...
-
python 基础学习笔记(1)
声明: 本人是在校学生,自学python,也是刚刚开始学习,写博客纯属为了让自己整理知识点和关键内容,当然也希望可以通过我都博客来提醒一些零基础学习python的人们。若有什么不对,请大家及时指出,欢迎评论指点。 首先,在我的第一本python书的第一页就写了这样一段...
-
常用模块 - openpyxl模块
一、简介 xlrd/xlwt 主要是针对Office 2003或更早版本的XLS文件格式 缺点:不支持XLSX文件格式 OpenPyXL 能读能写能修改 缺点:不支持XLS Microsoft Excel API 强大无极限 缺点:速度慢 二、基本用法 首先介绍下Excel的一些基本概念,Workbook相当于是一个文件,WorkSh...
-
python爬虫抖某音爬取视频 Airtest+fiddler
所用到的模块和库 : python3+reqeuests+Airtest+fiddler Airtest : (app自动化软,类似Appium,网易家的本人很喜欢) 1.首先环境的配置 Fiddler 和Airtest fiddler可以设定抓取包的链接,并自动保存到设定的txt文件中 #在配置好手机证书,以及可以抓到手机包的情况下...
2019-07-24 09:12:46 文档文件Chrome定义txtwordFiddlerandroidPSSegmentFault
-
scrapy学习笔记(二)框架结构工作原理
scrapy结构图: scrapy组件: ENGINE:引擎,框架的核心,其它所有组件在其控制下协同工作。 SCHEDULER:调度器,负责对SPIDER提交的下载请求进行调度。 DOWNLOADER:下载器,负责下载页面(发送HTTP请求/接收HTTP响应)。 SPIDER:爬虫,负责提取页面中的数据,并产生...
-
pyspider 数据存入Mysql--Python3
一、不写入Mysql 以爬取哪儿网为例。 以下为脚本: from pyspider.libs.base_handler import *class Handler(BaseHandler): crawl_config = { } @every(minutes=24 * 60) def on_start(self): self.crawl('https://travel.qunar.com/travelbook/list.htm', callback=se...
-
day01 爬虫基本原理以及requests请求库
一、爬虫基本原理 1.什么是爬虫 爬虫就是爬取数据 2.什么是互联网 有一堆网络设备,把一台台的计算机互联到一起称为互联网 3.互联网建立的目的 数据的传递与数据的共享 4.什么是数据 例如: 电商平台的商品信息 链家,自如租房平台的房源信息 ... 12306,票务信息 5.什...
-
python 使用xlsxwriter 写入数据时,当数据中链接的后面包含空格
python 在 使用 xlsxwriter组件写入数据时,当数据包含类似http://*** /数据时,导出的excel,打开时会提示如下错误: 没有查到相关的资料处理这个问题,可能原因为excel识别为链接,与内置库冲突导致,对数据准确性无大影响的情况下,只能临时通过字符替换解决: if k...
-
python 之 logger日志 字典配置文件
import os import logging.config # 不能只导入logging BASE_DIR =os.path.dirname(os.path.dirname( __file__ )) # DB_PATH=r'%s\db\db.txt' %BASE_DIR DB_PATH=r ' %s\db ' % BASE_DIR # 定义日志文件的路径 LOG_PATH=r ' %s\log\access.log ' % BASE_DIRBOSS_LOG_PA...
IDC资讯: 主机资讯 注册资讯 托管资讯 vps资讯 网站建设
网站运营: 建站经验 策划盈利 搜索优化 网站推广 免费资源
网络编程: Asp.Net编程 Asp编程 Php编程 Xml编程 Access Mssql Mysql 其它
服务器技术: Web服务器 Ftp服务器 Mail服务器 Dns服务器 安全防护
软件技巧: 其它软件 Word Excel Powerpoint Ghost Vista QQ空间 QQ FlashGet 迅雷
网页制作: FrontPages Dreamweaver Javascript css photoshop fireworks Flash
