爬取的内容：书籍名称，作者名称，书籍简介，全书网5041页,写入mysql数据库和.txt文件 1，创建scrapy项目 scrapy startproject numberone 2，创建爬虫主程序 cd numberonescrapy genspider quanshuwang www.quanshuwang.com 3，setting中设置请求头 USER_AGENT = " Moz...

2019-08-13 08:35:24 文件Chrome定义mysqltxtWindowswordIE美味PS

请求库： 1.requests这个库是爬虫最常用的一个库 2.SeleniumSelenium 是一个自动化测试工具，利用它我们可以驱动浏览器执行特定的动作，如点击、下拉等操作 对于一些用JS做谊染的页面来说，这种抓取方式是非常有效的。 3.ChomeDrive安装了这个库，才能驱动Chrome浏览器...

2019-08-13 08:33:22 脚本编程文档文件Chrome服务器mysql驱动系统WEB标准Fiddler

一、安装及使用 下载安装 命令行：pip3 install django==1.11.21 pycharm 创建项目 命令行： 找一个文件夹存放项目文件，打开终端： django-admin startproject 项目名称 项目目录 pycahrm 启动 命令行 切换到项目的根目录下 manage.py python36 manage.py runserver 1...

2019-08-13 08:32:23 连接mysql数据库文件mysqlwordARM用户IEPSCFHTTPS

重点： １. 链接服务器的数据库 ２. 创建表和格式 ３. 插入多行数据 import pymysqltry: host='xxx' user='xxx' passwd='xxx' db='test01' port=3306 Table_name='kaka5' # 链接到服务器 db = pymysql.connect(host, user, passwd, db, port) # 创建游标，对数据进行操...

2019-08-13 08:31:58 sql2服务器mysqlSQL数据库COM问题使用删除value

对于所有的需求，当你不知道怎么处理的时候，你就先用最简单的方法，或者说的明白一点，用最原始的方法，先实现业务需求再说。 一、对提现队列数据表“ims_checkout_task”进行汇总统计，按月汇总统计每个月的提现总额，提现总次数。 1、SQL操作如下： SELECT id, SUM...

2019-08-13 08:31:46 PR值timtheSQL数据库函数流程实现方法时间

一、MySQL官方网站介绍 1.Developer Zone : MySQL开发工程师板块 Articles : Oracle工程师自己的博客 Plant MySQL : 和MySQL相关从业人员的博客 Bugs : MySQL BugList Worklog : 开发记录 Labs : MySQL实验性项目 2.Downloads : MySQL下载 Enterprise : MySQL企业版本...

2019-08-13 08:31:35 mysql下载mysql安装mysql文档sql mysqlsql下载sql安装文档文件ESET服务器

MySQL是现在普遍使用的数据库，但是如果宕机了必然会造成数据丢失。为了保证MySQL数据库的可靠性，就要会一些提高可靠性的技术。MySQL主从复制可以做到实时热备数据。本文介绍MySQL主从复制原理及其配置过程。 术语：主从复制master slave replication（M-S模式）。 用...

2019-08-13 08:31:27 mysql升级sql 语句文件Windows10服务器mysqlqqWindowswordWindows7

1.到官网下载centOS对应版本的xampp，应该是以tar.gz为后缀的 2.tar -zxf 下载的包 3.mv lampp /opt 4.service mysqld stop因xampp里自己带一个mysql，会和之前装的mysql端口冲突，故停掉单独装的mysql 5.关闭防火墙 service iptables stop 6./opt/lampp/lampp start 7...

2019-08-13 08:31:22 mysql设置mysqlphp用户phpmyadminLAMP系统XAMPPCentOS系统CentOS

平时每个开发者都会讨论数据量大时，sql的优化问题。但是并不是每个人都会有100w的数据量可以用来实战，那么今天我们就自己动手，模拟一个100w数据量的表。 创建原理 其实创建的方法有很多，有快的也有慢的。本博客中写的当然不是最快的那个，但确实是比较好操作和理解...

2019-08-13 08:31:15 定义mysql2345timdelimiter<SQL数据库字符串函数

前言 开心一刻 一个中国小孩参加国外的脱口秀节目，因为语言不通，于是找了一个翻译。 主持人问：Whoisyourfavoritesinger ？ 翻译：你最喜欢哪个歌手啊 ？ 小孩兴奋地回答：Michael Jackson 翻译转身对主持人说：迈克尔-杰克逊 主持人看着翻译："你说什么 ？" 电视机...

2019-08-13 08:31:15 sql 语句定义技巧IE马化腾PS李彦宏timCFAV