-
scrapy学习笔记(二)框架结构工作原理
scrapy结构图: scrapy组件: ENGINE:引擎,框架的核心,其它所有组件在其控制下协同工作。 SCHEDULER:调度器,负责对SPIDER提交的下载请求进行调度。 DOWNLOADER:下载器,负责下载页面(发送HTTP请求/接收HTTP响应)。 SPIDER:爬虫,负责提取页面中的数据,并产生...
-
Django中信号signals简单使用
在平时的开发过程中,我们会遇到一些特殊的应用场景,如果你想要在执行某种操作之前或者之后你能够得到通知,并对其进行一些你想要的操作时,你就可以用Django中的信号(signals)。Django 提供一个信号分发器,允许解耦的应用在框架的其它地方发生操作时会被通知到,...
-
day01 爬虫基本原理以及requests请求库
一、爬虫基本原理 1.什么是爬虫 爬虫就是爬取数据 2.什么是互联网 有一堆网络设备,把一台台的计算机互联到一起称为互联网 3.互联网建立的目的 数据的传递与数据的共享 4.什么是数据 例如: 电商平台的商品信息 链家,自如租房平台的房源信息 ... 12306,票务信息 5.什...
-
day02 request请求库应用以及selenium请求库
一、request请求库爬取豆瓣电影信息 -请求url https://movie.douban.com/top250 -请求方式 GET -请求头 user-agent cookies ''' 爬取豆瓣电影相关信息 电影名称、电影url、电影导演、电影主演、电影年份、 电影类型、电影评分、电影评论、电影简介、电影排名分析每页的...
-
Django基础使用
Python的WEB框架有Django、Tornado、Flask 等多种,Django相较与其他WEB框架其优势为:大而全,框架本身集成了ORM、模型绑定、模板引擎、缓存、Session等诸多功能。今天就一起来学习下Django; 1. 准备工作 使用pip安装:pip install Django 2. 基本配置 1)创建django...
2019-07-24 09:09:46 html模板html格式html登录页面生成html文件定义word用户IE超链接
-
python 面向对象-进阶
面向对象是一种编程方式,此编程方式的实现是基于对 类 和 对象 的使用 类 是一个模板,模板中包装了多个函数供使用(可以讲多函数中公用的变量封装到对象中) 对象,根据模板创建的实例(即:对象),实例用于调用被包装在类中的函数 面向对象三大特性:封装、继承和...
-
Flask的上下文管理
flask上下文管理 1 .运用的知识点val = threading.local() def task(arg): # threading.local() val.xxx=123 # 内部,获取当前线程的id,{线程id:{xxx:123}},通过折冲方式区分变量位置 # flask则是协程方式区分,各个连接对象(升级的threading.local) 2.偏函数 生成的函数...
-
python--006
一、函数的作用域 1、作用域在定义函数时就已经固定住了,不会随着调用位置的改变而改变 例一:name = ' alex ' def foo(): name = ' lhf ' def bar(): print (name) return barfunc = foo()func()例二:name = ' alex ' def foo(): name = ' lhf ' def bar(): name =...
-
python入门
阅读目录 一 编程与编程语言 二 编程语言分类 三 主流编程语言介绍 四 python介绍 五 安装python解释器 六 第一个python程序 七 变量 八 用户与程序交互 九 基本数据类型 十 格式化输出 十一 基本运算符 十二 流程控制之if...else 十三 流程控制之while循环 十四 流程...
2019-07-24 09:07:54 网络游戏网络游戏开发语言编程最简单的编程语言编程语言分类主流编程语言最简单的编程java 技术delphi主流操作系统
-
python+socket实现网络信息交互及文件传输
Socket 网络上的两个程序通过一个双向的通信连接实现数据的交换,这个连接的一端称为一个socket。 Socket又称"套接字",应用程序通常通过"套接字"向网络发出请求或者应答网络请求,使主机间或者一台计算机上的进程间可以通讯。 Python 提供了两个级别访问的网络服务。...
IDC资讯: 主机资讯 注册资讯 托管资讯 vps资讯 网站建设
网站运营: 建站经验 策划盈利 搜索优化 网站推广 免费资源
网络编程: Asp.Net编程 Asp编程 Php编程 Xml编程 Access Mssql Mysql 其它
服务器技术: Web服务器 Ftp服务器 Mail服务器 Dns服务器 安全防护
软件技巧: 其它软件 Word Excel Powerpoint Ghost Vista QQ空间 QQ FlashGet 迅雷
网页制作: FrontPages Dreamweaver Javascript css photoshop fireworks Flash
