爬虫使用cookie

1.urllib库 from urllib import request from urllib import parse from http.cookiejar import CookieJa...

网络爬虫 2018-12-18 2747

常见算法

二分查找顾名思义就是,查一半,符合就接着查,不符合就丢弃。 def search(data, item): low = 0 # 最小的索引 hight = len(data) - 1 # dat...

Python 2018-12-17 1008

序列化与反序列化

序列化:数据类型转为字符串 反序列化:字符串转为数据类型 1.json import json # json dumps序列化 # json loads反序列化 # 数字,字符串,列表,字典,[...

Python 2018-12-13 1164

scrapy笔记

爬虫的工作流程是: 1.spider.py:用户编写提取网页字段的解析函数,这里会产生request,可以理解为链接 2.经过middleware,到达引擎,发送到scheduler入队,经过引...

Scrapy框架 2018-12-11 1460

python反射与@property

class Teacher: dic = {"查看学生信息": '', '查看讲师信息': ''} def show_student(self): print('show_student') d...

Python 2018-11-17 1033

python时间操作

# 第一种方式,如果传入字符串时间 date1 = time.strptime('2018-08-16 01:28:33', "%Y-%m-%d %H:%M:%S") date2 = time....

Python 2018-11-17 1140

Scrapy基本使用

1.创建一个scrapy爬虫项目 进入cmd,进入到你存放项目的文件夹。 使用scrapy startproject myproject创建了一个myproject项目。 创建完成会提示 按照命...

Scrapy框架 2018-11-08 1153

后台系统左侧导航栏,右侧内容的实现

后台的代码就不给了,我也是网上copy的,主要说使用div实现点击左侧链接,右侧联动的方式。 <ul id="systemSetting" class="nav nav-list collaps...

前端 2018-11-08 1139

面试题目

今天,很荣幸接到一个大厂hr的电话面试。问了一些问题,我以为是一些个人问题,没想到会问技术!没有准备,加上本身挺菜的,尽管答得不好,还是暴露出了很多问题,还是小记一下。 问题1:linux的基本...

感悟 2018-11-01 1131

mysql使用2

插入数据: 主键不可以忘 INSERT INTO study(id, name, email, salary)VALUES(2, 'ko', '1480555@qq.com', 1.5); 将查...

数据库 2018-10-27 1125