物喜己悲-CSDN博客

原创使用python爬取猫眼电影、房王、股吧论坛、百度翻译、有道翻译、高德天气、华夏基金、扇贝单词、糗事百科（糗事百科）

''' 3、糗事百科：xpath http://www.qiushibaike.com/8hr/page/1 获取列表页每个帖子里的图片、用户昵称、段子内容、点赞次数和评论次数选做：翻页写到json文件中 ''' import requests,os,json from lxml import etree class Qiubai: def __call__(self, *arg...

2019-05-26 22:21:38 359

原创使用python爬取猫眼电影、房王、股吧论坛、百度翻译、有道翻译、高德天气、华夏基金、扇贝单词、糗事百科（扇贝单词）

''' 爬取扇贝网python必背词汇表接口地址：https://www.shanbay.com/wordlist/110521/232414/ 要求：获取所有的python词汇数据，形成字典，然后存储数据思路：第一页：https://www.shanbay.com/wordlist/110521/232414/ 第二页：https://www.sh...

2019-05-26 22:20:57 453

原创使用python爬取猫眼电影、房王、股吧论坛、百度翻译、有道翻译、高德天气、华夏基金、扇贝单词、糗事百科（华夏基金）

import requests,re #获取整个网页 # with open('华夏基金.html','w',encoding='utf-8') as f: # f.write(html) class Huaxia(): # def __init__(self): # self.base_html() def __call__(self, *args...

2019-05-26 22:20:03 427

原创使用python爬取猫眼电影、房王、股吧论坛、百度翻译、有道翻译、高德天气、华夏基金、扇贝单词、糗事百科（高德天气）

''' 3、获取高德的所有城市天气信息北京接口： https://www.amap.com/service/weather?adcode=110000 城市adcode列表：https://www.amap.com/service/cityList?version=201951410 获取到天气情况，打印出来 { "adcode":"110000", "name":"北京"， ...

2019-05-26 22:19:01 422

原创使用python爬取猫眼电影、房王、股吧论坛、百度翻译、有道翻译、高德天气、华夏基金、扇贝单词、糗事百科（有道翻译）

import requests import time import random import hashlib def md5(value): # 创建MD5对象 md5_obj = hashlib.md5() # 加密字符串 md5_obj.update(bytes(value, encoding="utf-8")) # 进行16位的加密 si...

2019-05-26 22:15:31 257

原创使用python爬取猫眼电影、房王、股吧论坛、百度翻译、有道翻译、高德天气、华夏基金、扇贝单词、糗事百科（百度翻译）

import requests import json #注意POST请求和网页url一般都不一致！！！ base_url ='https://fanyi.baidu.com/sug' def fanyi(kw): data={ 'kw':kw } #发起POST请求 def post(url, data=None, json=None, **kw...

2019-05-26 22:14:22 262

原创使用python爬取猫眼电影、房王、股吧论坛、百度翻译、有道翻译、高德天气、华夏基金、扇贝单词、糗事百科（股吧论坛）

''' 翻页获取股吧数据 http://guba.eastmoney.com/ 获取10页信息，然后放到指定文件夹中 ''' ''' 爬取板块：国产芯片思路：找规律第一页：http://so.eastmoney.com/web/s?keyword=%E5%9B%BD%E4%BA%A7%E8%8A%AF%E7%89%87 第二页：http://so.ea...

2019-05-26 22:11:25 304

原创使用python爬取猫眼电影、房王、股吧论坛、百度翻译、有道翻译、高德天气、华夏基金、扇贝单词、糗事百科（猫眼电影）

import requests import re class Mao: def init(self): ‘’’ 本质是初始化一些条件，并不是调用其他函数当前类实例化的时候触发 ‘’’ self.count = 1 self.spider_name = “万能爬虫” # self.run() def __call__(self, *args, **kwargs): ''' 当前类...

2019-05-26 22:08:20 305

原创 Django从入门到放弃 02-Django安装及创建项目

文章目录02-Django安装及创建项目一、Django版本及维护时长方法一：使用命令行安装及创建项目方法二：使用Pycharm创建Django项目 02-Django安装及创建项目一、Django版本及维护时长 Django官网下载地址：https://www.djangoproject.com/download/ （里面有也有详细的安装方法）方法一：使用命令行安装及创建项目 (1).下载...

2019-04-24 22:41:04 208

原创 Django从入门到放弃 01-HTTP协议概述&使用socket写简单框架

文章目录Django一、HTTP协议1、HTTP协议简介2、HTTP协议概述3、HTTP工作流程4、URL5、请求头请求头格式请求首行请求头分析6、响应头相应头格式响应头实例响应首行(状态行)分析三、Web框架1、什么是框架2、WEB框架的本质3、自定义一个简单的web框架4、根据不同的路径返回不同的内容—使用函数 Django 一、HTTP协议 1、HTTP协议简介超文本传输协议（英文：...

2019-04-23 22:47:00 472

原创 Linux基础操作新手必看

文章目录Linux与Windows一、Linux与Windows的区别二、常用Linux命令<1>Linux命令的格式<2>文件和目录常用命令<3> cd 切换目录操作<4> 相对路径和绝对路径<5> 创建和删除操作<6> 拷贝和移动<7> 查看相关操作<8> vi和vim&lt...

2019-04-15 22:46:17 519

原创数据库DQL（更新中）

一、DML语法 1、删除语法（1）delete from 表名 [where expression] 二、DQL数据查询语言 1、语法：（1）select * from 表名； *表示所有字段（2）select distinct 字段 from 表名；distinct 去重；（3）select 字段1 as 别名2 ，字段2 as 别名1…from 表名； as 别名，也可以省略as...

2019-04-14 21:24:53 230

原创什么是SQL-DDL语句-DML语句（更新中）

1、什么是数据库；存储数据的仓库，关系型数据库和非关系型数据库。 2、什么是SQL SQL：Structured Query Language 结构化查询语言 DQL：Data Query Language 数据查询语，如select * from 表名 DDL：Aata Defintion Language 数据定义语言 create、alter、 drop DML：Data Mani...

2019-04-14 21:24:02 2866

原创数据库——从入门到精通———一步步教你玩转数据库

文章目录数据库一、SQL语句分类1、DDL语句<1>常用语句表<2>MySQL支持的数据类型<3>创建第一个表<1>代码一打：<2>查看是否创建成功<3>表创建完了，看看表结构<4>修改刚才创建的表数据库写在前面：关键词含义 [ ] 方括号代表该词条可选，不是必须填写的 db_name ...

2019-04-09 23:11:29 5084

原创 Python3-面向对象(中级)06——面向对象的三大特征：封装、继承、多态

面向对象的三大特征：封装、继承、多态文章目录面向对象的三大特征：封装、继承、多态一、封装<1>什么是封装？<2>私有属性<3>私有方法<4>私有化封装后的限制二、继承<1>什么是继承<2>子类与父类的概念<3>继承的作用<4>查看继承的父类<5>方法的覆写<6>super()&...

2019-03-31 21:19:45 330

原创 Python3-面向对象(初级)05

类和对象说到面向对象，就必须聊一聊另一种模式：面向过程面向对象编程——Object Oriented Programming，简称OOP，是一种程序设计思想。OOP把对象作为程序的基本单元，一个对象包含了数据和操作数据的函数。先定义主题结构，再定义对象函数，即用即调。面向过程编程–(Procedure Oriented Programming，简称OOP)是一种以过程为中心的编程思想。...

2019-03-29 20:09:37 273

原创 Python3-模块(import)02

模块 <1>Python中的模块有过C语言编程经验的朋友都知道在C语言中如果要引用sqrt函数，必须用语句#include <math.h>引入math.h这个头文件，否则是无法正常进行调用的。那么在Python中，如果要引用一些其他的函数，该怎么处理呢？在Python中有一个概念叫做模块（module），这个和C语言中的头文件以及Java中的包很类似，比如在Pyth...

2019-03-24 17:22:29 164

原创 Python3-文件的读写04-（更新19-4-5）

文件的打开与关闭想一想：如果想用word编写一份简历，应该有哪些流程呢？打开word软件，新建一个word文件写入个人简历信息保存文件关闭word软件同样，在操作文件的整体过程与使用word编写一份简历的过程是很相似的打开文件，或者新建立一个文件读/写数据关闭文件 <1>打开文件在python，使用open函数，可以打开一个已经存在的文件，或者创建...

2019-03-24 15:54:21 806

原创 Python3-函数初解03

函数介绍函数介绍什么是函数请看如下代码: print " _ooOoo_ " print " o8888888o " print " 88 . 88 " print " (|...

2019-03-23 20:46:46 295

原创 CSS入门-新手向01

目录 CSS的发展历程从HTML被发明开始，样式就以各种形式存在。不同的浏览器结合它们各自的样式语言为用户提供页面效果的控制。最初的HTML只包含很少的显示属性。随着HTML的成长，为了满足页面设计者的要求，HTML添加了很多显示功能。但是随着这些功能的增加，HTML变的越来越杂乱，而且HTML页面也越来越臃肿。于是CSS便诞生了。 CSS 网页的美容师 CSS的出现，拯救了混乱的HTML，当...

2019-03-20 23:02:57 897

原创 HTML基础

认识网页网页主要由文字、图像和超链接等元素构成。当然，除了这些元素，网页中还可以包含音频、视频以及Flash等。浏览器是网页运行的平台，常用的浏览器有IE、火狐（Firefox）、谷歌（Chrome）、Safari和Opera等。我们平时称为五大浏览器。浏览器内核又可以分成两部分：渲染引擎(layout engineer 或者 Rendering Engine)和 JS 引擎。渲染...

2019-03-19 23:49:12 1102

原创 Python3-基本数据类型01

Python3-基本数据类型————电气狗变身程序猿.01Python3中的标准数据类型数字(Number)功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLo...

2019-03-16 16:55:52 350

yu1860110的博客