
Python
主要是以Python爬虫和相关知识的记录
CK_233
这个作者很懒,什么都没留下…
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
Python——调用腾讯地图API实现批量地址转经纬度并保存到Excel
一、需求 最近公司项目需要批量获取Excel中地址,将地址转换成对应的经纬度,用到的是腾讯地图API。 二、腾讯地图API使用 进入官网–>腾讯地图 进入开发文档–>地址坐标相互转换 文档中请求链接,请求参数,返回参数都很清晰,这里直接把调用代码写上来。 (开发者需要先注册获取API使用权限) 地址转坐标 developer_key = "" #API控制台KEY管理中的KEY # ...原创 2020-03-20 19:29:09 · 3223 阅读 · 1 评论 -
Python爬虫笔记——操作MongoDB数据库(pymongo)
一、MongoDB MongoDB 是目前最流行的 NoSQL 数据库之一,使用的数据类型 BSON(类似 JSON)。 下载地址:https://www.mongodb.com/download-center/community 选择版本然后点击下载 [外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-92J3yHk0-1582473409126)(evernoteci...原创 2020-02-24 21:20:15 · 583 阅读 · 0 评论 -
Python爬虫笔记——操作MySQL数据库(pymysql与mysqlclient)
Python连接数据库 MySQL作为近年来最流行的关系型数据之一,很多大厂项目都用到了MySQL,我们这里使用Python操作MySQL数据库。 MySQL常使用的增删改查语句,我这里就不多介绍了,直接介绍安装使用,主要讲一下我现在用到的两个库pymysql与mysqlclient。 一、PyMySQL pymysql是一个纯Python实现的MySQL驱动,速度上还行,最大的优点可能就是它的安...原创 2020-02-23 21:15:34 · 988 阅读 · 0 评论 -
Python爬虫笔记——爬虫入门
一、爬虫 爬虫是什么 我们把互联网有价值的信息都比喻成大的蜘蛛网,而各个接地那就是存放的数据,而蜘蛛网上的蜘蛛比喻成爬虫,而爬虫是可以自动抓取互联网信息的程序,从互联网上抓取一切有价值的信息,并把站点的html和js返回的图片爬到本地,并存出起来。 爬虫用途 爬取网站信息数据,12306抢票,网络投票等。 二、BeautifulSoup使用 BeautifulSoup是一个可以从HTM...原创 2020-02-18 18:04:57 · 401 阅读 · 0 评论