• 欢迎访问极客猴,分享 Python 入门,网络爬虫,数据分析,赚钱思维相关的技术与思维QQ群
  • 本站点文章首发于微信公众号【极客猴】,欢迎关注,第一时间接受文章推送~
  • 如果您觉得本站非常有看点,那么赶紧使用 Ctrl+D 收藏极客猴吧

最新发布 第6页

极客猴猴哥的个人博客

零基础入门 Python 爬虫

想提高爬虫效率?aiohttp 了解下

想提高爬虫效率?aiohttp 了解下
对于爬虫程序,我们往往会很关注其爬虫效率。影响爬虫效率有几个因素有,是否使用多线程,I/O 操作,是否同步执行等。其中 I/O 操作、同步执行是最影响爬虫效率的。众所周知,Requests 库一个优秀的 HTTP 库,通过它可以非常简单地发起 HTTP 请求。不过,这个库所执行的网络请求都是同步。当爬虫程序进程获得 CPU 的时间片时,如果程序在进行 I/……继续阅读 »

猴哥 4年前 (2018-08-03) 421浏览 0评论0个赞

零基础入门 Python 爬虫

搭建手机抓包环境

搭建手机抓包环境
智能手机的普及,这使得移动互联网成为另一个流量巨头。越来越多的公司也会转而直接提供 App 来展示内容。例如微信以及其生态(微信公众号、小程序)、抖音等。这也说明人们对于手机的依赖心更强。那抓取 App 的数据显得更加有意义。本文的主要内容是讲述如何搭建手机抓包环境。1.工具准备1)一台电脑最好是笔记本电脑,因为笔记本电脑内置了无限网卡。如果你使用的台……继续阅读 »

猴哥 4年前 (2018-07-29) 192浏览 0评论0个赞

计算机网络

为什么说 TCP 协议是可靠的?

为什么说 TCP 协议是可靠的?
为什么说 TCP 协议是可靠的?几张图带你彻底了解 TCP 协议。TCP 协议是 TCP/IP 协议栈中的传输层的协议,TCP协议又叫传输控制协议(Transport Control Protocal)。众所周知,它是一个可靠协议。因为它能保证接收端完整地接受到发送端发送的数据包,即保证不丢包。那 TCP 协议如何保证不丢包呢?这个是本文重点讲述的内……继续阅读 »

猴哥 4年前 (2018-07-25) 188浏览 0评论0个赞

零基础入门 Python 爬虫

分享一个爬取网站的小技巧

分享一个爬取网站的小技巧
有时候,我们很想爬取一个网站的数据。如果 PC 端的网页的反爬机制太强,我们可以换个思路。现在很多网站为了满足手机浏览器能正常访问的需求,都会推出手机版的网页。PC 端抓取数据有难度,我们可以从手机端入手。你也许听说过,抓取手机 App 端数据就需要搭建手机抓包环境。那么我们就要屁颠屁颠去抓包搭建?哈哈,显然不用。我给大家分享一个小技巧,可以节省搭建环境的……继续阅读 »

猴哥 4年前 (2018-07-17) 193浏览 0评论0个赞

Python 必知必会

Python 读取文本文件的内容

Python 读取文本文件的内容
数据存储方式有很多种。如果数据的数据量比较大、数据类型繁多且要求便于搜索,我们一般会选择存储到数据库中。如果数据内容只是一些的文本信息,我们可以将数据存储到 TXT 、JSON、CSV 等文本文件中。类似存储小说、日志内容等场景,一般是将内容存储到文本文件中。数据已经存储到 txt 文件中,那该如何读取了?本文的主要内容是讲解如何读取文本文件的内容。1.打……继续阅读 »

猴哥 4年前 (2018-07-15) 194浏览 0评论0个赞

Python 必知必会

os.path 模块用法详解

os.path 模块用法详解
总所周知,Windows 操作系统和 Linux 系统存在很多不兼容的地方。文件路径就是一个明显的例子。在 Linux 中,路径的分割采用正斜杠 "/",比如 "/home/monkey";而在 Windows 中,路径分隔采用反斜杠 "\",比如 "C:\Windows\System&q……继续阅读 »

猴哥 4年前 (2018-07-11) 260浏览 0评论0个赞

零基础入门 Python 爬虫

这些抓包工具,你值得拥有

这些抓包工具,你值得拥有
如今的时代是互联网时代,互联网已经在我们的生活如影随形。可以说我们无时无刻在跟互联网打交道。而在工作,我们可能会因开发调试、测试、排查网络故障等原因,需要对网路数据包进行抓取、拦截以解析。因此,本文主要内容是推荐几款不错的抓包工具。1.FiddlerFiddler 是一个使用 C# 编写的 http 抓包工具。它使用灵活,功能强大,支持众多的 http ……继续阅读 »

猴哥 4年前 (2018-07-02) 194浏览 0评论0个赞

Python 必知必会

Python 中“is”和“==”的区别

Python 中“is”和“==”的区别
相比 C/C++ 、Java 等强类型语言, Python 定义变量的方式就简单多了。我们只需要给变量起个变量名,而不需要给变量指定类型。正因为 Python 弱化类型这一概念,所以我们能随意给变量赋值。值可以是整数,浮点数,字符串,列表等。a = 1a = 3.33a = 'monkey'a = [1, 2, 3]凡事都有正……继续阅读 »

猴哥 4年前 (2018-06-28) 184浏览 0评论0个赞

认知

总结是成长的秘方

总结是成长的秘方
时光荏苒,2018 年已经过去半年。你年初制定新年计划,不知现在完成的进度是多少了?不管怎样,应该好好总结下。学习,生活,工作就像一场航行。我们这艘孤零零的小船在茫茫大海中飘荡着。或许我们知道此次航行的目的地。但是航程会有各种突发状况。这会让我们不知不觉偏离航线,进而影响到达目的地的时间。这时就需要导航工具,而总结就是这一工具。善于总结是一件好事。在总结……继续阅读 »

猴哥 4年前 (2018-06-26) 198浏览 0评论1个赞

零基础入门 Python 爬虫

多线程爬取 unsplash 图库

多线程爬取 unsplash 图库
我公众号文章的封面配图都在 Unsplash 上找的。因为 Unsplash 是一个完全免费的、无版权的高清图片资源网站。所谓的「无版权」是指这个网站上的图片由创作者自愿分享出来,完全免费提供给任何人作为任何用途使用。Unsplash 的原话是「do whatever you want」,进一步说明是「你可以免费对图片进行复制、修改、分发,包括用作商业目……继续阅读 »

猴哥 4年前 (2018-06-20) 201浏览 0评论1个赞