入门Python数据分析最好的实战项目（二）
2018-07-12
阅读 7 分钟
29k作者：xiaoyu 微信公众号：Python数据科学 知乎：python数据分析师 上一篇和大家分享了一个入门数据分析的一个小项目 北京二手房房价分析，链接如下： 入门Python数据分析最好的实战项目（一） 文章在sf发布之后看到有不少感兴趣的朋友给我点了赞，感谢大家的支持了。 本篇将继续上一篇数据分析之后进行数据挖掘建模预测...
【精华分享】：转行数据分析的一份学习清单
2018-07-03
阅读 4 分钟
36.9k作者：xiaoyu 微信公众号：Python数据科学 知乎：python数据分析师 上一篇主要分享了博主亲身转行数据分析的经历： 【从零学起到成功转行数据分析，我是怎么做的？】 本篇继上一篇将分享转行数据分析的一些经验和学习方法，看完这篇你将会解决以下几个问题： 转行数据分析需要掌握哪些学习重点？ 转行学习数据分析有哪些...
入门Python数据分析最好的实战项目（一）
2018-07-01
阅读 7 分钟
110.4k目的：本篇给大家介绍一个数据分析的初级项目，目的是通过项目了解如何使用Python进行简单的数据分析。数据源：博主通过爬虫采集的链家全网北京二手房数据（公众号后台回复 二手房数据 即可获取）。
给爬虫爱好者的福利 SelectGadget
2018-06-26
阅读 1 分钟
6.3k相信爬虫的爱好者们都经历过这样一个爬虫前期的准备过程，那就是用浏览器的审查元素进行爬取目标的定位。每次我们都要浪费部分时间去寻找定位点和xpath，这样既不很方便，也不高效，那么如何提高爬虫中这部分工作的效率呢？今天博主给大家分享一个爬虫的利器，它就是：SelectorGadget。
从零转行数据分析的亲身经历
2018-06-25
阅读 4 分钟
13.5k作者：xiaoyu 微信公众号：Python数据科学 知乎：python数据分析师 快两周没更新了，先跟大家说一下抱歉。最近生活上确实有点忙，不过后续将恢复正常。今天和大家聊一个非技术性的话题：转行。全篇无代码，但是我想对于这个话题，很多朋友都非常感兴趣，毕竟工作伴随着我们的一生，也是主要的收入来源，谁不想找一份高薪...
数据可视化Seaborn从零开始学习教程（四） 分类数据可视化篇
2018-06-17
阅读 8 分钟
11.6k作者：xiaoyu微信公众号：Python数据科学知乎：python数据分析师 Seaborn学习大纲 seaborn的学习内容主要包含以下几个部分： 风格管理 绘图风格设置 颜色风格设置 绘图方法 数据集的分布可视化 分类数据可视化 线性关系可视化 结构网格 数据识别网格绘图 本次将主要介绍 分类数据可视化的使用。 分类数据可视化 数据集中...
数据可视化Seaborn从零开始学习教程（三） 数据分布可视化篇
2018-05-24
阅读 6 分钟
13.3k作者：xiaoyu微信公众号：Python数据科学知乎：python数据分析师 Seaborn学习大纲 seaborn的学习内容主要包含以下几个部分： 风格管理 绘图风格设置 颜色风格设置 绘图方法 数据集的分布可视化 分类数据可视化 线性关系可视化 结构网格 数据识别网格绘图 本次将主要介绍数据集的分布可视化的使用。 数据集分布可视化 当...
数据可视化Seaborn从零开始学习教程（二） 颜色调控篇
2018-05-22
阅读 10 分钟
15.6k作者：xiaoyu微信公众号：Python数据科学知乎：python数据分析师 Seaborn学习大纲 seaborn的学习内容主要包含以下几个部分： 风格管理 绘图风格设置 颜色风格设置 绘图方法 数据集的分布可视化 分类数据可视化 线性关系可视化 结构网格 数据识别网格绘图 本次将主要介绍颜色调控的使用。 颜色风格设置 在Seaborn的使用中...
数据可视化Seaborn从零开始学习教程（一） 风格选择
2018-05-18
阅读 5 分钟
33.6k最近在做几个项目的数据分析，每次用到seaborn进行可视化绘图的时候总是忘记具体操作。虽然seaborn的官方网站已经详细的介绍了使用方法，但是毕竟是英文，而且查找不是很方便。因此博主想从零开始将seaborn学习一遍，做一个总结，也希望供大家使用参考。
用Python优雅的送上母亲节祝福
2018-05-13
阅读 1 分钟
6.2k作者：xiaoyu微信公众号：Python数据科学知乎：python数据分析师 今天是母亲节！ 作为儿女，当然要送上满满的祝福。人活着就需要感恩。 但是，并不是所有的母亲都在自己身边，那么除了说一句：“妈妈，祝您节日快乐” 之外，还有什么样的祝福呢？ 今天我要用 Python来实现对母亲节节日的祝福。 我在这里祝自己的母亲和关注...
Jupyter notebook快速入门教程
2018-05-12
阅读 5 分钟
7.9k作者：xiaoyu微信公众号：Python数据科学知乎：python数据分析师 本篇将给大家介绍一款超级好用的工具：Jupyter notebook。 为什么要介绍这款工具呢？ 如果你想使用Python学习数据分析或数据挖掘，那么它应该是你第一个应该知道并会使用的工具，它很容易上手，用起来非常方便，是个对新手非常友好的工具。而事实也证明它...
Python十分钟制作属于你自己的个性logo
2018-05-07
阅读 3 分钟
6.8k词云的使用相信大家已经不陌生了，使用很简单，直接调用wordcloud包就可以了。它的主要功能是根据文本词汇和词汇频率生成图片，从中可以直观的看出各个词汇所占比重。最近正好想做一个人的logo，于是乎决定使用词云来制作完成。
Python爬虫实战之（六）| 模拟登录拉勾网
2018-05-02
阅读 5 分钟
10.3k废话不多说了，还是老套路使用fiddler或者开发者工具来帮助我们完成模拟登录的整个过程，通过观察http的headers请求头来模拟 post 请求各种参数。当然如何找到这些参数就显得尤为重要了，一些参数是时间戳，而一些参数是动态加密的。
给Python初学者的最好练手项目
2018-04-04
阅读 7 分钟
19k其实，做项目主要还是根据需求来的。但是对于一个初学者来说，很多复杂的项目没办法独立完成，因此博主挑选了一个非常适合初学者的项目，内容不是很复杂，但是非常有趣，我相信对于初学者小白来说是再好不过的项目了。
使用Pandas&NumPy进行数据清洗的6大常用方法
2018-04-01
阅读 20 分钟
36.8k数据科学家花了大量的时间清洗数据集，并将这些数据转换为他们可以处理的格式。事实上，很多数据科学家声称开始获取和清洗数据的工作量要占整个工作的80%。
Scrapy爬取二手房信息+可视化数据分析
2018-03-23
阅读 5 分钟
16.1k作者：xiaoyu微信公众号：Python数据科学知乎：Python数据分析师 本篇介绍一个scrapy的实战爬虫项目，并对爬取信息进行简单的数据分析。目标是北京二手房信息，下面开始分析。 网页结构分析 采用安居客网页信息作为二手房的信息来源。直接点击进入二手房信息的页面。 每页的住房信息： 点开链接后的详细信息： 博主并没...
Python爬虫之Scrapy学习（基础篇）
2018-03-14
阅读 3 分钟
8.9k在爬虫的路上，学习scrapy是一个必不可少的环节。也许有好多朋友此时此刻也正在接触并学习scrapy，那么很好，我们一起学习。开始接触scrapy的朋友可能会有些疑惑，毕竟是一个框架，上来不知从何学起。从本篇起，博主将开启scrapy学习的系列，分享如何快速入门scrapy并熟练使用它。
Python爬虫实战之（五）| 模拟登录wechat
2018-03-07
阅读 11 分钟
19.1k不知何时，微信已经成为我们不可缺少的一部分了，我们的社交圈、关注的新闻或是公众号、还有个人信息或是隐私都被绑定在了一起。既然它这么重要，如果我们可以利用爬虫模拟登录，是不是就意味着我们可以获取这些信息，甚至可以根据需要来对它们进行有效的查看和管理。是的，没错，这完全可以。本篇博主将会给大家分享一...
如何进行手机APP的数据爬取？
2018-02-28
阅读 2 分钟
60k平时我们的爬虫多是针对网页的，但是随着手机端APP应用数量的增多，相应的爬取需求也就越来越多，因此手机端APP的数据爬取对于一名爬虫工程师来说是一项必备的技能。我们知道，网页爬取的时候我经常使用F12开发者工具或者fiddler之类的工具来帮助我们分析浏览器行为。那对于手机的APP该如何使用呢？同样的，我们也可以使...
爬虫模拟登录—OAUTH的详解
2018-02-16
阅读 4 分钟
12.4k前两篇分享了HTTP的基本概念和高级用法，以及京东模拟登录的实战内容。本篇博主将会继续与大家分享HTTP中的另一个有趣内容：OAUTH，它也是在爬虫的模拟登录中可能会用到的，下面给大家详细介绍一下。
Python爬虫实战之（四）| 模拟登录京东商城
2018-02-06
阅读 5 分钟
27.6k前两篇和大家分享了爬虫中http的一些概念和使用方法，基础篇我们主要介绍了http的请求头，高级篇我们主要介绍了cookie和session（具体可以点击上面链接进行回顾）。但其实在爬虫中还有很多关于http的内容需要了解，例如 token，oauth等。对于这些概念博主将在后续文章中逐一的详细介绍，本篇主要针对前两篇内容与大家分...
解读爬虫中HTTP的秘密（高阶篇）
2018-01-31
阅读 5 分钟
11.8k上一篇我们介绍了爬虫中HTTP的基础内容，相信看过的朋友们应该对HTTP已经有个初步的认识了。本篇博主将分享一些HTTP的高级内容，以及在爬虫中的应用，让大家更深入理解。这些内容包括：
3款你必须知道的爬虫工具
2018-01-28
阅读 3 分钟
13.4k本篇博主将和大家分享几个非常有用的爬虫小工具，这些小工具在实际的爬虫的开发中会大大减少你的时间成本，并同时提高你的工作效率，真的是非常实用的工具。
解读爬虫中HTTP的秘密（基础篇）
2018-01-26
阅读 6 分钟
10k在学习爬虫的过程中，相信大家对HTTP这个词已经不陌生了，它好像从未离开过我们的视线。被迫所需，我们每次都要使用开发者工具去查看请求头，响应头，以及头中的各个字段，使用别人封装好的模块填入信息，敲几行代码就解决了。面对简单的爬取任务，我们也许根本不用管它是什么，但可能等我们真正遇到问题的时候，却无从...
Python爬虫实战之（三）| 一个海贼迷的呐喊
2018-01-24
阅读 5 分钟
3.6k海贼王已经10年了，一路陪伴了我们的点点滴滴。它热血，激情，感人，欢乐，吸引了无数男女老少的紧紧跟随。说起来还真有点小心酸，原谅博主也是个海贼迷，心中怀揣着很大的梦想，誓死也要成为海贼王的男人。但如今梦想已经破灭了，因为博主有了女朋友...
Python爬虫实战之（二）| 寻找你的招聘信息
2018-01-15
阅读 4 分钟
10.4k最近总被智联招聘广发骚扰，烦死个人了简直。索性点进去看了看爬虫工程师现在市场需求到底怎么样了？发展前景如何？看完了之后感觉目前还不错，根据北京来看职位需求还是蛮多的，薪资也还行，于是就对智联招聘职位信息的爬取发起了一次小小的挑战，今天给大家分享一个爬取招聘网站的工作信息，效果图如下（部分截图）。
Python爬虫学习之（三）| 快速入门正则表达式
2018-01-12
阅读 7 分钟
7.8k当完成了网页html的download之后，下一步当然是从网页中解析我们想要的数据了。那如何解析这些网页呢？Python中有许多种操作简单且高效的工具可以协助我们来解析html或者xml，学会这些工具抓取数据是很容易了。
Python爬虫实战之（一）| 微信实时爬取电影咨询
2018-01-07
阅读 9 分钟
11.6k说的很对，但是在这个撩妹的时代，要想成功把到妹，还真得花点心思才行啊。每次和妹子约会，妹子有时就会问：最近有啥好看的电影没？对于妹子的提问，回答要么就是不知道，要么就是自己去查app了，觉得这样有时候就缺少了一些互动的乐趣了。
Python爬虫学习之（二）| urllib进阶篇
2018-01-04
阅读 8 分钟
13.3k作者：xiaoyu微信公众号：Python数据科学知乎：Python数据分析师 前情回顾，urllib的基本用法 urllib库的基本组成 利用最简单的urlopen方法爬取网页html 利用Request方法构建headers模拟浏览器操作 error的异常操作 具体内容参见Python从零学爬虫。urllib库除了以上基础的用法外，还有很多高级的功能，可以更加灵活的适...
Python爬虫学习之（一）| 从零开始
2018-01-03
阅读 7 分钟
129.8k大家好，相信点进来看的小伙伴都对爬虫非常感兴趣，博主也是一样的。博主刚开始接触爬虫的时候，就被深深吸引了，因为感觉SO COOL啊！每当敲完代码后看着一串串数据在屏幕上浮动，感觉很有成就感，有木有？更厉害的是，爬虫的技术可以应用到很多生活场景中，例如，自动投票啊，批量下载感兴趣的文章、小说、视频啊，微信...
- 1
- 2(current)