chongni8.com 网站图片的爬取

今天终于回广州了哈,回想过去一个多星期感觉跟梦一样,每次回家都不能待太久,主要是回家之后学习效率就非常低。恰好今天有两部自己想看的电影上映,所以今天就一个人去南村的电影院连续看了两场电影——《西虹市首富》和《狄仁杰之四大天王》。两部电影都很棒,感觉很过瘾。然后晚上回来感觉还想爬爬图片,于是就捡起另外一个图片网站:http://www.chongni8.com/继续用 Python 爬了一下,思路和之前爬http://m.mzitu.com/的差不多。

妹子图网站爬虫的改进

友情提示:本文内容少儿不宜。

下午闲着没事又把之前写的 mzitu.com 网站的 Python 爬虫程序改进了一下,顺便再复习一下 Python。

也跟风一波疫苗事件~

最近长春长生疫苗案件超级火啊,昨天伍老师还分享给我一片微信推文我花了 14 个小时找了一下长春长生们究竟卖到了哪里去,读后感觉很有趣,所以就打算模仿原作者的思路自己也分析一波。为了省事,我就没有自己整理数据,而是直接使用了原作者开源的数据分析的,点击这里即可下载。
感谢伍老师的分享,感谢推文作者提供的开源数据。

暨南大学教务处排课选课表爬取

这段代码是寒假的时候写的,没想到现在还能运行,可以整理好教务处的排课选课列表然后做一些有趣的数据分析。

MySQL——心累的入门之旅

今天中午取到了之前买的 MySQL 计算机二级考试的教材书,下午考完试就开始了 MySQL(Mac 版本)的入门之旅,非常心累。

如何解决 Python 的 matplotlib 模块绘图时无法显示中文的问题

刚刚接触 Python 的 matplotlib 包的时候就遇到了中文的问题,这个世界对中国人实在是太不友好了!在百度上搜索了 N 多下,终于解决了这个问题,同时解决了 matplotlib 绘图默认像素不高的问题。

Python selenium 包自动登录教务处

本文中的 Python 脚本:JNU_login.py
这个是昨晚熬夜弄到凌晨四点搞出来的成果。虽然没有达到自己想要的自动选课效果,但是值得记录下来。似乎这个学期的自己几乎每周都有一两天是两三点之后睡觉了,着实需要注意一下了!

一个查询暨大宿舍账户余额的小程序

查询暨南大学宿舍电费的 Python 脚本:dorm_balance.py
今天正好开始选课了,不过因为我的课已经修完了,所以我这一次就不用选课了。于是我就想研究一下能不能设计一个自动选课的程序。研究了好久,最后意识到这个问题很复杂,还需要继续学习,不过在研究这个问题的过程中发现了 Python 的 selenium 包,这个包可以自动驱动浏览器进行一些操作然后获取数据。于是就想应该可以解决一个简单的问题——通过暨南大学能耗系统查询宿舍的账户余额。

累积正态分布函数的逼近

这篇博客里面的程序主要是根据这篇论文里面对于累积正态分布函数的逼近函数的介绍编写的:累积正态分布函数的逼近函数综述_王晶晶.pdf。根据文中的介绍,我编写了以下 Python 函数实现,并展示了计算的效果。
cnd.py

m.mzitu.com 爬取

该篇尺度较大,慎入!
之前最早用 Stata 爬过这个网址而且还完整地运行了一遍,大概下载到了 10 万张图片,昨天又尝试用 Python 写了一个程序爬取该网站的所有图片。

从暨大体育获取全体同学的身份信息

今天爬到了全校所有同学的基本信息,包括身份证号。然后我在看数据的时候无意中发现的开头为 341225 的一些人,毫无疑问啊,这个就是我们县的!而且应该就是我们学校的!于是心声感概选择了这个海报的图片做封面。
今天爬了暨大体育的网站:网址是这个:https://tzcs.jnu.edu.cn/ 。网站的登录用户名和密码都是学号(不用尝试我的了,我刚刚改了密码)。
这个网站可能最近被我丁文亮请求过于频繁崩溃掉。

微信推文图片的下载

本文分别使用了 Stata 和 Python 写了两个用于爬取微信推文页面中图片的程序。

暨南大学图书馆入馆数据爬取

这个就非常有趣了,突然想到图书馆的数据统计可以爬,然后赶紧研究了下网页结构:

本文产生的 Stata 命令
libdata.ado

如何爬到自己喜欢的歌手的所有歌曲啊!

  • 音乐收费的现象越来越普遍了,那么在这个到处收费的年代还有没有能够靠两只手获得自己想要的东西了呢?所以我常常觉得是有必要现在多储备一些音乐以备未来所有的音乐都收费而难以负担。今天介绍的这个流程就可以实现这个想法了!

How to Custom Text Anotation Angle in Stata's Drawing

Before moving on today’s topic, we can take a brief look at the text addition of Stata’s drawing.

我觉得我的女神很漂亮,想把她的照片当成图表背景,该怎么做?

这个绘图方法来自于http://www.surveydesign.com.au/tipsgraphs.html, 该网站上给出了两种方法,经过好几天的尝试发现只有第一种比较好用,我们先来试试第一种。(这是是用纯 Stata 绘制, 实际上使用一些 JavaScript 图表库非常容易绘制)

金融时间序列及其特征(一):资产收益率

《蔡瑞胸:金融时间序列分析》学习笔记

人口年龄结构曲线的构造

我的爬虫入门程序! 回想这么久以来, 真是感慨万千, 那个时候自己编程只会用 Stata 和 R, 还不熟练、写文章只会用 Word, 写作效率非常低. 一年看起来短, 但回想起来却好久远!

Your browser is out-of-date!

Update your browser to view this website correctly. Update my browser now

×