Beautiful Soup笔记

python中的Beautiful Soup我们前面提到过一个xpath,今天要讲的Beautiful Soup作用类似,它是一个可以从HTML或XML文件中提取数据的Python库。

python中的xlwt

python中的xlwt我们有时候会使用python对数据进行处理,而有些数据通常会存储在excel表中,有时候呢,又需要把网上获取的数据存储到excel中,下面来看看python中如何存储excel数据吧。

《嫌疑人X的献身》

请你相信我,把一切交给,我的逻辑思考。

xpath笔记

xpath笔记当我们使用爬虫对网页进行爬取的时候,重要的一步就是对我们爬取的网页中所需要的数据进行提取,那么问题来了,怎么匹配出那些我们需要的数据呢?这就要提到正则表达式了,我们可以使用正则来搜索我们需要的信息,但是正则功能强大,弊端在于容易...

scrapy笔记

记录scrapy的一些笔记scrapy是python开发的一个快速web爬虫抓取框架,用于抓取web站点并从页面中提取结构化的数据。scrapy用途广泛,可以用于数据挖掘,监测和自动化测试。下面我们通过抓取豆瓣电影top排行榜来熟悉scrapy。

《月亮与六便士》

满地都是六便士他却抬头看见了月亮

python笔记

记录python的一些笔记URI是统一资源标识符,用于标识某一互联网资源,而URL是统一资源定位符,表示资源的地点(互联网上所处的位置)。所以URL是URI的子集。 urllib2 - An extensible library for op...

安装scrapy遇到的一些问题

在安装scrapy的过程中遇到了一些问题记录一下。安装这个确实挺多人遇到了问题的,虽然大家遇到的问题可能不同,但大部分可能都是缺少某些包

命令行中的下载工具Axel

下载工具我们一般使用迅雷,但是在linux这一类的系统上没有迅雷肿么办,这时候就可以使用我们的命令行下载工具了,如wget,axel等,前者是单线程的,而且不支持断点续传,所以推荐使用后者。

Mac显示隐藏文件

Mac上修改隐藏文件。有时候我们会遇到需要修改隐藏文件的情况,比如通常以.开头的隐藏文件,有两种方法可以实现:

在命令行中启动某个应用

在命令行中启动某个应用,需要利用Alias来简化命令。Alias是一种函数,功能是设置命令的别名。比如要在命令行中启动sublime,如下操作:

简明python教程

开启python之旅!使用带提示符的 Python 解释器:

《三体(III)死神永生》

所有的部落都已消失所有的长矛都已折断在这里我们曾经饮露餐花而你们却撒下一片硕石

《三体(II)黑暗森林》

现在,我们要给宇宙文明找出两条公理:一,生存是文明的第一需要。二,文明不断增长和扩张,但宇宙中的物质总量保持不变。

如何让终端优雅地装X

当使用系统自带的终端使用多了的时候,你会体会到许多不便之处,比如自动补全不够完善,比如界面单调,老早就知道iterm2+oh my zsh的组合,但知道看到一个别人的界面漂亮的不行,才终于打动我也更换成这样的搭配。主要配置:iTerm2 + ...