包含标签 Ruia 的文章

打造一个干净且个性化的公众号阅读环境

背景 一个月前的下班时间,当时我正在看公众号,准备感受下今天的技术文章,不愉快的事情发生了,竟然一连好几篇文档点进去都是广告,至今想起,那种心情仍旧挥散不去。 于是我产生了一个想法,为什么不构建一个干净且个性化的个人阅读环境呢?作为一名微信公众号的重度用户,公众号一直被我设为汲取知识……

阅读全文

2C 使用教程

2C的目的是为了构建一个多源(公众号、RSS)、干净、个性化的阅读环境,如果你在公众号阅读体验下深切感受到对于广告的无奈,那么这个项目就是你需要的,一起看看怎么安装部署2C吧。 开始 2C项目对于一些基础环境是有一点要求的,为了尽可能减少开发者部署使用的复杂度(特别是非Python开……

阅读全文

Ruia异步爬虫框架——快速开始

基于Ruia快速实现一个以Hacker News为目标的爬虫 本文主要通过对Hacker News的爬取示例来展示如何使用Ruia,下图红框中的数据就是爬虫脚本需要爬取的目标: 开始前的准备工作: 确定已经安装Ruia:pip install ruia -U 确定可以访问Hacker News 第一步:定义 Item Item的目的是定……

阅读全文

以Ruia为例:如何实现一个Python爬虫框架

这篇文章的题目有点大,但这并不是说我自觉对Python爬虫这块有多大见解,我只不过是想将自己的一些经验付诸于笔,对于如何写一个爬虫框架,我想一步一步地结合具体代码来讲述如何从零开始编写一个自己的爬虫框架 2018年到如今,我花精力比较多的一个开源项目算是Ruia了,这是一个基于Py……

阅读全文

谈谈对Python爬虫的理解

谈谈对Python爬虫的理解 爬虫也可以称为Python爬虫 不知从何时起,Python这门语言和爬虫就像一对恋人,二者如胶似漆 ,形影不离,你中有我、我中有你,一提起爬虫,就会想到Python,一说起Python,就会想到人工智能……和爬虫 所以,一般说爬虫的时候,大部分程序员潜意识里……

阅读全文