cxa + 关注
有着丰富的爬虫工作经验,从c#语言转入到python语言,擅长各种爬虫技术,熟悉大规模爬虫开发。热爱并喜欢钻研python。

cxa 发表了文章:

爬虫老崩溃咋整 ?retrying模块了解一下!

发布时间:2019-03-20 15:10:32 浏览:718 回帖 :0

retrying模块的学习 我们在写爬虫的过程中,经常遇到爬取失败的情况,这个时候我们一般会通过try块去进行重试,但是每次都写那么一堆try块,真的是太麻烦,所以今天就来说一个比较pythoni...

云栖社区 python 函数 模块 exception 爬虫

cxa 发表了文章:

redis学习之redis的安装和简介

发布时间:2019-03-20 15:08:51 浏览:713 回帖 :0

redis简介 Redis是一个开源的,高性能的,基于键值对的缓存与存储系统,通过设置各种键值数据类型来适应不同场景下的缓存与存储需求。同时redis的诸多高层级功能使其可以胜任消息队列,任务...

云栖社区 python redis 数据库 数据库存储 高性能 type 爬虫 存储 数据类型

cxa 发表了文章:

python魔法函数__dict__和__getattr__的妙用

发布时间:2019-03-20 15:07:20 浏览:669 回帖 :0

__dict__ __dict__是用来存储对象属性的一个字典,其键为属性名,值为属性的值。 既然__dict__是个字典那么我们就可以用字典的属性了。 我们通过使用dir()属性来看看__di...

python 函数 url class update list

cxa 发表了文章:

logging模块配置笔记

发布时间:2019-03-20 15:06:19 浏览:531 回帖 :0

log文件的路径 #判断在当前的目录下是否有一个logs文件夹。没有则创建 log_dir = os.path.dirname(os.path.dirname(__file__))+'/logs...

日志 LOG 模块 path 配置 class file

cxa 发表了文章:

和我一起入门python爬虫

发布时间:2019-03-20 15:04:56 浏览:744 回帖 :0

前几天就想写一个爬虫系列的文章,因为比较忙所以没有写(还不是因为懒),趁着现在屋里比较的凉爽,心也比较的静,总结下目前遇到的一些爬虫知识,本系列将从简单的爬虫开始说起,后会逐渐的提升难度,同时会对...

云栖社区 python windows 模块 源码 表达式 url session html 爬虫

cxa 发表了文章:

glom模块的使用(二)

发布时间:2019-03-20 14:54:52 浏览:550 回帖 :0

上次我们说到golm的简单应用,glom模块的使用(一) 这次我们继续对glom的其他操作进行学习。 Literal 用法:class  glom.Literal(value) 这个方法的功能主要是...

模块 class

cxa 发表了文章:

分布式队列Celery入门

发布时间:2019-03-20 14:52:04 浏览:4917 回帖 :0

Celery 是一个简单、灵活且可靠的,处理大量消息的分布式系统,并且提供维护这样一个系统的必需工具。它是一个专注于实时处理的任务队列,同时也支持任务调度。Celery 是语言无关的,虽然它是用 ...

分布式 redis 函数 windows 消息中间件 中间件 ADD 分布式系统 celery 存储

cxa 发表了文章:

Mysql存储之原生语句操作(pymysql)

发布时间:2019-03-20 14:50:35 浏览:2084 回帖 :0

Mysql存储之原生语句操作(pymysql) 关系型数据库是基于关系模型的数据库,而关系模型是通过二维表时实现的,于是构成了行列的表结构。 表可以看作是某个实体的集合,而实体之间存在联系,这...

mysql SQL 模块 数据库 update Commit 存储

cxa 发表了文章:

Mysql存储之ORM框架SQLAlchemy

发布时间:2019-03-20 14:48:57 浏览:575 回帖 :0

什么是ORM ORM技术:Object-Relational Mapping,把关系数据库的表结构映射到对象上 也就是说不用再操作mysql的底层语句,而是通过操作映射后的对象。 安装与导入Sqla...

mysql 函数 数据库 session metadata 存储

cxa 发表了文章:

javascript反混淆之packed混淆(一)

发布时间:2019-03-20 14:47:33 浏览:2178 回帖 :0

javascript反混淆之packed混淆(一) 什么是JavaScript反混淆,在理解这个概念前我们先来看下什么是代码混淆,代码混淆,是将计算机程序的代码,转换成一种功能上等价,但是难于阅读...

javascript 浏览器 string html

cxa 发表了文章:

python数据解析模块之glom模块的使用(一)

发布时间:2019-03-20 14:45:39 浏览:304 回帖 :0

glom模块的使用 简单说下glom模块主要是处理结构化数据用的,安装简单pip install glom即可,下面就glom的方法参数做例子讲解。 glom 和模块同名的glom方法使用方法:...

python 模块 path 表达式

cxa 发表了文章:

python模块学习之glob模块

发布时间:2019-03-20 14:44:11 浏览:153 回帖 :0

glob模块 功能描述:glob模块可以使用Unix shell风格的通配符匹配符合特定格式的文件和文件夹,跟windows的文件搜索功能差不多。glob模块并非调用一个子shell实现搜索功能,而...

python 函数 模块 shell makefile

cxa 发表了文章:

fnmatch模块的使用

发布时间:2019-03-20 14:43:09 浏览:1491 回帖 :0

fnmatch模块的使用 此模块的主要作用是文件名称的匹配,并且匹配的模式使用的unix shell风格。 fnmatch比较简单就4个方法分别是:fnmatch,fnmatchcase,filte...

函数 模块 os file pattern regex

cxa 发表了文章:

异步网络模块之aiohttp(一)

发布时间:2019-03-20 14:41:22 浏览:267 回帖 :0

平时我们也许用的更多的是requests模块,或者是requests_hml模块,但是他们都属于阻塞类型的不支持异步,速度很难提高,于是后来出现了异步的grequests,开始了异步网络请求,速度...

云栖社区 python 模块 SSL url session 爬虫 异步 aiohttp

cxa 发表了文章:

python设计模式之单例模式(二)

发布时间:2019-03-20 14:37:40 浏览:2534 回帖 :0

上次我们简单了解了一下什么是单例模式,今天我们继续探究。 上次的内容点这 上次们讨论的是GoF的单例设计模式,该模式是指:一个类有且只有一个对象。通常我们需要的是让实例共享一个相同的装态 比如数...

python class

cxa 发表了文章:

python设计模式之单例模式(一)

发布时间:2019-03-20 14:36:43 浏览:354 回帖 :0

单例设计模式的概念: 单例设计模式即确保类有且只有一个特定类型的对象,并提供全局访问点。一般我们操作数据库的时候为了避免统一资源产生互相冲突,创建单例模式可以维护数据的唯一性。 单例模式的特性: 确...

python 函数 线程 static 多线程 class

cxa 发表了文章:

python并发模块之concurrent.futures(二)

发布时间:2019-03-20 14:34:15 浏览:111 回帖 :0

python并发模块之concurrent.futures(二) 上次我们简单的了解下,模块的一些基本方法和用法,这里我们进一步对concurrent.futures做一个了解和拓展. 上次的内容点...

云栖社区 python 模块 os path url class 线程池 index session html 进程池

cxa 发表了文章:

python并发模块之concurrent.futures(一)

发布时间:2019-03-20 14:32:28 浏览:145 回帖 :0

  Python3.2开始,标准库为我们提供了concurrent.futures模块,它提供了ThreadPoolExecutor和ProcessPoolExecutor两个类,实现了对thre...

云栖社区 python 函数 线程 模块 进程 url github

cxa 发表了文章:

python高频面试问题(三)

发布时间:2019-03-20 14:28:51 浏览:2828 回帖 :0

整理一下最近被问到的一些高频率的面试问题。总结一下方便日后复习巩固用,同时希望可以帮助一些朋友们。前两期点这↓python近期遇到的一些面试问题(一)python近期遇到的一些面试问题(二) 1.请...

云栖社区 python 正则表达式 面试

cxa 发表了文章:

python高频面试问题(二)

发布时间:2019-03-20 14:27:20 浏览:2875 回帖 :0

1. 解释什么是栈溢出,在什么情况下可能出现。 栈溢出是由于C语言系列没有内置检查机制来确保复制到缓冲区的数据不得大于缓冲区的大小,因此当这个数据足够大的时候,将会溢出缓冲区的范围。 在Pytho...

云栖社区 python 服务器 函数 线程 reduce 浏览器 内存管理 多线程 list

2
有着丰富的爬虫工作经验,从c#语言转入到python语言,擅长各种爬虫技术,熟悉大规模爬虫开发。热爱并喜欢钻研python。

感兴趣or擅长的领域:

更多>
python猫
python猫
文章:22丨 粉丝:5丨 话题:0
技术小能手
技术小能手
文章:7857丨 粉丝:20408丨 话题:1
青衫无名
青衫无名
文章:12135丨 粉丝:4124丨 话题:0
山哥在这里
山哥在这里
文章:63丨 粉丝:11957丨 话题:2
knitysteross
knitysteross
文章:7丨 粉丝:19997丨 话题:0
cu.eric.lee
cu.eric.lee
文章:4丨 粉丝:19932丨 话题:0
更多>
1485341941150959
1485341941150959
文章:0丨 粉丝:0丨 话题:0
游客dnzdleakooir6
游客dnzdleakooir6
文章:0丨 粉丝:0丨 话题:0
假_装坚强
假_装坚强
文章:0丨 粉丝:0丨 话题:0
姜小c
姜小c
文章:0丨 粉丝:0丨 话题:0
游客bmj237jpfcada
游客bmj237jpfcada
文章:0丨 粉丝:0丨 话题:0
simple502
simple502
文章:0丨 粉丝:0丨 话题:0