1. 阿里云>
  2. 云栖社区>
  3. 主题地图>
  4. P>
  5. pickle存储

当前主题:pickle存储

Spark整合Ray思路漫谈

作者:祝威廉,资深数据架构,11年研发经验。同时维护和开发多个开源项目。擅长大数据/AI领域的一些思路和工具。现专注于构建集大数据和机器学习于一体的综合性平台,降低AI落地成本相关工作上。 什么是Ray 之前花了大概两到三天把Ray相关的论文,官网文档看了一

阅读全文

Python的小数据存储,用什么格式更有逼格?

小数据存储 我们在编写代码的时候,经常会涉及到数据存储的情况,如果是爬虫得到的大数据,我们会选择使用数据库,或者excel存储。但如果只是一些小数据,或者说关联性较强且存在存储后复用的数据,我们该如何存储呢? 使用open保存文本 最简单、粗暴+无脑的存储方

阅读全文

Python入门无从下手?Python学习教程(知识架构)给你准备好了

我发现这两天,同学们对于python基础课程到底要学什么,一直不能很好的确定,虽然给大家出的Python学习教程和发给部分同学的视频资源,大家也都有看有学,但是很多同学还是不能有一个明确的方向,找不准自己的定位!那么我在这里针对python基础知识的几个阶段

阅读全文

独家 | 10个数据科学家常犯的编程错误(附解决方案)

作者:Norman Niemer 翻译:李润嘉 校对:李洁 文章来源:微信公众号 数据派THU 本文约2000字,建议阅读10分钟。 本文为资深数据科学家常见的10个错误提供解决方案。 数据科学家是“比软件工程师更擅长统计学,比统计学家更擅长软件工程的人”。

阅读全文

独家 | 基于Python的遗传算法特征约简(附代码)

作者:Ahmed Gad 翻译:张睿毅 校对:丁楠雅 文章来源:微信公众号 数据派THU 本教程主要使用numpy和sklearn来讨论如何使用遗传算法(genetic algorithm,GA)来减少从python中的Fruits360数据集提取的特征向量

阅读全文

最常使用的数据挖掘算法——决策树

决策树(Decision Tree)算法主要用来处理分类问题,是最经常使用的数据挖掘算法之一。 一、决策树 场景 一个叫做 "二十个问题" 的游戏,游戏的规则很简单:参与游戏的一方在脑海中想某个事物,其他参与者向他提问,只允许提 20 个问题,问题的答案也只

阅读全文

Python3入门(九)输入和输出

前面几章介绍了一些常用的输入输出,本文将具体介绍Python的输入和输出 一、输出格式美化 Python两种输出值的方式: 表达式语句和print()函数。 第三种方式是使用文件对象的write()方法,标准输出文件可以用sys.stdout引用。 如果你希

阅读全文

PyODPS DataFrame 处理笛卡尔积的几种方式

PyODPS 提供了 DataFrame API 来用类似 pandas 的接口进行大规模数据分析以及预处理,本文主要介绍如何使用 PyODPS 执行笛卡尔积的操作。 笛卡尔积最常出现的场景是两两之间需要比较或者运算。以计算地理位置距离为例,假设大表 Coo

阅读全文

pickle存储相关问答

提问题

如何改变 yielded value值

以下代码使用上下文管理器将变量存储并加载到文件中。但是,必须设置valuecontext manager(loaded.value)所产生的属性非常烦人。我想要 不必定义像这样的新类 LoadedValue 将context manager(loade

阅读全文