1. 云栖社区>
  2. 全部标签>
  3. #分布式#
分布式

#分布式#

已有42人关注此标签

内容分类:
博客 | 问答 | 视频 | 资料 |

转] Python 爬虫的工具列表 附Github代码下载链接

转自http://www.36dsj.com/archives/36417 这个列表包含与网页抓取和数据处理的Python库 网络 通用 urllib -网络库(stdlib)。 requests -网络库。

python 分布式 服务器 模块 浏览器 websocket url xml 自然语言处理 markdown html github

消息服务介绍

前言 2010年为公司设计的一套消息服务,目前已经运用到多个大型企业项目上。共分为管理配置功能和服务两个核心内容。 消息服务 MES是执行层面的管理系统,它的核心是事件驱动,而消息服务是它的基础,它提供了信息集成的能力。

分布式 架构 消息服务 加密 模块 配置 数据采集

多层分布式设计模式

  原来就想写一些关于分布式的设计。正好目前开发的GIX4项目中,需要对客户端的许多操作进行记录。这个功能的设计或多或少能说明,一般情况下,多层的分布式系统应该如何设计。现在我就对这个功能进行描述。   功能描述     GIX4项目中有个审核日志记录功能,它需要以下功能:     需要把客户的所有操作记录下来,以便支持审计。

分布式 服务器 日志 LOG 模块 数据库 void 分布式系统

ubuntu mpi多机实践

好不容易实验室来了两台性能还可以的服务器,正好师兄师姐比较忙没空来配置服务器,所以我可以暂时使用服务器来学一下怎么配置集群,哈哈,单机已经满足不了我了。首先,我们那比较简单的mpich进行开刀,配置一个简单的mpich集群。

分布式 服务器 ubuntu 线程 配置 集群 SSH 多线程 MPI 编程 换装攻略

OEA中的缓存模块设计

一般缓存介绍     网上介绍缓存的文章比较多,在这里我就挑点重点说一下。     缓存是信息系统软件硬件设计中常用的设计方法:从底层硬件的CPU结构中的多级缓存,到软件中操作系统中内存管理的设计,再到应用软件中的高繁数据的缓存设计;在代码设计方面,小到一个冗余变量的设计,大到分布式缓存的设计;都可以见到缓存设计的身影。

分布式 模块 数据库 Cache 领域模型 存储

OEA 中的业务控制器设计模式

对于业务逻辑的组织,个人认为,最好是使用 DDD(《Domain Driven Design》) 的方式。DDD 使用领域模型来表达实体间的关系,同时在应用层使用 Service 来组织各实体间的过程式代码。

分布式 面向对象 领域模型 service

福利到!Rafy(原OEA)领域实体框架 2.22.2067 发布!

发布内容 注意,本次发布,只包含 Rafy 框架中的领域实体框架及相关文档。不包含“界面自动生成”等其它组件。 安装新的发布包:《使用 NuGet 下载最新的 Rafy 框架及文档》。 网页版用户手册(实时更新):《http://zgynhqf.github.io/Rafy》。

分布式 架构 源码 面向对象 数据库 配置

Rafy 领域实体框架演示(4) - 使用本地文件型数据库 SQLCE 绿色部署

前言 支持一款与 Access 类似的文件型数据库,对于一些绿色安装的应用程序来说是非常必须的。使用 Rafy 领域实体框架开发的应用程序,可以在不变更一行代码的情况下,直接由大型数据库管理系统,移植到使用简单的 SqlCE 4 文件型数据库。

分布式 数据库 配置

作为首席架构师,我是如何选择并落地架构方案的?

如何针对当前需求,选择合适的应用架构,如何面向未来,保证架构平滑过渡,这个是软件开发者,特别是架构师,都需要深入思考的问题。 本文首发于InfoQ垂直号「聊聊架构」,ID:archtime 无架构,不系统,架构是大型系统的关键。

分布式 架构 模块 电商 分布式架构 SOA service

消息服务介绍

前言 2010年为公司设计的一套消息服务,目前已经运用到多个大型企业项目上。共分为管理配置功能和服务两个核心内容。 消息服务 MES是执行层面的管理系统,它的核心是事件驱动,而消息服务是它的基础,它提供了信息集成的能力。

分布式 架构 消息服务 加密 模块 配置 数据采集

Rafy 领域实体框架简介

简介 Rafy 领域实体框架是一个轻量级 ORM 框架。 与一般的 ORM 框架不同的是,它不只关注于一般性的面向对象实体与关系数据库的映射,而是更关注于富领域模型(聚合实体)与关系数据库的映射。使得开发者可以非常方便地使用富领域模型的同时,配备强大的实体属性设计、查询功能,并兼顾了极高的开发效率。

分布式 架构 面向对象 数据库 配置 插件 领域模型

Rafy 领域实体框架简介

简介 Rafy 领域实体框架是一个轻量级 ORM 框架。 与一般的 ORM 框架不同的是,它不只关注于一般性的面向对象实体与关系数据库的映射,而是更关注于富领域模型(聚合实体)与关系数据库的映射。使得开发者可以非常方便地使用富领域模型的同时,配备强大的实体属性设计、查询功能,并兼顾了极高的开发效率。

分布式 架构 面向对象 数据库 配置 插件 领域模型

基于 Transaction 类的分布式显式事务

自.NET2.0以来增加了System.Transactions命名空间,为.NET应用程序带来了一个新的事务编程模型。 这个命名空间提供了几个依赖的TransactionXXX类。Transaction是所有事务处理类的基类,并且定义了所有事务类都可以使用的属性、方法和事件。

分布式 SQL 测试 string Transaction cmd

基于TransactionScope类的分布式隐式事务

System.Transactions 命名空间中除了上一节中提到的基于 Transaction 类的显式编程模型,还提供使用 TransactionScope 类的隐式编程模型,它与显示编程模型相比,更加方便简单,它也是MSDN中建议使用的编程模型。

分布式 SQL string exception 编程 scope cmd

ESSD云盘(邀请测试)发布

信息摘要: ESSD云盘高达100万IOPS/100微妙单路时延,高性能高可靠设计适用客户: 适合对存储IO性能有一定要求的企业级客户使用,比如大中型OLTP关系型数据库、NoSQL数据库、分布式日志系统ELK等等,适合电子商务、在线游戏、交易支付、CRM等业务应用。

分布式 NOSQL 性能 日志 数据库 测试 云盘 aliyun 高性能 html 存储

Web技术的发展和网页游戏

开发一款网络游戏,不能够回避以下两个问题,如何吸引玩家安装或者体验我们的游戏;如何留住玩家,同时吸引更多的玩家。其中第一个问题是最关键的,如果玩家连安装和体验都不进行,如何谈得上留住玩家,更谈不上吸引更多玩家。

分布式 服务器 函数 web 浏览器 脚本 service

Hadoop集群(第2期)_机器信息分布表

1、分布式环境搭建   采用4台安装Linux环境的机器来构建一个小规模的分布式集群。 图1 集群的架构     其中有一台机器是Master节点,即名称节点,另外三台是Slaver节点,即数据节点。

分布式 服务器 hadoop 集群 数据节点 路由器

细细品味C#——.Net Remoting专题

 什么是Remoting,简而言之,我们可以将其看作是一种分布式处理方式  。从微软的产品角度来看,可以说Remoting就是DCOM的一种升级,它改善了很多功能,并极好的融合到.Net平台下。Microsoft .NET Remoting 提供了一种允许对象通过应用程序域与另一对象进行交互的框架。

分布式 服务器 操作系统 c#

PyTorch发布一周年:盘点社区和工程大事件,后来者居上态势已显?

本文来自AI新媒体量子位(QbitAI) 今天,PyTorch公开发布一周年了。 这个自诞生之日起就火热的深度学习框架,这一年是怎样的成长轨迹?刚刚,PyTorch团队在官网上发文,盘点了PyTorch上一年的进展、大事件和社区情况,并和其他框架进行了对比。

深度学习 分布式 性能 Twitter github 神经网络

Nutch搜索引擎(第1期)_ Nutch简介及安装

1、Nutch简介   Nutch是一个由Java实现的,开放源代码(open-source)的web搜索引擎。主要用于收集网页数据,然后对其进行分析,建立索引,以提供相应的接口来对其网页数据进行查询的一套工具。

分布式 java hadoop 日志 path 配置 tomcat 排序 搜索引擎 索引 lucene JDK

284
GO