徐胖子 + 关注

徐胖子 发表了文章:

Hadoop中基于文件的数据格式(1)SequenceFile

发布时间:2016-12-11 10:55:00 浏览:1153 回帖 :0

1 概述 1 SequenceFile是Hadoop为例存储二进制的<k,v>而设计的一种平面文件。 2 SequenceFile的key和value是writable或者wr...

hadoop Apache path string static class void 存储

徐胖子 发表了文章:

从Hadoop IOUtils closeStream方法看如何安全关闭流

发布时间:2016-12-11 06:56:00 浏览:768 回帖 :0

使用方法 IOUtils.closeStream(writer); 进入代码 public static void closeStream(java.io.Closeable st...

安全 java hadoop LOG static exception stream void

徐胖子 发表了文章:

Hadoop API文档地址

发布时间:2016-12-10 21:22:00 浏览:890 回帖 :0

经常需要查阅,做一下笔记 http://hadoop.apache.org/docs/ http://hadoop.apache.org/docs/current1/api/ http:...

hadoop Apache http API

徐胖子 发表了文章:

MapReduce中的InputFormat(2)自定义InputFormat

发布时间:2016-12-10 11:55:00 浏览:1306 回帖 :0

1 概述 Hadoop内置的输入文件格式类有: 1)FileInputFormat<K,V>这个是基本的父类,自定义就直接使用它作为父类。 2)TextInputFormat...

hadoop Apache path string 序列 class Mapreduce

徐胖子 发表了文章:

Hadoop上传文件报错: name node is in safe mode

发布时间:2016-12-09 20:26:00 浏览:1015 回帖 :0

将本地文件拷贝到hdfs上去,结果上错误:Name node is in safe mode 这是因为在分布式文件系统启动的时候,开始的时候会有安全模式,当分布式文件系统处于安全模式的情况下...

安全 hadoop node 分布式文件系统

徐胖子 发表了文章:

Hadoop中的序列化

发布时间:2016-12-09 20:15:00 浏览:894 回帖 :0

1 简介 序列化和反序列化就是结构化对象和字节流之间的转换,主要用在内部进程的通讯和持久化存储方面。通讯格式需求 hadoop在节点间的内部通讯使用的是RPC,RPC协议把消息翻译成二进制...

java hadoop Apache 数据流 string static class void test junit account

徐胖子 发表了文章:

Hadoop运行时缺少hadoop.dll winutils.exe

发布时间:2016-12-09 12:33:00 浏览:1700 回帖 :0

1 发现问题 在window连接虚拟机Hadoop集群时遇到问题: 1.1 缺少winutils.exe Could not locate executable null \bin\wi...

hadoop http 配置 集群 Blog dll

徐胖子 发表了文章:

Hadoop中的压缩(1) 概述与实例

发布时间:2016-12-08 19:46:00 浏览:1226 回帖 :0

1 概述 文件压缩主要有两个好处,一是减少了存储文件所占空间,另一个就是为数据传输提速。在hadoop大数据的背景下这两点尤为重要。hadoop里支持很多种压缩格式: DEFLATE是...

算法 gzip hadoop Apache string file Mapreduce

徐胖子 发表了文章:

MapReduce中的InputFormat(1)概述

发布时间:2016-12-06 19:15:00 浏览:873 回帖 :0

1 概念InputFormat用于描述输入数据的格式,提供以下两个功能:A、数据切分:按照某种策略将输入的数据切分成若干split,以便确定Map Task个数,以及对应的Split。B、提供...

同步 Mapreduce

徐胖子 发表了文章:

Hadoop报错:Failed to locate the winutils binary in the hadoop binary path

发布时间:2016-12-05 08:52:00 浏览:4485 回帖 :0

1 发现问题在虚拟机中搭建了hadoop集群,在windows中通过代码访问报错 15/06/11 15:35:50 ERROR Shell: Failed to locate the ...

java hadoop windows Apache shell path 配置 集群 string static file

徐胖子 发表了文章:

Hadoop2.X中使用RPC

发布时间:2016-12-04 18:12:00 浏览:611 回帖 :0

1.1 协议 import org.apache.hadoop.io.Text; import org.apache.hadoop.ipc.VersionedProtocol; publ...

RPC java hadoop Apache Server string static class void test

徐胖子 发表了文章:

Hadoop1.X中使用RPC

发布时间:2016-12-04 11:16:00 浏览:698 回帖 :0

1.1 协议 import org.apache.hadoop.io.Text; import org.apache.hadoop.ipc.VersionedProtocol; publ...

RPC java hadoop Apache Server string static class void test

徐胖子 发表了文章:

Hadoop报错:could only be replicated to 0 nodes, instead of 1

发布时间:2016-12-04 10:45:00 浏览:1707 回帖 :0

1 发现问题 执行hadoop上传文件命令,报错could only be replicated to 0 nodes, instead of 12 方案1 原因:查看logs文件夹下da...

java hadoop 日志 磁盘

徐胖子 发表了文章:

shell预定义变量$?使用注意点

发布时间:2016-11-28 20:00:00 浏览:559 回帖 :0

vim a.txt内容为aaa $?最后一次执行的命令的返回状态。0表示正确,非0表示错误。 grep 'aaa' a.txt echo $? #0 grep 'bbb' a.txt ...

shell vim

徐胖子 发表了文章:

检测远程主机上的某个端口是否开启——telnet命令

发布时间:2016-11-25 12:41:00 浏览:2390 回帖 :0

要测试远程主机上的某个端口是否开启,无需使用太复杂的工作,windows下就自带了工具,那就是telnet。ping命令是不能检测端口,只能检测你和相应IP是否能连通。 1 安装telnet...

服务器 windows 主机 测试 static Ping Blog cmd

徐胖子 发表了文章:

JSP中报错only a type can be imported: XXX resolves to package

发布时间:2016-11-25 11:22:00 浏览:941 回帖 :0

一、发现问题<%@ page language="java" import="cn.test" pageEncoding="UTF-8"%>,cn.xy.test包下有一些JAVA...

java 服务器 test page type JSP utf-8

徐胖子 发表了文章:

Hive中的复杂数据类型

发布时间:2016-11-24 10:01:00 浏览:986 回帖 :0

在Hive中如何使用符合数据结构  maps,array,structs 1 Array的使用 创建数据库表,以array作为数据类型create table  person(name str...

hadoop BY string Hive test Create 数据类型

徐胖子 发表了文章:

Linux中sleep命令

发布时间:2016-11-23 20:48:00 浏览:641 回帖 :0

sleep 1睡眠1秒 sleep 1s 睡眠1秒 sleep 1m 睡眠1分 sleep 1h 睡眠1小时 原贴地址:http://www.jb51.net/article/5719...

linux http

徐胖子 发表了文章:

Linux中exit命令

发布时间:2016-11-23 18:39:00 浏览:866 回帖 :0

用途说明 exit命令用于退出当前shell,在shell脚本中可以终止当前脚本执行  常用参数 格式:exit n 退出。设置退出码为n   格式:exit 退出。退出码不变,...

linux http shell code 脚本 static Blog

徐胖子 发表了文章:

SQLyog Enterprise常用快捷键

发布时间:2016-11-14 21:01:00 浏览:943 回帖 :0

1 SQL格式化 F12 格式化当前行所在的SQL Ctrl+F12    格式化选中的SQL Shift+F12   格式化所有SQL  2 窗口操作 Ctrl+T 打开一个新的查...

SQL http 浏览器 update Blog SQLyog

3
更多>
stephenlu聂风
stephenlu聂风
文章:1丨 粉丝:1丨 话题:0
易立
易立
文章:55丨 粉丝:51307丨 话题:0
丁奇
丁奇
文章:79丨 粉丝:7140丨 话题:0
德哥
德哥
文章:2044丨 粉丝:14740丨 话题:14
更多>
钱亿堆
钱亿堆
文章:0丨 粉丝:0丨 话题:0
1544780173979491
1544780173979491
文章:0丨 粉丝:0丨 话题:0
樰篱
樰篱
文章:283丨 粉丝:602丨 话题:7
tanbobo
tanbobo
文章:0丨 粉丝:0丨 话题:0
新哥。。
新哥。。
文章:0丨 粉丝:0丨 话题:0
小埋22
小埋22
文章:0丨 粉丝:0丨 话题:0