作者: 方瑞东
1106人浏览
评论数：0
7年前
本博文主要介绍JAVA文件编程，主要包括通过JDK提供的I/O来从文件读取和写入数据、字节流读写文件的方法、字符流读写文件的方法、如何使用File类创建、删除和遍历文件与目录等操作。 不管是C/C++还是JAVA，都可能生成一些持久性数据，我们可以将数据存储
作者: 小金子
1110人浏览
评论数：0
6年前
学过C语言的朋友都知道C编译器在划分内存区域的时候经常将管理的区域划分为数据段和代码段，数据段包括堆、栈以及静态数据区。那么在Java语言当中，内存又是如何划分的呢？ 由于Java程序是交由JVM执行的，所以我们在谈Java内存区域划分的时候事实上是指
作者: ghost丶桃子
2394人浏览
评论数：0
6年前
1. JVM体系结构 图1 JVM体系结构 方法区：存放JVM加载的类型信息。包括: 类型基本信息，常量池，字段信息，方法信息，类变量，指向ClassLoader的引用，Class类的引用，方法表等。 （对应JVM内存配置中的-PermSize等） java
作者: 技术小牛人
976人浏览
评论数：0
5年前
我们都知道要对磁盘进行分区，但是为什么要进行分区呢？当然有很多好处啦！接下来我们就说道说道：1.优化I/O性能 2.实现磁盘空间配额限制 3. 提高修复速度 4. 隔离系统和程序 5. 安装多个OS 6. 采用不同文件系统 有两种分区方式：MBR和GPT MB
作者: 涂作权
8852人浏览
评论数：0
5年前
1.上传tar包这里我上传的是apache-hive-1.2.1-bin.tar.gz2.解压 mkdir -p /home/tuzq/software/hive/ tar -zxvf apache-hive-1.2.1-bin.tar.g
作者: 小金子
759人浏览
评论数：1
6年前
这是java io 比较基本的一些处理流，除此之外我们还会提到一些比较深入的基于io的处理类，比如console类，SteamTokenzier,Externalizable接口，Serializable接口等等一些高级用法极其原理。 一、java
作者: 蒋固金
928人浏览
评论数：0
7年前
计算机文件是以计算机硬盘为载体存储在计算机上的信息集合。JAVA中对文件的操作主要是使用java.io.File类。这一篇博客也将围绕着File类进行讲解。 构造方法 方法名 说明 File(File parent, String child) 根据 par
作者: 传学
7730人浏览
评论数：0
6年前
创建表的时候，可以设置普通列和分区列。在绝大多数情况下，可以把普通列理解成数据文件的数据，而分区列可以理解成文件系统的目录。所以表的存储空间的占用，讲的是普通列的空间占用。分区列虽然不直接存储数据，但是如同文件系统里的目录，可以起到方便数据管理，并在计算只指
作者: 莱昂007
1970人浏览
评论数：1
4年前
flink程序在yarn上执行 kafka source topic分区为20 设置程序并行度为10，-yn 2 -ys 5 -ytm 26600 -yjm 5120，我看到网上有说是因为程序并行度太高导致打开的文件数太多，从而导致的在hdfs创建文件不成功，
作者: ycl0510
2121人浏览
评论数：2
5年前
我刚开始学大数据，用虚拟机写了hadoop集群，后来在阿里云上租了区同分区的服务器也搭了hadoop集群，可以正常运行，并且在公网访问页面。但是学习到用java代码上传文件到hadoop时出现了问题。 java代码如下： public static
作者: 隐林
36996人浏览
评论数：30
5年前
 大数据计算服务
作者: yq传送门
2051人浏览
评论数：0
5年前
 大数据计算服务（MaxCompute，原名 ODPS）是一种快速、完全托管的 GB/T
作者: 小六码奴
498人浏览
评论数：1
3年前
我们有很多parquet数据集，按年/月/日/小时划分。 只有一个_SUCCESS文件，其中一些时间是空的。 我们实现迭代所有分区并执行工作的作业。打开空数据集时遇到问题。org.apache.spark.sql.AnalysisException
