Linux学习笔记(Ubuntu操作系统)之hadoop学习之路

  1. 云栖社区>
  2. 博客>
  3. 正文

Linux学习笔记(Ubuntu操作系统)之hadoop学习之路

biehl 2017-06-16 10:14:00 浏览983
展开阅读全文

1:检查虚拟机的ip命令:ifconfig

2:普通用户切换root用户命令:su

3:root用户切换普通用户命令:su 用户名

4:普通用户执行系统执行前面加命令:sudo

5:查询主机名命令:hostname或uname –n

6:修改主机名命令:vi /etc/hostname(hostname master立即生效,不用重启,---》exit,---》su即可)

centos操作系统修改主机名命令:vi /etc/sysconfig/network

7:修改域名和主机名对应关系命令:vi /etc/hosts(修改主机名的意义就是和域名一致,修改之后可以ping一下修改的主机名)

(补充:vi编辑器三种模式,命令行模式(esc),编辑模式(a,i,o,s),尾行模式(esc :))

8:vi编辑器中在命令模式中复制一行命令:yy

9:vi编辑器中在命令模式中粘贴一行命令:p

10:vi编辑器中在命令模式中剪切一行命令:dd

vi编辑器里面查询内容:/要查找的内容;查找下一个n,查找上一个N。

more   somefile     可以翻页查看, 下翻一页(空格)    上翻一页(b)   退出(q)
less   somefile     可以翻页查看,下翻一页(空格)    上翻一页(b),上翻一行(↑)  下翻一行(↓)  可以搜索关键字(/keyword)

tail -10  install.log   查看文件尾部的10行
tail -f install.log    小f跟踪文件的唯一inode号,就算文件改名后,还是跟踪原来这个inode表示的文件
tail -F install.log    大F按照文件名来跟踪

head -10  install.log   查看文件头部的10行


后台服务管理
service network status   查看指定服务的状态
service network stop     停止指定服务
service network start    启动指定服务
service network restart  重启指定服务
service --status-all       查看系统中所有的后台服务

设置后台服务的自启配置
chkconfig                查看所有服务器自启配置
chkconfig iptables off   关掉指定服务的自动启动
chkconfig iptables on    开启指定服务的自动启动

11:删除文件或者目录命令:rm -rf 文件名

12:创建一个文件夹命令:mkdir 目录名称(文件夹名

mkdir -p [目录名称]

-p递归创建

命令英文:make directories

13:创建一个文件命令:touch 文件名

14:测试是否有网络ping命令:例如ping www.baidu.com

15:重启linux命令:reboot

16:清空命令:clear

17:解压缩命令:tar zxvf 文件名

18:查看全路径命令:pwd

19:ubuntu操作系统图形化到命令行:ctrl+alt+f1(减少浪费资源)

20:ubuntu操作系统命令行到图形化:ctrl+alt+f7(方便操作)

21:ubuntu启动时即为命令行:vi  /etc/init/rc-sysinit.conf    将env DEFAULT_RUNLEVEL=2改为env DEFAULT_RUNLEVEL=3

22:修改文件权限的命令:

sudo chmod 600 ××× (只有所有者有读和写的权限)
sudo chmod 644 ××× (所有者有读和写的权限,组用户只有读的权限)
sudo chmod 700 ××× (只有所有者有读和写以及执行的权限)
sudo chmod 666 ××× (每个人都有读和写的权限)
sudo chmod 777 ××× (每个人都有读和写以及执行的权限)

 23:查询目录中的内容的命令:ls命令 :ls [选项] [文件或者目录]

1 选项:-a 显示所有的文件,包括隐藏文件(.开头的是隐藏文件)
2 
3 -l 显示详细信息(-list)
4 
5 -d查看目录属性
6 
7 -h人性化显示文件大小,可显示文件具体大小
8 
9 -i显示inode

24:文件权限的解释:

如-rw-r--r--

1 第一个-代表:文件类型(-文件d目录  | 软连接文件)
2 
3 第一组:rw- u所有者(user)
4 
5 第二组:r-- g所有组(group)
6 
7 第三组:r-- o其他人(other)
8 
9 解释:r(read)读 w(write)写 x(execute)执行

 25:防火墙的命令:

#查看防火墙状态
        service iptables status

#关闭防火墙
        service iptables stop
#查看防火墙开机启动状态
        chkconfig iptables --list
#关闭防火墙开机启动
        chkconfig iptables off

 26:解压缩的命令:

tar  -zxvf  将要解压缩的文件名称  -C 指定的目录       

27:切换目录的命令:

cd [目录]

命令英文原意:change directory

简化操作:

cd ~进入当前用户的家目录

cd - 进入上次目录

cd .. 进入上一级目录

cd .进入当前目录

28:linux清屏操作的命令:clear/ctrl+L

29:linux的相对路径和绝对路径问题:

--->相对路径:参照当前所在目录,进行查找,如cd ../usr/local/src/

--->绝对路径:从根目录开始指定,一级一级递归查找,在任何目录下, 都能进入指定位置,如cd /etc/

30:显示当前的工作目录的命令:pwd(print working directory执行pwd指令可立刻得知目前所在的工作目录的绝对路径名称。)

31:自动补全的tab键:神奇的tab键,按一下tab键没反应,再按一下tab键,就会列出该目录下的所有目录,供你选择。

32:删除空目录rmdir [目录名称]

----》命令英文原意:remove empty directories

33:删除文件或者目录:rm命令

rm -rf [文件或者目录],命令英文原意:remove

参数:

-r   删除目录

-f   强制删除

34:复制命令cp

cp    [参数]      [原文件或者目录]     [目标目录]

命令英文原意:copy

参数:

-r 复制目录

-p 连带文件属性复制

-d 若源文件是链接文件,则复制链接属性

-a 相当于 -pdr

 35:剪切或者改名命令:mv(英文原意move);

36:linux的目录学习(可以在家目录root或者home目录下面操作,以及tmp目录下随便放内容,其他目录最好不要动):

/ 根目录
/bin 存放必要的命令
/boot 存放内核以及启动所需的文件等
/dev 存放设备文件
/etc 存放系统的配置文件
/home 用户文件的主目录,用户数据存放在其主目录中
/lib 存放必要的运行库
/mnt 存放临时的映射文件系统,我们常把软驱和光驱挂装在这里的floppy和cdrom子目录下。
/proc 存放存储进程和系统信息
/root 超级用户的主目录
/sbin 存放系统管理程序
/tmp 存放临时文件的目录
/usr 包含了一般不需要修改的应用程序,命令程序文件、程序库、手册和其它文档。
/var 包含系统产生的经常变化的文件

37:链接命令:ln

(1)ln -s [原文件---》软链接,原文件一定要写绝对路径哦!] [目标文件]

命令英文原意:link

功能描述:生成链接文件

参数:-s 创建软链接(soft)

(2)硬链接特征:

----》拥有相同的i节点和存储block块,可以看做是同一个文件。

----》可通过i节点识别

----》不能跨分区

----》不能针对目录使用

(3)软链接特征:

----》类似windows快捷方式

----》软链接拥有自己的I节点和block块,但是数据块中只保存原文件的文件名和i节点号,并没有实际的文件数据

----》lrwxrwxrwx | 软链接,软链接文件权限都为rwxrwxrwx

----》修改任意文件,另一个都改变

----》删除原文件,软链接不能使用

 38:文件搜索命令:

---->文件搜索命令:locate(搜索速度比较快)

  (1)使用方法:locate 文件名,在后台数据库中按文件名搜索,搜索速度更快;

      /var/lib/mlocate ;locate命令所搜索的后台数据库,此数据库不是实施更新的,一天一更新,所以需要手动执行updatedb更新数据库;缺点是只可以按照文件名进行搜索;

---->命令搜索命令whereis 与which

  (1)使用用法:whereis  命令名;搜索命令所在路径,即linux已有命令,以及帮助文档所在位置;

      扩展:whoami 查看用户是谁;whatis 命令查看命令;

      参数:-b 只查找可执行文件;

        -m 只查找帮助文件;

  (2)使用用法:which命令搜索命令所在路径以及别名;    

---->文件搜索命令find(遍历所有的目标,功能强大,耗时。)

  (1)find [搜索范围] [搜索条件];例如,find / -name 文件名称

  (2)注意:避免大范围搜索,会非常耗费系统资源,find是在系统当中搜索符合条件的文件名,如果需要匹配,使用通配符匹配,通配符是完全匹配;

  (3)*代表匹配任意内容,?代表匹配任意一个字符,[]代表匹配任意一个中括号内的字符;

  (4)find /root -iname 文件名称   :   不区分大小写;

      find /root -user root    :    按照所有者搜索;

                find /root -nouser    :   查找没有所有者的文件

  (5)find /var/log/ -mtine +10 查找10天前修改的文件;

      -10代表10天内修改文件,10代表10天当天修改的文件,+10代表10天前修改的文件;

      atime 文件访问时间(access),ctime改变文件属性(change),mtime修改文件内容(modify);

  (6)find . -size 25k查找文件大小是25kb的文件;(   .   代表当前目录)

     -25k小于25kb的文件,25k等于25k的文件,+25k大于25kb的文件;

     find . -inum 262422查询i节点是262422的文件;

  (7)find /etc -size +20k -a -size -50k 代表查询/etc、目录下,大于20kb并且小于50kb的文件;

     -a 逻辑与(and),两个条件都满足;

     -o 逻辑或(or),两个条件满足一个即可;

  (8)find /etc -size +20k -a -size -50k -exec ls -lh {} \ ;    查找/etc/目录下,大于20kb并且小于50kb的文件,并且显示详细信息。

      -exec rm  -rf  {} \ 对搜索结果执行删除操作;

---->字符串搜索命令grep

  (1)grep [选项] 字符串 文件名 ,在文件当中匹配符合条件的字符串,例如grep -v 字符串  文件名;

     参数:-i 忽略大小写,-v排除指定的字符串;

---->find命令与grep命令的区别?

  (1)find命令,在系统中搜索符合条件的文件名,如果需要匹配,使用通配符匹配,通配符是完全匹配;

  (2)grep命令,在文件当中搜索符合条件的字符串,如果需要匹配,使用正则表达式进行匹配,正则表达式是包含匹配;

 39:帮助命令:

(1):man命令,获取指定命令的帮助(英文manual)

       例如man ls查看ls的帮助;

    注意:q键退出man命令;(2):help命令,命令--help,获取命令选项的帮助;例如,ls --help;

 40:压缩命令:

常用的压缩格式:.zip    .gz    .bz2   .tar.gz    .tar.bz2

1:zip格式的压缩和解压缩命令:

  (1)压缩文件的命令:zip 压缩文件名 原文件;

  (2)压缩目录的命令:zip -r 压缩文件名 源目录;

  (3)最常使用的解压缩的命令(解压缩.zip的文件):unzip 压缩文件;

2:.gz格式压缩

  (1)gzip源文件,压缩为.gz格式的压缩文件,源文件会消失;

  (2)gzip -c 源文件 > 压缩文件,压缩为.gz格式,源文件保留;

  (3)gzip -r 目录,压缩目录下所有的子文件,但是不能压缩目录;

  (4)gzip -d 压缩文件,解压缩文件;

  (5)gunzip 压缩文件,解压缩文件;

  (6)gunzip -r 目录,解压缩目录;

3:.bz2格式压缩

  (1)bzip2 源文件,压缩为.bz2的格式,不保留源文件;

  (2)bzip2 -k 源文件,压缩之后保留源文件;

     注意:bzip2命令不能压缩目录;

  (3)bzip2 -d 压缩文件,解压缩,-k保留压缩文件;

  (4)bunzip2 压缩文件,解压缩,-k保留压缩文件;

4:打包命令tar(解决目录不能压缩的方法

  (1)tar -cvf 打包文件名 源文件;

      参数:-c打包,-v显示过程,-f指定打包后的文件名;

  (2)解压缩的命令:

      tar -xvf 打包文件名;

      参数:-x 解打包;

5:其实.tar.gz格式是先打包为.tar格式,再压缩为.gz格式;

  (1)tar -zcvf 压缩包名.tar.gz 源文件;

    参数:-z压缩为.tar.gz格式;

  (2)最常使用的解压缩命令(解压缩.tar格式的文件):tar -zxvf 压缩包名.tar.gz;

    参数:-x解压缩.tar.gz格式;

6:.tar.bz2压缩格式

  (1)tar -jcvf 压缩包名.tar.gz2 源文件;

    参数:-j压缩为.tar.gz2格式;

  (2)最常使用的解压缩命令(解压缩.tar格式的文件):tar -jxvf 压缩包名.tar.gz2;

    参数:-x解压缩.tar.gz2格式;

 41:linux中关机和重启命令:

1:shutdown命令,使用用法:shutdown [选项] 时间

  参数:

    -c:取消前一个关机命令

    -h:关机

    -r:重启

  用法举例:shutdown -r 05:30 &(凌晨五点关机,并且是后台执行)

2:linux操作系统其他关机命令:halt    poweroff    init 0

3:linux操作系统的重启命令:reboot;

 42:shell是什么???

  (1)shell是一个命令行解释器,它为用户提供了一个向linux内核发送请求以便运行程序的界面系统级程序,用户可以用shell来启动,挂起,停止,甚至是便携一些程序。

  (2)shell还是一个功能相当强大的编程语言,易编写,易调试,灵活性强。shell是解释执行的脚本语言,在shell中可以直接调用linux系统命令;

43:echo输出命令:

1:echo [参数] [输出内容]

  参数:

    -e : 支持反斜线控制的字符转换;

2:echo可以将内容写到文件里面,如:

  echo 内容 > 文件名称;

3:echo颜色输出格式:echo -e "\e[1;31m你好啊\e[0m"                  echo -e "\e[1;32m你好啊\e[0m"                    echo -e "\e[1;33m你好啊\e[0m"...... 

 44:linux脚本的好处,可以直接调用linux中shell的命令:

1:shell脚本的第一行#!/bin/bash这一句(表示这个是linux标准脚本,如果是纯shell则不会报错),如果省去这句话,如果调用其他其他语言就会报错;

2:shell脚本里面的#表示注释;

3:书写简单的脚本,如vim hello.sh ,内容如下所示:

  #!/bin/bash
  #the first program

  echo -e "\e[1;31mhello wolrd\e[0m"

保存:wq退出以后,可以进行运行操作;
4:运行linux脚本的几种命令:

  (1)赋予执行权限,直接运行
    chmod 755 hello.sh
    ./hello.sh或者./hello.sh start
    (2)通过bash调用执行脚本
    bash hello.sh
      (3)sh hello.sh start直接运行也行;

 45:Bash的基本功能:

1:命令别名和快捷键

  (1)命令别名:alias,举例说明(起别名必须符合别名规范,不然出错):alias aa='ls -l --color=auto'

    删除别名的命令:unalias aa

  (2)查看系统中所有的命令别名:alias

  (3)设定命令别名:alias 别名= ‘原命令’

  (4)别名永久生效与删除别名:vi ~/.bashrc写入环境变量配置文件,修改过后的文件生效方法:source .bashrc

  (5)删除别名的命令:unalias 别名

  (6)快捷键:

      强制终止的快捷键:ctrl+c;

      清除屏幕的快捷键:ctrl+l;

      光标移动到命令行首:ctrl +a;

      光标移动到命令行尾:ctrl+e;

      从光标所在位置删除到行首:ctrl+u;

      把命令放入后台:ctrl+z;

                在历史命令中搜索:ctrl+r;

2:历史命令

  (1)history [选项] [历史命令保存文件]

    选项:-c清空历史命令;

       -w把缓存中的历史命令写入历史命令保存文件~/.bash_history;

  (2)注意:根目录下面,ls -a显示.bash_history文件可以进行查看历史命令;

  (3)历史命令默认会保存1000条,可以在坏境变量配置文件/etc/profile中进行修改;可以去vim /etc/profile里面修改保存的历史命令的条数;

  (4)使用上下箭头调用之前的历史命令;

  (5)命令与文件补全:在Bash中,命令与文件补全是非常方便与常用的功能,我们只要在输入命令或者文件时,按“tab”键就会自动进行补全;

3:输出重定向

  (1):标准输入输出:

    键盘,设备文件名/dev/stdin,文件描述符0,类型为标准输入;

    显示器,设备文件名/dev/stdout,文件描述符1,类型为标准输出;

    显示器,设备文件名/dev/stderr,文件描述符2,类型为标准错误输出;

  (2):输出重定向:

    标准输出重定向:命令 > 文件 ,以覆盖的方式,把命令的正确输出输出到指定的文件或者设备当中;

            命令 >> 文件,以追加的方式,把命令的正确输出输出到指定的文件或者设备中。

    标准错误输出重定向:错误命令  2 >文件,以覆盖的方式,把命令的错误输出输出到指定的文件或者设备中。

              错误命令 2 >> 文件,以追加的方式,把命令的错误输出输出到指定的文件或者设备中。

4:多命令顺序执行(多命令执行符;  && ||)

  (1);  ---->命令1; 命令2  的作用多个命令顺序执行,命令之间没有任何逻辑联系;

  (2)&& ---->命令1 && 命令2 的作用是逻辑与,当命令1正确执行,则命令2 才会执行,当命令1执行不正确,则命令2 不会执行

  (3)||---->命令1 || 命令2的作用是逻辑与,当命令1执行不正确,则命令2才会执行,当命令1正确执行,则命令2不会执行

  (4)管道符,命令格式:命令1 | 命令2的作用是命令1的正确输出作为命令2的操作对象;

  (5)管道符举例说明:ls -l /etc | more将管道符前面正确执行的输出作为管道符后面的操作对象;

5:通配符

  (1)?匹配一个任意字符;

  (2)*匹配0个或者任意多个任意字符,也就是可以匹配任何内容;

  (3)[]匹配括号中任意一个字符,例如:[abc]代表一定匹配一个字符,或者是a,或者是b,或者是c;

  (4)[-]匹配括号中任意一个字符,-代表一个范围,例如[a-z]代表匹配一个小写字母;

  (5)[^]逻辑非,表示匹配不是中括号内的一个字符,例如:[^0-9]代表匹配一个不是数字的字符;

6:特殊符号

  (1)''单引号,在单引号中所有的特殊符号,如"$"个“‘”反引号都没有特殊含义;

  (2)""双引号,双引号,在双引号中特殊符合都没有特殊含义,但是“$”,"'"和“\”是例外,拥有"调用变量的值","引用命令"和“转义符”的特殊含义;

  (3)#在shell脚本中,#开头的行代表注释;

  (4)$用于调用变量的值,如需要调用变量name的值时,需要用$name的方式得到变量的值;

  (5)\转义符,跟在\之后的特殊符号将失去特殊含义,变为普通字符,如\$将输出"$"符号,而不当作是变量引用;

  (6)$()和反引号作用一样,用来引用系统命令;

  (7)''反引号,反引号括起来的内容是系统命令,在Bash中会执行它,和$()作用一样,不过推荐使用$(),因为反引号非常容易看错;

   

网友评论

登录后评论
0/500
评论
biehl
+ 关注