启动数据库报错，错误如下：
SQL> startup nomount pfile=’/oracle/admin/ecis/ecis.ora1’;
ORA-27154: post/wait create failed
ORA-27300: OS system dependent operation:semget failed with status: 28
ORA-27301: OS failure message: No space left on device
ORA-27302: failure occurred at: sskgpsemsper
看如上报错空间不足，但是查看分区磁盘空间都充裕，为啥报这个错误呢？
查看系统日志发现如下信息：
告警信息：
DISK CRITICAL - free space : /backup/script 5773 MB (28% inode=99%);/u01/app/oracle/oradata 171485 MB (20% inode=99%);/u01/app/oracle/archivelog 12059 MB (7% inode=99%);
以上告警可知，inode空间不足，这类告警出现的频率相对是比较少的，想要彻底解决此类告警，就不得不说一下有关存储的相关知识了。
文件储存在硬盘上，硬盘的最小存储单位叫做”扇区”（Sector）。每个扇区储存512字节（相当于0.5KB）。
操作系统读取硬盘的时候，不会一个个扇区地读取，这样效率太低，而是一次性连续读取多个扇区，即一次性读取一个”块”（block）。这种由多个扇区组成的”块”，是文件存取的最小单位。”块”的大小，最常见的是4KB，即连续八个 sector组成一个 block。
而系统会把真是的数据和文件属性（rwx,group,uid…..），存放到不通的块，权限等属性存放到不同的inode中，实际数据会存放到data block中，另外还有一个超级块superblock会记录文件系统的基本信息，如inode,block总量使用量以及剩余量等。
inode 中除了记录文件属性外，还记录了文件所在的block号，一个文件占一个inode，因此 我们知道的是，如果得到inode就很轻松知道对应的文件的block,也就能找到data block了。
inode包含文件的元信息，具体来说有以下内容：
* 文件的字节数
* 文件拥有者的User ID
* 文件的Group ID
* 文件的读、写、执行权限
* 文件的时间戳，共有三个：ctime指inode上一次变动的时间，mtime指文件内容上一次变动的时间，atime指文件上一次打开的时间。
* 链接数，即有多少文件名指向这个inode
* 文件数据block的位置
可以用stat命令，查看某个文件的inode信息：
[root@pcrdb01 ~]# stat install.log
File: `install.log'
Size: 50712 Blocks: 112 IO Block: 4096 regular file
Device: fd00h/64768d Inode: 652802 Links: 1
Access: (0644/-rw-r--r--) Uid: ( 0/ root) Gid: ( 0/ root)
Access: 2018-06-06 19:59:43.111889181 +0800
Modify: 2018-05-09 14:34:04.278999817 +0800
Change: 2018-05-09 14:34:13.545999813 +0800
三、inode的大小
inode也会消耗硬盘空间，所以硬盘格式化的时候，操作系统自动将硬盘分成两个区域。一个是数据区，存放文件数据；另一个是inode区（inode table），存放inode所包含的信息。
每个inode节点的大小，一般是128字节或256字节。inode节点的总数，在格式化时就给定，一般是每1KB或每2KB就设置一个inode。假定在一块1GB的硬盘中，每个inode节点的大小为128字节，每1KB就设置一个inode，那么inode table的大小就会达到128MB，占整块硬盘的12.8%。
查看每个硬盘分区的inode总数和已经使用的数量，可以使用df命令。
[root@pcrdb01 ~]# df -ih
Filesystem Inodes IUsed IFree IUse% Mounted on
/dev/mapper/VolGroup-lv_root 1.7M 147K 1.6M 9% /
tmpfs 732K 5 732K 1% /dev/shm
/dev/mapper/datavg-datalv 1.9M 26 1.9M 1% /crbank/crdb/data
/dev/mapper/fravg-fralv 960K 87 960K 1% /crbank/crdb/fra
/dev/sda1 126K 39 125K 1% /boot
/dev/sr0 0 0 0 - /media/RHEL_6.5 x86_64 Disc 1
/dev/sr0 0 0 0 - /mnt
查看每个inode节点的大小，可以用如下命令：
[root@pcrdb01 ~]# dumpe2fs -h /dev/sda1 |grep "Inode size"
dumpe2fs 1.41.12 (17-May-2010)
Inode size: 128
由于每个文件都必须有一个inode，因此有可能发生inode已经用光，但是硬盘还未存满的情况。这时，就无法在硬盘上创建新文件。
四、inode号码
每个inode都有一个号码，操作系统用inode号码来识别不同的文件。
这里值得重复一遍，Unix/Linux系统内部不使用文件名，而使用inode号码来识别文件。对于系统来说，文件名只是inode号码便于识别的别称或者绰号。
表面上，用户通过文件名，打开文件。实际上，系统内部这个过程分成三步：首先，系统找到这个文件名对应的inode号码；其次，通过inode号码，获取inode信息；最后，根据inode信息，找到文件数据所在的block，读出数据。
使用ls -i命令，可以看到文件名对应的inode号码：
[root@pcrdb01 ~]# ls -li
total 104
653298 -rw-------. 1 root root 1534 May 9 14:34 anaconda-ks.cfg
653329 drwxr-xr-x. 2 root root 4096 May 9 14:58 Desktop
653333 drwxr-xr-x. 2 root root 4096 May 9 14:58 Documents
653330 drwxr-xr-x. 2 root root 4096 May 9 14:58 Downloads
652802 -rw-r--r--. 1 root root 50712 May 9 14:34 install.log
652803 -rw-r--r--. 1 root root 10033 May 9 14:31 install.log.syslog
653334 drwxr-xr-x. 2 root root 4096 May 9 14:58 Music
653335 drwxr-xr-x. 2 root root 4096 May 9 14:58 Pictures
653332 drwxr-xr-x. 2 root root 4096 May 9 14:58 Public
653331 drwxr-xr-x. 2 root root 4096 May 9 14:58 Templates
653336 drwxr-xr-x. 2 root root 4096 May 9 14:58 Videos
五、目录文件
Unix/Linux系统中，目录（directory）也是一种文件。打开目录，实际上就是打开目录文件。
目录文件的结构非常简单，就是一系列目录项（dirent）的列表。每个目录项，由两部分组成：所包含文件的文件名，以及该文件名对应的inode号码。
ls -li命令只列出目录文件中的所有文件名及inode信息：
[root@pcrdb01 ~]# ls -li /root/
total 104
653298 -rw-------. 1 root root 1534 May 9 14:34 anaconda-ks.cfg
653329 drwxr-xr-x. 2 root root 4096 May 9 14:58 Desktop
653333 drwxr-xr-x. 2 root root 4096 May 9 14:58 Documents
653330 drwxr-xr-x. 2 root root 4096 May 9 14:58 Downloads
652802 -rw-r--r--. 1 root root 50712 May 9 14:34 install.log
652803 -rw-r--r--. 1 root root 10033 May 9 14:31 install.log.syslog
653334 drwxr-xr-x. 2 root root 4096 May 9 14:58 Music
653335 drwxr-xr-x. 2 root root 4096 May 9 14:58 Pictures
653332 drwxr-xr-x. 2 root root 4096 May 9 14:58 Public
653331 drwxr-xr-x. 2 root root 4096 May 9 14:58 Templates
653336 drwxr-xr-x. 2 root root 4096 May 9 14:58 Videos
需要强调一点：
由于目录文件内只有文件名和inode号码，所以如果只有读权限，只能获取文件名，无法获取其他信息，因为其他信息都储存在inode节点中，而读取inode节点内的信息需要目录文件的执行权限（x）
六、硬链接
一般情况下，文件名和inode号码是”一一对应”关系，每个inode号码对应一个文件名。但是，Unix/Linux系统允许，多个文件名指向同一个inode号码。
这意味着，可以用不同的文件名访问同样的内容；对文件内容进行修改，会影响到所有文件名；但是，删除一个文件名，不影响另一个文件名的访问。这种情况就被称为”硬链接”（hard link）。
ln 源文件 目标文件
运行上面这条命令以后，源文件与目标文件的inode号码相同，都指向同一个inode。inode信息中有一项叫做”链接数”，记录指向该inode的文件名总数，这时就会增加1。
反过来，删除一个文件名，就会使得inode节点中的”链接数”减1。当这个值减到0，表明没有文件名指向这个inode，系统就会回收这个inode号码，以及其所对应block区域。
这里顺便说一下目录文件的”链接数”。创建目录时，默认会生成两个目录项：”.”和”..”。前者的inode号码就是当前目录的inode号码，等同于当前目录的”硬链接”；后者的inode号码就是当前目录的父目录的inode号码，等同于父目录的”硬链接”。所以，任何一个目录的”硬链接”总数，总是等于2加上它的子目录总数（含隐藏目录）。
七、软链接
除了硬链接以外，还有一种特殊情况。
文件A和文件B的inode号码虽然不一样，但是文件A的内容是文件B的路径。读取文件A时，系统会自动将访问者导向文件B。因此，无论打开哪一个文件，最终读取的都是文件B。这时，文件A就称为文件B的”软链接”（soft link）或者”符号链接（symbolic link）。
这意味着，文件A依赖于文件B而存在，如果删除了文件B，打开文件A就会报错：”No such file or directory”。这是软链接与硬链接最大的不同：文件A指向文件B的文件名，而不是文件B的inode号码，文件B的inode”链接数”不会因此发生变化。
ln -s命令可以创建软链接。
八、inode的特殊作用
由于inode号码与文件名分离，这种机制导致了一些Unix/Linux系统特有的现象。
1. 有时，文件名包含特殊字符，无法正常删除。这时，直接删除inode节点，就能起到删除文件的作用。
2. 移动文件或重命名文件，只是改变文件名，不影响inode号码。
3. 打开一个文件以后，系统就以inode号码来识别这个文件，不再考虑文件名。因此，通常来说，系统无法从inode号码得知文件名。
第3点使得软件更新变得简单，可以在不关闭软件的情况下进行更新，不需要重启。因为系统通过inode号码，识别运行中的文件，不通过文件名。更新的时候，新版文件以同样的文件名，生成一个新的inode，不会影响到运行中的文件。等到下一次运行这个软件的时候，文件名就自动指向新版文件，旧版文件的inode则被回收。
上面说了那么多，主要是为了帮助大家了解inode，这个信息对系统很重要，说白了inode空间不足，就是指没有空余的空间存在文件的属性信息，而这个空间在格式化的时候已经固定了。我们可以适当减少小文件的数量可以降低inode的数量，当然也可以创建多个分区，每个分区维护自己的inode信息也可以临时解决这个问题。
