PVE添加nfs/smb/iscsi/NTFS做储存

PVE识别储存，无非就是通过lvm和目录。
iscsi磁盘，挂载系统之后，创建lvm，然后pve面板添加就行，或者直接创建分区，然后挂载到一个目录下，再去pve面板添加这个目录就ok。
同理smb/nfs，也就是挂载成一个目录！然后添加。

一：配置iscsi

1.1查看iqn

在shell里，输入

cat /etc/iscsi/initiatorname.iscsi

即可看到iqn。比如我这里的是 iqn.1993-08.org.debian:01:ace95f49189b

1.2 在iscsi服务器上，映射磁盘

每种服务器都不一样，我这里用的server2016，如果用专有的存储服务器，直接进控制台设置就行.

2020.4.20补充：最好不使用chap映射,如果要使用chap，只能在shell里挂载，不能使用GUI-web挂载。

1.3在pve里添加iscsi磁盘

在服务端设置好了，就可以在pve里设置。

选中【数据中心】——【储存】——【添加iscsi】

这里有3个值必须填写

ID： ==>就是这个磁盘的id，随意填写，不过需要字母
portal： ==> iscsi服务器的地址
target： ==>在输入以上2个信息后，iscsi会自动搜索服务器存在的target，这里选择自己需要的target
节点：选择使用刚才查找iqn的节点
直接使用LUN 不要勾选！lun就是直接作为虚拟机磁盘使用

填好之后，点击添加，即可看到储存里有个iscsi了,但是不能用

1.4，创建iscsi磁盘分区

在挂载iscsi的节点shell里

输入

fdisk -l

可以看到很多磁盘，找到一个新的磁盘

这里开始新建磁盘

fdisk /dev/sdc

1.5 使用LVM挂载iscsi

可以不使用lvm，使用普通的分区，等下介绍，看1.7。LVM好扩容，但是不支持

具体的细节如下。

Welcome to fdisk(util-linux 2.25.2).

Changes will remainin memory only, until you decide to write them.

Be careful beforeusing the write command.

Command (m forhelp):g      (建立GPT分区表)

…………

Command (m forhelp):n      (建立一个新的分区，输入分区号、起始结束扇区等)

…………

Command (m forhelp):t      (改变分区类型31)

Selected partition1

Partition type(type L to list all types):31  (分区1的类型改变为Linux LVM)

Command(m for help): w      (写入磁盘并退出fdisk)

再次在终端输入fdisk -l,可以查看磁盘已经分好区了

然后创建lvm

pvcreate /dev/sdc1                  创建pv
vgcreate iscsi1 /dev/sdc1            创建一个名为iscsi1的vg

1.6,PVE面板添加LVM

找到数据中心-储存，点添加lvm

这里ID，自己填，方便记忆，卷组填 选择刚才创建的pv iscsi1。勾选共享的，然后添加。在pve节点中，就可以看到这个lvm了，内容也有了

1.7，使用EXT4挂载iscsi。

注1：这节原理就是挂载iscsi磁盘到一个文件夹下，然后通过pve挂载目录，但是我发现有一个缺陷就是不能开机挂载。可能我技术不行，lvm到是可以开机自动挂载。

注2：按照我发表的另一篇文章 Proxmox VE磁盘/目录详解，并且安装第二个硬盘，修改ISO/虚拟机存放位置（挂载第二张磁盘）的操作，理论上也同样使用于iscsi。就是挂载iscsi磁盘之后，进入pve节点——磁盘,可以看到磁盘，并且初始化，但是我这篇文章在撰稿时，识别不了。百思不得其解，于是乎有了下面的手动挂载磁盘。导致，开机不能自动挂载。坑！

我这里又分配了一个20G的硬盘，来做实验

首先还是新建分区

fdisk /dev/sde

具体过程如下

root@pve:~# fdisk /dev/sde

Welcome to fdisk (util-linux 2.33.1).
Changes will remain in memory only, until you decide to write them.
Be careful before using the write command.

Device does not contain a recognized partition table.
Created a new DOS disklabel with disk identifier 0x2c01a8e9.

Command (m for help): g             （输入g，新建gpt分区表）
Created a new GPT disklabel (GUID: F386FD07-EE67-7B4F-9745-F79C23610CFE).

Command (m for help): n              （输入n，新建分区）
Partition number (1-128, default 1):   //回车
First sector (2048-41943006, default 2048): //回车
Last sector, +/-sectors or +/-size{K,M,G,T,P} (2048-41943006, default 41943006):   //回车

Created a new partition 1 of type 'Linux filesystem' and of size 20 GiB.

Command (m for help): w      （输入w 保存）
The partition table has been altered.
Calling ioctl() to re-read partition table.
Syncing disks.

再次在终端输入fdisk -l 可以看到磁盘已经分区了

接着 格式化分区，然后挂载到目录

mkfs.ext4 /dev/sde1 
mkdir /iscsi2               //创建iscsi2目录，用来挂载分区
mount /dev/sde1 /iscsi2     //挂载/dev/sde1 到iscsi2

再输入 df -h 查看是否挂载成功,出现在列表里，成功挂载。

1.8。在pve中使用EXT4目录

依旧在数据中心，储存，这里选择添加目录

这里id，自己填写
目录 刚才挂载的那个路径
内容 自己按需添加
共享 开启

回到节点页，可以看到已经添加进去了。

测试一下

在可以看到通过目录方式挂载的lvm，已经可以正常识别了

通过lvm挂载的iscsi也可以看到。

1.9使用NTFS挂载磁盘（推荐）

上面说到了LVM/EXT4，都是linux常用的。如果要进行扩容，缩减就必须技术人员技术扎实咯。介于我这半吊子技术，我还懒得写lvm、ext扩容教程，于是乎，有了一个非常nb的想法。

linux下的磁盘扩容很难，那我就在windows下呗。gui操作，多简单。ext和lvm在windows下操作不容易，所以干脆就用NTFS吧!

NTFS完美的解决了新手使用linux的问题！

使用ntfs优点
1、通用性强。ntfs可以在windows下识别，可以在linux下识别。
2、数据修改和恢复简单。ntfs直接在windows识别，直接操作，不讲道理，如果使用ext合适，还得下专业的软件，比如dg分区，还收费！
3、对分区的操作十分简单。把iscsi挂载到windows下，直接通过windows的磁盘管理就可以进行分区操作，比如扩容，缩减空间。
缺点：
不能开机挂载，可能我技术垃圾。

实现原理
把iscsi磁盘挂载到windows下，新建分区。然后挂载到pve下面就ok

实践操作

1、创建iscsi磁盘，并且进行分区操作。

（我这里用的server2016。使用存储服务器的话，请在存储服务器上操作）

因为windows的iscsi利用的是vhdx，所以我这里不需要额外的去找个windows来挂载，直接禁用这个分配（不禁用的话，是无法编辑vhdx的），然后去编辑vhdx就行

已经成功装载，只是没分区信息，现在去磁盘管理 ，进行初始化，分区。

这里初始化成gpt

接着在磁盘里，新建一个文件

脱离vhdx，然后再启用iscsi

2、pve连接iscsi（参照1.3）

3、PVE里挂载NTFS磁盘

先安装ntfs-3g

apt update
apt-get -y install ntfs-3g

proxmox ve换个源教程 https://foxi.buduanwang.vip/linux/298.html/

终端输入fdisk- l 然后找到5G的磁盘，挂载到/ntfs

fdisk -l                      //查看5G磁盘
mkdir /ntfs2                  //创建挂载点
mount /dev/sdd2 /ntfs         //挂载操作

通过df -h 可以看到挂载成功，同时进入磁盘，发现还是有一个刚才新家的文件，自己还新建一个inedx.html

4、在pve里挂载目录

5、进行扩容操作

1、对iscsi磁盘进行操作，必须取消挂载，登出节点

卸载挂载点

umount /dev/sdd2

登出iscsi

root@pve:~# iscsiadm -m discovery -t st -p 10.13.14.205 //查看刚才挂载的node
10.13.14.205:3260,1 iqn.1991-05.com.microsoft:win-21mqolqacj8-ugu-target
root@pve:~# iscsiadm -m node -T iqn.1991-05.com.microsoft:win-21mqolqacj8-ugu-target -p 10.13.14.205 -u   //临时登出node
Logging out of session [sid: 1, target: iqn.1991-05.com.microsoft:win-21mqolqacj8-ugu-target, portal: 10.13.14.205,3260]
Logout of [sid: 1, target: iqn.1991-05.com.microsoft:win-21mqolqacj8-ugu-target, portal: 10.13.14.205,3260] successful.  //登出成功 

iscsiadm -m discovery -t st -p iscsi_ip:port   //查看node iqn命令 不加port就是默认3260
iscsiadm -m node -T node_iqn -p iscsi_ip:port -u //临时登出node命令

2、回到iscsi服务器，对磁盘扩容。

装载磁盘进行扩容

3、重新挂载iscsi

登录iscsi

iscsiadm -m node -T iqn.1991-05.com.microsoft:win-21mqolqacj8-ugu-target -p 10.13.14.205 -l

iscsiadm -m node -T node_iqn -p iscsi_ip:port -l     //登入命令

我在进行这步操作之后，发现找不到扩容之后的iscsi磁盘，删除原来的磁盘分配，重启iscsi服务器，再分配磁盘就行了。使用存储服务器的可以忽略

mount /dev/sdd2 /ntfs

iscsi完美收工

二：配置nfs

nfs很简单，作为文件储存，不涉及分区块，就不需要执行分区操作，挂载就能用，十分高效和快捷。而且可以在server上直接对文件进行操作。维护/备份十分方便

这里还是使用的是server2016创建的nfs服务

1、创建nfs服务

进入文件和储存服务，找到共享,然后添加匿名的共享，因为pve面板上没有用户验证，只能通过匿名访问

2、进PVE面板挂载nfs

还是进入数据中心——储存——添加nfs

依旧像ISCSI那样，直接输入ID（自定义），服务器IP，export会自动识别出来。内容就需要根据自己的意思选中咯。还有勾选高级选项，会出现nfs版本，这里要对应server，server2016默认是4.1，所以我选择了4.1

需要注意的是，在集群环境中，需要nfs做客户端映射的，就需要在节点选择nfs映射的节点。我这里是未映射就能访问，所以我这集群中，2个pve都能挂载，我就没选了。

哦豁，出错了

这里提示权限问题，应该是server2016权限问题，我把这里设置为允许未映射的用户访问。

然后就已经成功添加/访问。

在server2016里成功的看到了文件们

三 pve挂载smb教程

smb这里需要详细说一下服务器端的配置。我这里使用的是server2016。linux的smb服务端我不讲。

smb的难点是权限设置。

1、创建smb账号.

在计算机管理里面，找到本地用户和组，新建一个smb账号

2、创建共享文件夹

直接创建一个文件夹，然后，点击高级共享

勾选共享此文件夹，点击权限，添加刚才创建的smb用户，并把权限设置成完全控制

3、在PVE里添加smb

点击数据中心，储存，添加 CIFS

ID自己定义
服务器smb服务器
用户名和密码就是刚才创建的账号密码
share：这里会自动出现文件夹，选择刚才创建的文件夹
节点：按需填写
内容：按需添加

完成！

全部完成。

文章来源：https://wp.gxnas.com/9345.html