公司想建一个内部网络的云服务器，虚拟出若干台 kvm 机器，具体应该如何操作？

[black11black]

如题，初创小公司。很多测试业务要实际传云端跑稳定性测试，目前公司测试基本上都是挂在阿里云的，阿里云不用多说大家都懂。

最近几个人讨论有个想法是要不要局域网自建一台服务器，但是我们几个菜鸡都是前后端开发，以前基本都没接触过虚拟化，用的基本都是容器，都不太懂具体应该如何操作。

想要实现的效果是网内一台云主机，可以通过 web 控制台划分出若干台类似网上 hosting 服务提供的那种 kvm 主机，每台要有独立内存空间、可更换内核、可自定义 IP （或端口）、可绑定单独核心之类的。

我们网上搜了一些资料，按照目前的认识，似乎是搞一台物理机器==》安装一个 linux 系统==》系统上安装某个开源 kvm 管理软件==》然后就可以愉快地虚拟化了，流程无限近似于 windows 使用 virtualbox。

请问生产级虚拟化是这样配置的吗？

还有一个疑问是消费级硬件可不可以搞这一套东西，是否有软件爱你上的硬性限制，还是要专门上商业级硬件。（比如 nvdia 限制 vm 内的显卡驱动这种的）

谢谢

[FanError]

感觉装 esxi 是最简单的了，web 界面管理虚拟机，如果以前用过 vmware 就更加轻车熟路，只不过换为 web 界面管理

[woyao]

如果是付费的话，可以给你介绍一个专家。
包解决君忧！

[wujieyuan]

esxi

[doveyoung]

关键词 esxi、openstack

[black11black]

@woyao 莫问题，站内信联系[doge]

[black11black]

@black11black 带佬来个联络方式

[rrfeng]

既然会用 docker，那没什么特殊需求的话直接在一个 Linux 机器上每人分配一个 docker 就行了呗……

[tomczhen]

付费可以考虑 unraid，社区选择 proxmox ve。

[eastern]

esxi 或者 PVE 吧，都是 web 的傻瓜式操作

[novaeye]

小规模的话建议 ESXi, 有免费版本. 稳定性要比 PVE 好不少.

[black11black]

@rrfeng 显然是需要独立虚拟机的特性...有这个需求

[woyao]

@black11black 问了一大佬，他说这个事情得和你在一个地方。
那位大佬目前在无锡，如果不是一个地方，疫情期间估计没办法了。

[rrfeng]

如果不强求 web 界面的话可以 qemu+ kvm 几行脚本就能管理了。

主要还是看数量，没有很大量需求不要搞什么 openstack

[black11black]

@woyao 不在无锡。没有远程请教方式吗，我们不需要实际帮忙架设。请在帮忙问一下，谢谢

[Osk]

proxmox ve，把 qemu-kvm 包装的挺好用的，只需要浏览器就能进行管理。能同时管理 kvm 和容器，底层是 debian 10。
ovirt 没了解过。
qemu-kvm + libvirt + webvirtmanager，emmmm，如果对 libvirt 没有强需求，还是 pve 吧。
qemu-kvm + 自己写参数 ，，，过于恐怖

[black11black]

@rrfeng 并不需要 web 界面，ssh 管理也可以。我们现在的一个疑惑是，这些开源工具是需要基于 linux 发行版使用包管理器安装（例如搭建 ubuntu 后使用 apt 安装），还是这些工具有自己封装好的系统镜像，需要直接安装镜像。

[Mikewu]

可以试试 pve，简单易搭建，web 管理，显卡直通之类的也不复杂，大多数问题在官方社区都能找到解决方案

[mchong]

初创公司个人建议买二手服务器，硬盘跑个 raid5。然后用 esxi 做虚拟化是最省事的。硬件稳定可靠，软件成熟。消费级硬件有个问题就是内存严重不足。二手服务器就没这个问题。随随便便 128G 往上。有钱还可以买几台二手服务器跑集群。

[zhangckid]

不需要专门的硬件…现在的 intel CPU 都自带 VT-x 的…内部测试的话最简单的办法就是在物理机上装个 Ubuntu 跑上 qemu libvirt virt-manager 然后开几个带 vnc 的 guest…其他用户用 vnc 就可以了…随便给 guest 换 kernel 啥的也没啥问题…话说为啥前面这么多想收费咨询的？

[FaceBug]

PVE，我之前在公司就搞了这个，家里也有一台，稳定一年多了。

PVE 随便找个什么二手笔记本都能跑起来，ESXI 麻烦一点，有点挑网卡。

[privil]

@Osk #15 自己写参数，可以用 xml 文件定义的 = = 写个作为模板改改 就好了。

[ayasakinagi]

@black11black linux 上面的虚拟化基本都是 qemu+kvm 做虚拟化, libvirt 做 qemu 编排管理

[novaeye]

@black11black exsi 和 pve 都是你说的后者, 通常称之为裸金属虚拟化. 就是一台裸机直接拿 ISO 来安装, 安装完了就可以进管理界面建虚拟机了.

[black11black]

@novaeye 感谢

[black11black]

@mchong 嗯，消费级硬件就是问一下，因为手头目前机器就能实验了。我们感觉部署也是要上服务器跑，考虑内存以后消费级硬件性价比就很低了

[black11black]

@cepczkd 带佬，查了些资料，请问 exsi 和 pve 的选择问题。linux 应该都差不多，pve 能虚拟 windows，配置远程桌面吗？

[rrfeng]

@black11black

用你熟悉的发行版，装一个『虚拟机管理器』例如 qemu

然后用 qemu 命令启动虚拟机就行了。

[strongcoder]

我家用的 PVE 虚拟化方案 性能压榨的极限 DSM 黑群晖+LEDE 旁路由+WIN7 下载机 还是很不错的

[Showfom]

装 Proxmox 开 KVM 虚拟机

[tulongtou]

@FanError pve 比 esxi 还简单吧

[Steps]

ZStack 吧 。单机企业版 免费 可以满足你的一切需求。

[Osk]

@privil qemu 支持 xml 配置文件了吗？手写参数又臭又长，不写个 .sh 脚本极恐怖，支付存放配置那也是极好的。

不过裸 qemu-kvm 还有一大问题就是好像无法很好处理主机关机的事件，必须自己搞一套

[privil]

@Osk #32 你看我回复下面啊、

[FaceBug]

@black11black 能，好像连 macos 都能，但我没试过。

[zhzq0113]

最简单的就是 ESXI，有破解偷摸用没人管的。
有 web 界面，也可以命令行。手册看完基本上就能上手了。
软件成熟度很高，界面也足够友好。
实验的话也可以虚拟化嵌套，但是就是非常卡。
官网手册文档知识库足够解决你遇到的问题。

[nrtEBH]

为啥不丢阿里云上 自己折腾虚拟化太麻烦了 时间不应该浪费在这上面 应该去码代码

[erguotou521]

上面说的 openstack pve esxi zstack 都可以，应该都可以满足你的需求。

[MeteorCat]

proxmox ve+1，我个人淘的家用服务器就是用它，稳定开源

[fs418082760]

最傻瓜的 用 hype-v

[CallMeReznov]

太多太多了
给钱的大家几乎都在用的 ESXI 浪潮什么的也都有
只要你问哪家几乎都有解决方案

不想给钱的 开源的 ovirt proxmox 等等等等

[Tink]

PVE

[woorz]

unRaid 行不？

[MiaRunis]

@nrtEBH 正文说了啊，阿里云辣鸡

[cjpjxjx]

exsi 要注意网卡，默认不支持螃蟹卡，虽然可以自己添加网卡驱动，但会有不稳定性

[black11black]

@cjpjxjx 感谢，大佬能不能说一下螃蟹卡是啥。我看论坛里推荐的基本是 pve 和 exsi 二选一，有人说 pve 开源不如 exsi 商业，又有人说 exsi 网卡和显卡硬件兼容性不好

[cev2]

@black11black #45 螃蟹卡就是瑞昱的卡，以廉价著称。
[重点！测试最重要的就是环境一致]

以下啰嗦，可不看。
ESXi 没啥好说的，价格摆在那里。ESXi 商业的可靠性是靠人家硬件验证来做前提的，需要用人家支持列表里的配套硬件，自然兼容性好。所谓的 ESXi 硬件兼容性问题都是拿 PC 来跑的，人家本来就没打算支持那些硬件。用 PC 跑硬件兼容性 ESXi 确实不如 PVE，毕竟 PVE 沾了 Linux 内核驱动的光（注意！ ESXi 是闭源内核，不是 Linux 内核，虽然 Linux 驱动可以往 ESXi 上移植，但靠的是模拟层实现的）。
螃蟹卡低端的集成卡很多都是软卡，说白了就是个大插座，靠驱动+CPU 算力完成相应功能，除了 Win 以外的平台上效果看脸。

云服务器和 VPS、虚拟机还是不同的，上云的特点是弹性，很多时候要对云厂商特定优化，你们跑测试最重要的就是测试环境和最终环境一致，然而自建服务器测试就好比刻舟求剑，环境不一致你测的啥？你完全测试不出来上线后会出什么问题呀，开发环境随意，测试最低成本就是开一台和最终环境相同的机器，按量计费。
如果你是想自建服务器（机房托管），成本更高，光备份问题就可以再开一贴了。

[black11black]

@cev2 感谢。开发环境，没有生产那么高的需求。托管目前暂时没需求，因为本地不一定找得到合适的托管商，异地有异地的问题，但是之前哥们也调研了一下这方面，感觉挺有意思的。备份为什么是问题呢？ raid 不能满足吗？

[cev2]

@black11black #47
raid5/raid6/raidz 这算是冗余，算不上备份，能防部分硬件损坏，遇到手残 /勒索病毒 /删库跑路全完。
lvm/zfs/btrfs 快照能防手残 /勒索，提供逻辑上的容错，这不算备份，硬件一挂全丢。
raid1x 算热备吧，搭配快照算是低保。
冷备要不要？备份与数据间的同步间隔多久？时间久了得增量同步吧？假如 1 天一冷备，遇到微盟这样的事件就是 1 天白干了。万一发现晚了备份了错误的数据不能覆盖好的备份吧，是不是需要老备份留着，硬盘倒是不贵。
不出问题时低保就够了，出了问题一夜回到解放前，尤其是干软件的，除了数据还有啥值钱的。

[fub2020]

内部私有云还是 openstack 吧，但是需要有人专职维护他，毕竟学习成本太高了

[hezhile]

推荐一波 zstack

公司用在生产环境 3 年多了 没出过任何问题 虽然用的是免费版 在官方 QQ 群里面提问都是很快就有回复
四台物理机组集群 实际测试过虚拟机在物理机上面的迁移

有预算可以考虑直接买他们最近出的 ZStack Mini 超融合一体机 2U 里面有两台服务器 已经是一个私有云的集群
买回去插上电就可以直接登录管理界面 省心省事

[CuChulainn]

ZStack 走一波

[hiplon]

proxmox，好几个生产环境在用

[yingo]

我推荐 oVirt,不推荐 openstack,openstack 的网络复杂的一逼.

[afirefish]

最傻瓜的 Hyper-V，稍微复杂一点的 PVE 和 ESXi。ESXi 支持硬件直通（也挑硬件），pve 没用过，不知道。目前家里面用的是 ESXi，使用体验还是很不错的。

[tankren]

推荐 esxi

[struggle001]

pxe 吧，或者我帮你搞一套 openstack，坐标北京。

[crc8]

@yingo 这个可以。简单易懂

[cjpjxjx]

@black11black 螃蟹卡就是瑞昱（ Realtek ）网卡

[viamcc]

推荐 esxi ，
我是在马云家 6000+买个二手 dell 730xd，24 CPUs x Intel(R) Xeon(R) CPU E5-2678 v3 @ 2.50GHz 64G 4T 硬盘，虚拟了 10 台服务，一年了没出过什么问题

[isnullstring]

同楼上，除了自己手残 或者断电，稳的很

[jonathan001]

自己搞 kvm 或者 openstack 太费劲，需要很了解网络和存储，建议 ESXI

[mazyi]

别走 openstack 就对了，我司两个人搭了一个月，我是参与者。。。

[vibbow]

ESXi 不香么？

[Xusually]

ESXi 吧，除了 web 配置界面万年小 bug、偶尔挑硬件，其他很省心，推荐。

[tobylee]

还是比较建议 proxmox ve 直接搞起，免费又好用。

[struggle001]

@mazyi 我自己维护两套 openstack 集群，200 台物理机，不想玩云了

[WebKit]

推荐 esxi，pve 感觉没有 esxi 使用简单。pve 第二推荐

[wanguorui123]

esxi 比较省心，界面比较友好

[flynaj]

小公司测试 VirtualBox 就可以了。其它的都有学习曲线，可能使用不方便

[Osk]

@privil 没看到 qemu 关于 xml 支持的信息，老哥是不是把 qemu 和 libvirt 搞混了？

[privil]

@Osk #70 就是一般都用 libvirt 管理 qemu 的啊，本来就挺好使，你选择不用么

[dreamage]

推荐 openstack 的 是想让他们 2022 年开始启用吗。。

[dragonliu]

esxi 不支持单节点动态链路聚合，必须装个 vcenter 在控制节点做集群的虚拟交换机配置，而 vcenter 是联网安装的，很坑，立马识别你是盗版

[unknowsll]

@struggle001 大哥您好，能加个方式细聊一下吗，目前有一个 500 台物理机，openstack+kvm 方案，服务组件存储之类的都已经正常再测试跑通了，现在问题卡在 openstack 创建的网络与具体的物理交换机的连接这块，目前是一点思路都没有，连网络拓扑都没概念，还希望能指点一二，非常感谢。

[struggle001]

@unknowsll 最近忘记登录 V2EX 了，加🌏吧 5c9419264be35535