knives

knives

V2EX 第 459054 号会员,加入于 2019-12-13 14:38:26 +08:00
knives 最近回复了
不了解具体的业务场景。只谈最终一致的话,可以考虑反过来,只操作 Minio ,用 Minio 的事件通知机制调用 webhook 、消息队列、whatever ,最终写入 MySQL 。
@Nich0la5 以及各位,X-HTTP-Method-Override 了解一下 ?:doge https://zhuanlan.zhihu.com/p/128052857
@guochenglong 我这边也做过类似的选型。

当时也测了一轮 Seaweedfs ,在各种场景下性能是好,但是纠删码功能基本残废,数据可靠性很差。能接受双副本/三副本的空间占用的话用 Seaweedfs 倒是没问题……
Ceph 传说运维成本高,对小文件也没有优化,Pass 了。
目前在部署 OZone ,还没开始测试。
好奇数据量有多少,存储哪些类型数据?

个人经验是 MinIO 稳定性不错,但是使用 HDD 存大量小文件性能捉急。另外扩容比较麻烦。
277 天前
回复了 alfredcai 创建的主题 OpenStack 现在还有人在用 openstack 吗
10 台物理机 PVE 够用了。官方说法是有客户部署了超过 50 节点的生产环境集群。
https://pve.proxmox.com/wiki/Cluster_Manager
294 天前
回复了 gyinbj 创建的主题 程序员 桌面软件开发求助
从目前的信息来看,还是建议用 Electron 。无法连接外网不意味着不能用 Electron ,Electron 是可以开发单机程序的。
一种方案是,先写验证器,再使用验证器构造类型。如: https://github.com/colinhacks/zod
@joyanhui 和你理解的基本一致。juicefs 支持本地的读写缓存。本地缓存默认是 100GB 的空间,可以按需调整大小。读缓存默认开启,写缓存要手动开启(默认是同步写)。官方建议仅大量写入小文件时开启写缓存,具体原理看官方文档。

另外,如果挂载的盘没有共享使用的需求,可以使用本地的元数据引擎来简化架构,如 sqlite3 。

还有,garage 的基本原理是多区域副本镜像。rclone union 是多云空间合并使用,与 garage 不在一个路子上。
自建跨云的对象存储,对空间没有太多要求的话,可以试试 https://github.com/deuxfleurs-org/garage

本地读写缓存就是另外一种东西了。可以试试 https://juicefs.com/zh-cn/
2023-10-28 18:01:25 +08:00
回复了 ikidou 创建的主题 程序员 有没有一款带 Web 管理的任务队列管理工具
楼上说的 n8n ,或者 node-red 都可一试。
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   2970 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 13ms · UTC 13:19 · PVG 21:19 · LAX 05:19 · JFK 08:19
Developed with CodeLauncher
♥ Do have faith in what you're doing.