[程序员] 有关自建图床类服务 ( 10TB 左右 )有什么坑或者现成的选择吗? 主要避免重复上传文件名哈希

总体大约 3000 万文件吧, 包括图片视频等不同文件, S3 或其他对象存储

有没有既定方案或者开源项目的, 不知道该搜什么关键词, 找不到就只好自己搭了

  1. 记录原始图片地址转存储路径打算 mongodb 上查, 平时并发不会很高
  2. 存储路径是否存在打算使用带计数器的布隆过滤器(为了可以删除), 有没有坑呢
  3. 用文件内容整个哈希做文件名哈希表, xxhash 怎么样, xxh3_128 作为长度 32 的文件名还能接受, 碰撞应该也安全, 性能比 md5 什么的靠谱

感谢帮助

发表回复

您的电子邮箱地址不会被公开。