摘要: 在数据迁移、跨云同步与对象存储备份等场景中,juicefs sync 常用于执行大规模数据同步任务。当数据规模达到 TB 到 PB 级、对象数量达到数百万甚至数十亿级时,单次任务执行周期通常会延长到数小时甚至数天。 在这个过程中,系统运行过程中通常会逐步暴露出以下几类问题: 任务在网络抖动、进程异常 阅读全文
posted @ 2026-06-18 16:40 JuiceFS 阅读(34) 评论(0) 推荐(0)
摘要: 星辰征途是一家聚焦 AI 搜索与电商场景多模态 AIGC 应用的初创公司,成立两年多,业务主要面向海外市场。公司目前的主要产品包括:Gensmo(gensmo.com) 聚焦时尚穿搭,提供虚拟试穿、造型推荐和商品搜索;ZooClaw(zooclaw.ai) 面向更广泛的生活与工作场景,提供 AI A 阅读全文
posted @ 2026-06-12 11:37 JuiceFS 阅读(125) 评论(0) 推荐(0)
摘要: 在 AI 训练、数据集管理等大规模文件访问场景中,随着文件数量和访问并发增加,元数据层往往更早成为性能瓶颈。无论是删除百万级小文件、克隆大规模数据集,还是高并发目录遍历,元数据引擎的响应能力都会直接影响上层业务效率。 JuiceFS 社区版 1.4 在元数据引擎层面引入了三项优化:批量删除(Batc 阅读全文
posted @ 2026-06-05 15:39 JuiceFS 阅读(117) 评论(0) 推荐(0)
摘要: 共绩科技 2023 年成立于清华,面向 AIGC 企业和科研机构提供算力平台与 MaaS 服务,致力于缓解弹性算力需求与供给之间的错配。平台通过聚合 IDC 闲置资源和边缘资源,以容器化服务为主,为 AI 推理、视频渲染、数据处理和数据合成等波动性场景提供可快速调度的算力资源。 在跨云弹性推理场景中 阅读全文
posted @ 2026-05-29 11:29 JuiceFS 阅读(92) 评论(0) 推荐(0)
摘要: 小米存储团队自 2021 年起推进基于 JuiceFS 的文件存储平台建设,最初主要面向云原生及部分业务场景提供文件存储能力。2024 年,小米提出全面 AI 战略后,原有异构存储体系在选型接入、数据流转和研发运维等方面的问题进一步显现。基于多协议接入、弹性扩展、多云适配和高性能访问等能力,团队最终 阅读全文
posted @ 2026-05-12 16:27 JuiceFS 阅读(240) 评论(0) 推荐(1)
摘要: 在分布式存储环境中,存储资源通常由多个用户、项目和业务共享使用。如果缺乏有效的约束机制,单一主体的异常写入或误操作,可能迅速消耗大量空间或 inode,进而影响系统稳定性与成本控制。配额管理正是为共享环境建立可预测资源边界的重要手段。 但在分布式系统中,配额管理并不只是“设置上限”这么简单。系统需要 阅读全文
posted @ 2026-04-23 14:08 JuiceFS 阅读(168) 评论(0) 推荐(0)
摘要: 4 月 7 日,AWS 官方发布了一项新服务——Amazon S3 Files,允许用户无需搬迁数据,即可将 S3 存储桶作为高性能共享文件系统挂载到计算节点上。 这不是业界第一次尝试让 S3 以文件系统方式被访问:从早期的 s3fs,到 AWS 后来推出的 Mountpoint for Amazo 阅读全文
posted @ 2026-04-15 17:47 JuiceFS 阅读(143) 评论(0) 推荐(0)
摘要: 大模型训练的算力规模持续扩张,GPU 算力不断提升的同时,数据访问瓶颈对系统整体性能的影响愈发突出。本地存储性能优异但扩展性有限,对象存储在成本与扩展性上具备优势,却在海量小文件、高并发场景下面临吞吐不足的问题,团队往往需要在二者之间艰难取舍。 为此,分布式文件系统成为平衡高性能与可扩展性的关键方案 阅读全文
posted @ 2026-04-03 11:37 JuiceFS 阅读(173) 评论(0) 推荐(0)
摘要: 随着国产芯片与 ARM 生态的快速发展,如何在 ARM 平台上构建高性能存储基础设施成为技术焦点。Linaro 是一个专注于 Arm 生态和开源软件的国际化技术组织,联合产业链上下游厂商解决共性问题,并协助企业客户在开源基础上完成产品化落地。Linaro 团队在 MLPerf Storage 测试中 阅读全文
posted @ 2026-03-27 15:31 JuiceFS 阅读(175) 评论(0) 推荐(0)
摘要: NAVER 是韩国领先的互联网科技公司,运营着韩国最大的搜索引擎,并在人工智能、自动驾驶等高科技领域积极布局。作者 Nam Kyung-wan 来自 NAVER Infra 团队,自 2023 年参与 JuiceFS 社区代码贡献 (GitHub: kyungwan-nam),为 Hadoop 场景 阅读全文
posted @ 2026-02-12 11:45 JuiceFS 阅读(294) 评论(1) 推荐(0)