cronicle 后端存储是可配置的 ，通过使用不同的存储配置，我们可以解决多实例部署以及数据共享的问题 cronicle 的后端存储模型，设计的特别方便，包含了基于文件的，基于s3 的，同时我们也可以开发自己的 存储引擎 以下是一个集成minio s3 部署单master ...

nginx 自己出了一个s3 的gateway ，原理上是基于njs 编写的，同时利用了xsl 模块功能上是一个不错的选择但是就是有点太弱了，而且s3 的兼容性是一个问题（不好说能兼容多少，需要测试） 主要的使用场景 可选认证 cache 压缩 限速 说明 官方目前 ...

minio update meta info 更新minio S3对象存储meta的实现方法 应用场景 对象存储就不多作介绍了 亚马逊，阿里云，金山云，都有相应的对象存储服务 常见的方案有ceph,minio等 amazon S3 是事实上的标准，金山云，minio都支持S3协议 通常 ...

文件上传是我们日常中比较常见的问题，而且我们很多时候是要进行额外的处理的比如缩略图，数据加工（数据分析类的应用），按照传统的模式（本地数据盘，或者一些已知开源工具）是不能很好的支持变动处理的，对于此类情况，我们基于s3 gateway 的webhook 能力，可以方便的实现通知集成简化系统处理 ...

minio 是一个aws s3 兼容的对象存储系统，我们可以通过s3fs 进行数据桶的挂载，这样可以做好多方便的事情 环境准备 使用docker-compose 运行 minio docker-compose 文件 安装s ...

0 背景 通常我们使用tensorflow访问的基本都是本地文件，亦或是给定hdfs路径，让其访问hdfs文件，而新晋的minio可很好地生成s3兼容的api接口，从而让tensorflow直接读取minio建立的分布式文件系统。本文简单基于单机minio形式讲解如何从头让tensorflow ...

一. Minio S3介绍 Minio 是一个基于Apache License v2.0开源协议的对象存储服务。它兼容亚马逊S3云存储服务接口，非常适合于存储大容量非结构化的数据，例如图片、视频、日志文件、备份数据和容器/虚拟机镜像等，而一个对象文件可以是任意大小，从几kb到最大5T不等 ...

Gateway library）和librados，允许应用程序与ceph对象存储建立连接。RGW为应用程序 ...