一 前言 看了一下,距离上一篇博客的发表已经过去了4个月,时间过得好快啊。本篇博客是JDFS系列的第三篇博客,JDFS的目的是为了实现一个分布式的文件管理系统,前两篇实现了基本的上传、下载功能,但是那还不能算作分布式文件管理。本篇博客将在前两篇的基础上增加一系列分布式的功能,比如流式云存储 ...
一 前言 截止到目前为止,虽然并不完美,但是JDFS已经初步具备了完整的分布式文件管理功能了,包括:文件的冗余存储 文件元信息的查询 文件的下载 文件的删除等。本文将对JDFS做一个总体的介绍,主要是介绍JDFS的整体架构,流程图等,另外还会介绍如何安装部署运行JDFS.当然正如前面几篇博客里笔者提到的,JDFS并不完美,有一些潜在的难以发现的bug偶尔会出现,这个有赖于后续的不断测试 调试来解决 ...
2017-10-07 19:25 1 1644 推荐指数:
一 前言 看了一下,距离上一篇博客的发表已经过去了4个月,时间过得好快啊。本篇博客是JDFS系列的第三篇博客,JDFS的目的是为了实现一个分布式的文件管理系统,前两篇实现了基本的上传、下载功能,但是那还不能算作分布式文件管理。本篇博客将在前两篇的基础上增加一系列分布式的功能,比如流式云存储 ...
一 前言 截止目前,笔者在博客园上面已经发表了3篇关于网络下载的文章,这三篇博客实现了基于socket的http多线程远程断点下载实用程序。笔者打算在此基础上开发出一款分布式文件管理实用程序,截止目前,已经实现了 服务端/客户端 的上传、下载部分的功能逻辑。涉及到的知识点包括线程池技术 ...
上一博文,我们讲述了ICE这个中间件的基本认识。 接下来我们讲述开发环境搭建。 其过程主要分为三步: 安装GCC-4.4.6、安装ICE-3.4.2、安装QT-4.7.3。 (本 ...
HDFS结构 概述:是Hadoop项目的核心子项目。是分布式计算中数据存储管理的基础,是基于流数据模式访问和处理超大文件的需求而开发的,可以运行于廉价的商用服务器上 pc server高容错性 :自动保存多个副本来增加容错性 如果某一个副本丢失,HDFS机制会复制其他机器上的副本,透明实现 ...
问题集合 1、 2、 遇到的报错 ...
说起分布式文件管理系统,大家可能很容易想到 HDFS、GFS 等系统,前者是 Hadoop 的一部分,后者则是 Google 提供的分布式文件管理系统。除了这些之外,国内淘宝和腾讯也有自己的分布式文件管理系统,都叫 TFS(Taobao File System 和 Tencent File ...
一般10M以下的文件上传通过设置Web.Config,再用VS自带的FileUpload控件就可以了,但是如果要上传100M甚至1G的文件就不能这样上传了。我这里分享一下我自己开发的一套大文件上传控件供大家参考。 此控件PC全平台支持包括mac,linux系统的文件上传,文章末尾将附上各种版本控件 ...
上一个版本设计参照了 windows 资源管理器的原则,使用了多年。也发现了少许问题,也许是我们应用场景不一样... 目前的设计结合了目前的云概念。目录采用的是虚拟方式和实际的目录无关,只是存在一定的逻辑关系。如图: 文件存储只与实际的用户的路径有关: 文件管理 ...