#1 - 2018-11-18 23:02
Cedar (。´-д-)
文件同步对我来说真的是一个难题..
我希望能找到一个文件同步工具, 在调整left文件夹的结构后能完全反映到right文件夹中..但是left不是right的镜像, 而仅仅是它的一个子集..也就是说虽然left中的文件夹跟right中一样多, 但是文件只有right中的一部分(至少占用的空间可以约等于零)..当left中增加了新文件后 同步时会进行left→right的操作, 而重命名文件夹时 right中的同名文件夹也会被重命名..删除left中的文件时能够选择是否保留right中的相同文件..
其实就是类似 OneDrive 的 File On Demand 功能..文件不占用本地空间 只在需要的时候拷贝到本地, 但是在本地能够随意调整文件结构/重命名文件/删除文件, 等联网后会自动把相同的操作同步到云端..(不过我希望同步到移动硬盘而不是云端)

我找了好久都没找到类似的工具..那些文件同步工具要么是完全镜像 要么就是增量备份..SyncToy有个Echo选项允许left与right不完全相同 而且left的删除操作能在right重复, 但是重命名文件夹时不会删除right端的旧文件夹..而且也做不到left删了但right留着的操作..所以也不是 File On Demand..
目前我一调整自己的目录结构就只能靠工具比较两边的区别 然后手动复制粘贴重命名..很费时间..
求助万能的bangumi 有没有人知道什么文件同步工具能做到 File On Demand 的呢?
不过我基本不抱希望了(bgm38) 所以有什么替代的方法也是可以的(bgm38)

其实SyncToy的Echo模式是稍微接近我的意图的..只是操作起来会稍微麻烦一点..但是它停止维护了(bgm38)(bgm38) 迟早出bug..其实我在网上看到已经有人反映echo模式有bug了 虽然我还没遇到..
#2 - 2018-11-19 00:36
google drive file stream也有File On Demand的功能。不过需要谷歌教育版账号。
获取教育邮箱方法(虽然是盗版(bgm39))这里
#2-1 - 2018-11-19 01:10
Cedar
那个是本地工具么?
我想用在移动硬盘备份数据上(bgm38) 就是把移动硬盘当云用..插上USB相当于联网..
#2-2 - 2018-11-19 07:33
牛马
Cedar 说: 那个是本地工具么?
我想用在移动硬盘备份数据上 就是把移动硬盘当云用..插上USB相当于联网..
emmm,这是将谷歌云盘映射为本地磁盘的工具
#2-3 - 2018-11-19 10:45
Cedar
whwq2012 说: emmm,这是将谷歌云盘映射为本地磁盘的工具
那就还是云盘呀..
#3 - 2018-11-19 01:10
(宅男会虚构虚构老婆倒贴给虚构自己这件事究竟有什么错)
Dropbox
本地的话就软链过去吧。
#3-1 - 2018-11-19 01:12
Cedar
不是云端存储 是本地工具呢(bgm38) 类似SyncToy或FreeFileSync这种..
#3-2 - 2018-11-19 01:15
板砖加身
Cedar 说: 不是云端存储 是本地工具呢 类似SyncToy或FreeFileSync这种..
Windows:https://blog.alphatr.com/windows-mklink.html
GNU/Linux:https://www.ibm.com/developerwor ... -hardandsymb-links/
#3-3 - 2018-11-19 01:34
Cedar
板砖加身 说: Windows:https://blog.alphatr.com/windows-mklink.html
GNU/Linux:https://www.ibm.com/developerwor ... ...
软链接到移动硬盘的目录么 可是移动硬盘平常是断电保存的呀..而且同一个目录下我会增加新文件这样..
#3-4 - 2018-11-19 01:41
bangumi大西王
Cedar 说: 软链接到移动硬盘的目录么 可是移动硬盘平常是断电保存的呀..而且同一个目录下我会增加新文件这样..
反过来,移动硬盘软连接到本地硬盘
#3-5 - 2018-11-19 01:53
Cedar
Trim21 说: 反过来,移动硬盘软连接到本地硬盘
那不想保存在本地的大文件还能留移动硬盘里么
#3-6 - 2018-11-19 03:03
bangumi大西王
Cedar 说: 那不想保存在本地的大文件还能留移动硬盘里么
好像不能…(
#3-7 - 2018-11-19 03:04
Cedar
Trim21 说: 好像不能…(
(bgm41) 我连有Echo模式的替代SyncToy的工具都找不到(bgm41)
#3-8 - 2018-11-19 12:50
板砖加身
Cedar 说: 那不想保存在本地的大文件还能留移动硬盘里么
用符号链接/软链接的限制在于:原始文件需要自己移动到需要永久保存的位置。具体到你说的问题,大文件就放在移动硬盘上,本地留个指向它的路径就可以了。
至于智能同步,可能还需要借助其他 sync 工具。
#3-9 - 2018-11-19 14:25
Cedar
板砖加身 说: 用符号链接/软链接的限制在于:原始文件需要自己移动到需要永久保存的位置。具体到你说的问题,大文件就放在移动硬盘上,本地留个指向它的路径就可以了。
至于智能同步,可能还需要借助其他 sync 工具。
这样的话 当我想在本地查看大文件时 不就做不到了么..因为这时候大文件是软链接到移动硬盘上的..没法同步到本地..
#3-10 - 2018-11-19 14:33
板砖加身
Cedar 说: 这样的话 当我想在本地查看大文件时 不就做不到了么..因为这时候大文件是软链接到移动硬盘上的..没法同步到本地..
“按需同步”的意思是在使用的时候向本地拷贝一份离线副本,不需要的时候只留下文件占位符。软链接/符号链接只能完成第二步,复制粘贴的事情当然要靠你自己做。
对链接的文件的操作在移动硬盘在线的时候是可以反映到真实文件上的,因为此时你操作的是同一个文件。
#3-11 - 2018-11-19 14:53
Cedar
板砖加身 说: “按需同步”的意思是在使用的时候向本地拷贝一份离线副本,不需要的时候只留下文件占位符。软链接/符号链接只能完成第二步,复制粘贴的事情当然要靠你自己做。
对链接的文件的操作在移动硬盘在线的时候是可以反映...
复制粘贴确实可以自己来..
其实不太理解软链接..我理解的软连接大概类似"指向文件目录的硬链接"..
如果是这样的话, 你说的方法里, 一部分软链接其实是指向移动硬盘的..
那就意味着平常移动硬盘离线时, 链接到移动硬盘的软链接应该打不开才对吧? 所以里面的大文件我也看不到..
这样的话我就没法调整那些文件的路径 也没法给它们重命名 然后也没法在同一个目录下增加新文件..
而且如果我将来想把那个目录下的一部分大文件放到本地来(用手动复制粘贴的方式), 应该也没法放到同一个目录下吧? 因为在本地的相同目录其实是链接到移动硬盘的软链接..
#3-12 - 2018-11-21 20:10
板砖加身
Cedar 说: 复制粘贴确实可以自己来..
其实不太理解软链接..我理解的软连接大概类似"指向文件目录的硬链接"..
如果是这样的话, 你说的方法里, 一部分软链接其实是指向移动硬盘的..
那就意味着平常移动硬盘离线...
那就意味着平常移动硬盘离线时, 链接到移动硬盘的软链接应该打不开才对吧? 所以里面的大文件我也看不到..
这样的话我就没法调整那些文件的路径 也没法给它们重命名 然后也没法在同一个目录下增加新文件..

目录文件结构可同步,按需下载靠手工,应该是比较完美的解决方案了(symbolic link 应该可以被同步吧)。
#3-13 - 2018-11-21 21:49
Cedar
板砖加身 说: 那就意味着平常移动硬盘离线时, 链接到移动硬盘的软链接应该打不开才对吧? 所以里面的大文件我也看不到..
这样的话我就没法调整那些文件的路径 也没法给它们重命名 然后也没法在同一个目录下增加新文件.....
感谢回复!我本已经打算让这个帖沉了算了的(bgm38) 用回老方法定期手动整理..

如果是这样的话 离线移动硬盘就没有备份能力了呀 所有文件都应该至少有一个副本在移动硬盘上才行..
如果要用符号链接的话 就要不断地改符号链接..大概像这样..但那就又没法同步了..
#3-14 - 2018-11-21 22:54
板砖加身
Cedar 说: 感谢回复!我本已经打算让这个帖沉了算了的 用回老方法定期手动整理..

如果是这样的话 离线移动硬盘就没有备份能力了呀 所有文件都应该至少有一个副本在移动硬盘上才行..
如果要用符号链接的话 就要不断...
如果是这样的话 离线移动硬盘就没有备份能力了呀 所有文件都应该至少有一个副本在移动硬盘上才行..
“真实文件1”当然要备份到移动硬盘上去,那张图是为了说明文件组织结构。“真实文件2”才是符合真实情况的方案。
如果要用符号链接的话 就要不断地改符号链接..大概像这样..但那就又没法同步了..
我认为你还是没有理解文件链接的含义。

假设要备份的文件是 foo.bar,用上述方案配合双向同步工具的备份方法如下:
        1. 把 foo.bar 正常备份到移动硬盘;
        2. 三个月之后,本地硬盘放不下那个 20 k 的foo.bar 文件了,准备清理本地备份;
        3. 将移动硬盘的 foo.bar 移动到移动硬盘的另一空闲目录(该区域专用于存放此类文件);
        4. 在本地建立到移动硬盘 foo.bar 文件的符号链接 foo.bar.link,并同步到移动硬盘上
        5. 现在本地和移动硬盘上都有了指向 foo.bar 副本的符号链接,文件夹结构不变。文件也能正常访问。
        6. 删除本地的 foo.bar 副本(FOD 的“释放空间”类比于 4、6 两步在本地磁盘上的操作)(如果同步工具是双向的,此时本地的 foo.bar 副本在第三步的时候就没了);
        7. 三个月之后我想编辑 foo.bar 了,两个办法:
        a) 插上移动硬盘,直接编辑本地的 foo.bar.link,这样等同于编辑移动硬盘上的 foo.bar 的内容;
        b)先把 foo.bar 复制到本地,编辑之后重新同步,如果要保留本地副本,那些符号链接就会全删掉(这是同步工具做的),到下次“释放空间”的时候重来。
        8. 以此类推。

文件链接和 FOD 可以起到同样节约空间的目的,但如何同步是非常复杂的,尤其是你既得当客户端,又得当服务器端。
#3-15 - 2018-11-21 23:10
板砖加身
Cedar 说: 感谢回复!我本已经打算让这个帖沉了算了的 用回老方法定期手动整理..

如果是这样的话 离线移动硬盘就没有备份能力了呀 所有文件都应该至少有一个副本在移动硬盘上才行..
如果要用符号链接的话 就要不断...
或者你这样想,把 OneDrive 本地文件和 OneDrive 网页前端呈现的文件都想象成链接到后端服务器真实文件的符号链接,是不是就能明白 FOD 的意思了?(实际上 FOD 并不是这么实现的)
#3-16 - 2018-11-21 23:56
Cedar
板砖加身 说: 如果是这样的话 离线移动硬盘就没有备份能力了呀 所有文件都应该至少有一个副本在移动硬盘上才行..“真实文件1”当然要备份到移动硬盘上去,那张图是为了说明文件组织结构。“真实文件2”才是符合真实情况的方...
原来如此! 我好像明白做法了..除了纯手动操作会十分繁琐之外 确实是比较完美的解决方案了!
#4 - 2018-11-19 02:20
(Don't feel. Think.)
这个功能看上去很好用诶……mark一下
#4-1 - 2018-11-19 02:24
Cedar
这功能唯一的问题就是它不存在(bgm38) 也许十年后就普及了..
#4-2 - 2018-11-19 03:04
bangumi大西王
Cedar 说: 这功能唯一的问题就是它不存在 也许十年后就普及了..
(bgm38)我的毕业设计是文件同步服务器的搭建,也许我会实现这个功能…
#4-3 - 2018-11-19 03:07
Cedar
Trim21 说: 我的毕业设计是文件同步服务器的搭建,也许我会实现这个功能…
做出来了请务必告诉我(bgm38)
#4-4 - 2018-11-19 06:25
九八式衍射弹
Trim21 说: 我的毕业设计是文件同步服务器的搭建,也许我会实现这个功能…
其实这个功能已经在lightroom里以不同形式实现了,那边就是可以编辑照片的映射,加信息,调参数,然后你连上移动硬盘(或者从网上下载回照片的源文件后)会自动应用之前在本地的修改。
#4-5 - 2018-11-19 10:48
Cedar
九八式衍射弹 说: 其实这个功能已经在lightroom里以不同形式实现了,那边就是可以编辑照片的映射,加信息,调参数,然后你连上移动硬盘(或者从网上下载回照片的源文件后)会自动应用之前在本地的修改。
但是我改了文件路径后lightroom不会自动改路径呀..还是不一样..
#4-6 - 2018-11-19 13:05
九八式衍射弹
Cedar 说: 但是我改了文件路径后lightroom不会自动改路径呀..还是不一样..
你把lightroom的收藏夹想象成文件路径就好了,原理一样的呀
#4-7 - 2018-11-19 14:26
Cedar
九八式衍射弹 说: 你把lightroom的收藏夹想象成文件路径就好了,原理一样的呀
这样就不能算实现了呀..因为我只想在资源管理器上使用我的文件..lightroom的话 改动文件名要在lightroom里面进行..
#5 - 2018-11-19 11:25
- 感覺像是 git 的需求, uhmmmmmm
- 增量備份不都是考慮刪除的數據再找回的嘛, 在這裡是有什麼特別的考慮嗎?
- Linus 在自己的家庭服務器(?)的 Windows 上實現過「刪除的文件單獨拿出來備份」的功能, 不過他的問題尺寸很大、解決方案可能不是題主要的層級.
    總之:
    - Youtube Video 1
        - Windows Server
        - Beyond Compare
    - Youtube Video 2
#5-1 - 2018-11-19 12:39
Cedar
不是呢 我想要的不是增量备份呀..你可以理解成一种"伪镜像"..
你的全部文件只保存在一些不常用的设备比如移动硬盘里, 而平常用的PC只有一部分文件..所以你在PC里没法打开那些不在PC里的文件..但是你可以看到它们..可以把它们当做本地文件一样移动复制粘贴删除重命名..
然后等移动硬盘连接到PC上之后, 利用这个工具的话, 你做过的全部操作会在移动硬盘处重复执行一遍..(当然 本地上存在的文件就还要检查有没有增加减少或更新)
当然, 因为是"伪镜像", 所以有时候删除PC上的数据并不是因为我不想要它了, 而是因为它太占空间了..所以还要有个功能是删除PC上的数据后, 移动硬盘中仍然能够保留它..
其实说来说去, 就是 OneDrive 和 Dropbox 的 File On Demand..只不过不是在云端 而是在本地实现它..连接移动硬盘相当于联网..
#5-2 - 2018-11-19 13:03
板砖加身
OneDrive 的 File On Demand 相当于在本地磁盘建立一个云端文件的快捷方式,只有在需要对文件操作的时候才会下载云端文件,平时可以释放掉这个文件所占用的磁盘空间。

lz 大概是只想要一个指向离线副本的快捷方式而已。
#5-3 - 2018-11-19 14:29
Cedar
板砖加身 说: OneDrive 的 File On Demand 相当于在本地磁盘建立一个云端文件的快捷方式,只有在需要对文件操作的时候才会下载云端文件,平时可以释放掉这个文件所占用的磁盘空间。

lz 大概是只想...
啊 是的..而且对这个快捷方式的位置和文件名的修改是可以反映到离线副本上的..
#5-4 - 2018-11-19 18:37
W
Cedar 说: 不是呢 我想要的不是增量备份呀..你可以理解成一种"伪镜像"..
你的全部文件只保存在一些不常用的设备比如移动硬盘里, 而平常用的PC只有一部分文件..所以你在PC里没法打开那些不在PC里的文件..但...
其實是要手動指定哪些目錄本地緩存、哪些目錄遠端的嗎?
因為樓上你有提到「那就意味着平常移动硬盘离线时, 链接到移动硬盘的软链接应该打不开才对吧? 所以里面的大文件我也看不到..」.

既然是移動硬盤,而且不是時常在線、 那麼和網盤的需求又有些稍微不一樣吧. 畢竟斷開的話「不管怎樣那個文件都不在」, 而移動硬盤卻不能預知哪些文件是你要的. (所以不能提前緩存下來)
#5-5 - 2018-11-19 18:41
W
我覺得你的需求如果稍微改變一下. 顯式管理+局域網的話, 就可以成為大家都有的需要了: NAS 之類的.
#5-6 - 2018-11-19 18:49
W
Willian 说: 我覺得你的需求如果稍微改變一下. 顯式管理+局域網的話, 就可以成為大家都有的需要了: NAS 之類的.
具體一點就是: 解構你的需求是:
- 目錄結構隨時會改變
- 改變要在大文件上發生
- 大文件本地存不下
- (不僅是目錄結構、內容也會發生改變)(假設)

那麼總結起來可以是:
- 本地和遠端用不同結構
- 遠端的結構精細維護
- 本地的結構隨意甚至不care
- 遠端能夠存儲大量大文件
- 本地能夠存儲少量大文件
- 本地能夠很快(在需要的時候)訪問遠端

那樣的話, 本地網絡存儲聽上去是一個不錯的方案:
- 網絡速度限制為網絡速度: 1300Mbps 應該是常用方案的最高
- 網絡磁盤可以映射到本地、甚至可以同時有多個訪問.
- 根據需求不同, 網絡端可以自帶備份 (RAID 或者其他的)

一個具體的例子就是 NAS.
#5-7 - 2018-11-19 19:30
Cedar
Willian 说: 具體一點就是: 解構你的需求是:
- 目錄結構隨時會改變
- 改變要在大文件上發生
- 大文件本地存不下
- (不僅是目錄結構、內容也會發生改變)(假設)

那麼總結起來可以是:
- 本地和遠端用不同...
你弄错了(bgm38)我很care本地的目录结构..它要跟移动硬盘上的目录结构是一样的..
我的移动硬盘不会随身携带, 所以本地也不需要很快就能访问远端, 只需要隔一段时间访问一次同步一下新数据并根据需要获取几个大文件就好..
移动硬盘不需要预知哪个文件重要..因为这是那个工具在管理..
你要是配置局域网当然可以 但是离线状态或者不在局域网内就没法进行任何操作了..因为你的文件都保存在NAS上..而且这种操作还有延迟 因为文件不在本地 所有操作都要联网进行..
其实楼下坚果云的例子就很符合我的需求, 只要把"联网"换成"连接移动硬盘"就行了..当然你改成连接NAS也可以..但是就我所知群晖之类的NAS并没有同步软件支持类似云桥的模式..早几年就有人在群晖论坛上提过类似的建议 然而群晖到现在也没做..
#6 - 2018-11-19 12:39
(miaow~~~)
(bgm72)
#7 - 2018-11-19 14:32
(不存在的)
坚果云有个云桥模式大部分符合up的要求
也可以局域网加速但大容量要钱(bgm38)
但是好像没有同步目录结构的功能
#7-1 - 2018-11-19 14:57
Cedar
说明这个功能在云端都能做到呢(bgm38)
目录结构应该可以同步吧..我改个文件夹的名字 云端也会跟着改的吧..
#8 - 2018-11-19 15:17
(BGMのTrinitas<=>婊冈妈<=>补冈妈<=>拜冈妈 三位一体 ...)
microsoft powertoy 有一个synctoy
#8-1 - 2018-11-19 15:23
Cedar
你说的这个synctoy是我说的那个停止维护的synctoy么(bgm38)
#8-2 - 2018-11-19 15:24
lhb5883-吹冈王♛⑩
Cedar 说: 你说的这个synctoy是我说的那个停止维护的synctoy么
至少目前我没发现什么bug
#8-3 - 2018-11-19 15:26
Cedar
lhb5883-污喵王VIP⑩ 说: 至少目前我没发现什么bug
我也在用这个, 但是有人说echo模式有bug呀
echo变contribute什么的..不能完全信任它..而且这个其实也不怎么符合我的需求就是了..只是个折中方案
#8-4 - 2018-11-19 19:31
lhb5883-吹冈王♛⑩
Cedar 说: 我也在用这个, 但是有人说echo模式有bug呀
echo变contribute什么的..不能完全信任它..而且这个其实也不怎么符合我的需求就是了..只是个折中方案
你需要一个大硬盘(bgm38)我是台式工作站搞一个大硬盘,然后其他机器远程访问。
#8-5 - 2018-11-19 19:35
Cedar
lhb5883-污喵王VIP⑩ 说: 你需要一个大硬盘我是台式工作站搞一个大硬盘,然后其他机器远程访问。
家里有个NAS..可是我没有公网IP(也没办法搞到..) 就只能在家远程访问了(bgm38)
#8-6 - 2018-11-19 22:08
lhb5883-吹冈王♛⑩
Cedar 说: 家里有个NAS..可是我没有公网IP(也没办法搞到..) 就只能在家远程访问了
花生壳?
#8-7 - 2018-11-19 22:20
Cedar
lhb5883-污喵王VIP⑩ 说: 花生壳?
花生壳听说速度太慢了 好像还有流量限制?
#8-8 - 2018-11-20 05:58
lhb5883-吹冈王♛⑩
Cedar 说: 花生壳听说速度太慢了 好像还有流量限制?
就一个动态域名哪来的流量限制?
#8-9 - 2018-11-20 09:34
LunarShaddow🌙
lhb5883-污喵王VIP⑩ 说: 就一个动态域名哪来的流量限制?
+1
#8-10 - 2018-11-20 11:10
Cedar
lhb5883-污喵王VIP⑩ 说: 就一个动态域名哪来的流量限制?
内网穿透有流量限制的吧? 也可能我记错了 只是速度慢而已..
#8-11 - 2018-11-20 11:22
lhb5883-吹冈王♛⑩
Cedar 说: 内网穿透有流量限制的吧? 也可能我记错了 只是速度慢而已..
速度慢主要是现在哪怕是百兆宽带上传也只有4Mbps而已,这个确实没什么好办法。
#9 - 2018-11-19 17:06
好像icloud drive开了optimize storage就是这样的
#9-1 - 2018-11-19 18:04
Cedar
所以也是云存储吗b38
#9-2 - 2018-11-19 18:52
W
我的文檔用的也是 iCloud 的方案, 這裡和 Google Drive, One Drive 其實是三個操作系統的對應啊.

不過大文件, 我猜測是單個文件 50GiB+ 吧. 我就用本地方案.
而更小的的文件, 比如按項目組織的源代碼類型的文件, 就又是區別於以上兩個的 git.
#9-3 - 2018-11-19 19:33
Cedar
Willian 说: 我的文檔用的也是 iCloud 的方案, 這裡和 Google Drive, One Drive 其實是三個操作系統的對應啊.

不過大文件, 我猜測是單個文件 50GiB+ 吧. 我就用本地方案. ...
50G也太大了 我的单个文件也就1G-10G上下吧..
#10 - 2018-11-20 11:50
(哈啊…果然又困了……)
#10-1 - 2018-11-20 11:59
Cedar
楼上也提到了 可惜我想要的不是云存储呢..