當前位置:首頁 » 編程軟體 » 文件同步腳本

文件同步腳本

發布時間: 2022-07-11 16:02:59

A. 兩台linux主機之間 文件同步 shell腳本

如果是Ubuntu系統並且電腦都聯網,那麼很easy:
通過雲存儲技術,Ubuntu One可以讓用戶在不同電腦間同步和共享文件。

最新版的Ubuntu 12.10中的Ubuntu One 提供了Ubuntu One文件夾存在於用戶目錄下,向此文件夾添加、更新或者刪除操作會實時的同步伺服器,使用和操作本地文件沒什麼區別。
並且UbuntuOne已經有了windows客戶端。

B. 求助: linux下怎麼實現兩個文件夾的同步(shell腳本)

提供一個思路給你
源文件夾和目標文件夾,通過ls -R -1
生成一個文件列表。
然後逐個進行對比
如果不同,則從源文件夾進行復制

其實雙向同步是比較麻煩的。因為如果一旦兩個文件夾的同一個文件都被修改了,那麼就會出現沖突。
用腳本寫,很麻煩...

最好的方法,是搞一個git或者svn一類的版本管理。

C. 求beyond compare文件內容同步比較腳本

有人解決沒有?

D. 如何使2台Linux伺服器通過ftp自動同步文件(用Shell腳本)

樓上正解。

E. 這個自動同步文件的批處理命令怎麼寫

@echooff&title文件備份及比對工具By依夢琴瑤
::設置A目錄路徑
setA=E:同步

::設置B目錄路徑
setB=S:同步

::設置C目錄路徑
setC=E:冗餘

echo說明:
echo此工具在比對移動時,遇見同名文件,會在新文件名字後加上_yyyymmddhhmmss
echo格式的年月日時分秒。本工具同時會比對文件夾,重命名格式同文件一樣。
echo,
echo日誌文件命名方式為yyyymmddhhmmss.txt格式的年月日時分秒.txt。
echo日誌內容中-^>前面的為原始文件路徑,後面的為最終位置的路徑。
echo,&echo,

Call:GetABFullPath"%A%""%B%""%C%"
ifexist"%SystemRoot%System32choice.exe"gotoc2
echo,&set/pchoice=請按Y鍵開始備份,按其它任意鍵(包括回車鍵)退出,回車確認:
if/i"%choice%"=="Y"gotostart
exit

:c2
echo,&choice/cYN/n/m"按Y鍵開始備份,按N鍵退出:"
iferrorlevel2exit
iferrorlevel1gotostart
exit

:start
setYMD=%date:~,10%
setYMD=%YMD:/=%
setYMD=%YMD:-=%
setHMS=%time:~,8%
setHMS=%HMS:=0%
setHMS=%HMS::=%

echo,&echo正在備份中,請耐心等待。。。
(echo從"%B%"備份到"%A%"中的文件/文件夾:
echo,
x/s/e/y/d/h/f"%B%""%A%")>"%C%\%YMD%%HMS%.txt"
ping127.0.1-n"2">nul
echo,&echo正在比對中,請耐心等待。。。
(echo,&echo,&echo,
echo從"%A%"移動到"%C%"中的文件/文件夾:
echo,
for/f"delims="%%ain('dir/s/b"%A%"')do(
set"str=%%~a"
ifnotexist"!str:%A%=%B%!"(
dir/ad"!str!">nul2>nul&&(
ifexist"!str:%A%=%C%!"set"Ext=_%YMD%%HMS%"
echo"!str!"-^>"!str:%A%=%C%!!Ext!"//文件夾
rd/s/q"!str!"2>nul
md"!str:%A%=%C%!!Ext!"2>nul
)||(
ifexist"!str:%A%=%C%!"set"Ext=_%YMD%%HMS%"
ifdefinedExt(
set"strtmp=%%~dpa"
echo"!str!"-^>"!strtmp:%A%=%C%!%%~na!Ext!%%~xa"
move"!str!""!strtmp:%A%=%C%!%%~na!Ext!%%~xa">nul
)else(
set"strtmp=%%~dpa"
echo"!str!"-^>"!str:%A%=%C%!"
x/s/e/y"!str!""!strtmp:%A%=%C%!">nul
del/f/q"!str!"2>nul
)
)
set"Ext="
set"strtmp="
)
))>>"%C%\%YMD%%HMS%.txt"
echo,&echo此次操作已完成,請按任意鍵退出。
@pause>nul&exit

:GetABFullPath
set"A=%~f1"
set"B=%~f2"
set"C=%~f3"
goto:eof



我的腳本可能不是最完美的,但應該算符合你的基本要求了!希望你喜歡,謝謝!

F. 如何使用七牛python SDK寫一個同步腳本及使

七牛雲存儲的 Python 語言版本 SDK(本文以下稱 Python-SDK)是對七牛雲存儲API協議的一層封裝,以提供一套對於 Python 開發者而言簡單易用的開發工具。Python 開發者在對接 Python-SDK 時無需理解七牛雲存儲 API 協議的細節,原則上也不需要對 HTTP 協議和原理做非常深入的了解,但如果擁有基礎的 HTTP 知識,對於出錯場景的處理可以更加高效。

最近剛搭了個markdown靜態博客,想把圖片放到雲存儲中。

經過調研覺得七牛可以滿足我個人的需求,就選它了。

要引用圖片就要先將圖片上傳到雲上。

雖然七牛網站後台可以上傳文件,但每次上傳都需要先登錄,然後選擇圖片,設置連接地址,才能上傳。

這個過程有些繁瑣,所以我便想用七牛雲提供的SDK寫個一同步工具,方便增量同步文件。

有了這個想法,就馬上行動。花了大概一個上午的時間,總算把這個工具給寫出來,並放到GitOSC和github上。

?

#!/usr/bin/env python#-*- coding:utf-8 -*-## AUTHOR = "heqingpan"# AUTHOR_EMAIL = "[email protected]"# URL = "http://git.oschina.net/hqp/qiniu_sync"import qiniufrom qiniu import Authfrom qiniu import BucketManagerimport osimport reaccess_key = ''secret_key = ''bucket_name = ''bucket_domain = ''q = Auth(access_key, secret_key)bucket = BucketManager(q)basedir=os.path.realpath(os.path.dirname(__file__))filename=__file__ignore_paths=[filename,"{0}c".format(filename)]ignore_names=[".DS_Store",".git",".gitignore"]charset="utf8"diff_time=2*60def list_all(bucket_name, bucket=None, prefix="", limit=100):rlist=[]if bucket is None:bucket = BucketManager(q)marker = Noneeof = Falsewhile eof is False:ret, eof, info = bucket.list(bucket_name, prefix=prefix, marker=marker, limit=limit)marker = ret.get('marker', None)for item in ret['items']:rlist.append(item["key"])if eof is not True:# 錯誤處理#print "error"passreturn rlistdef get_files(basedir="",fix="",rlist=None,ignore_paths=[],ignore_names=[]):if rlist is None:rlist=[]for subfile in os.listdir(basedir):temp_path=os.path.join(basedir,subfile)tp=os.path.join(fix,subfile)if tp in ignore_names:continueif tp in ignore_paths:continueif os.path.isfile(temp_path):rlist.append(tp)elif os.path.isdir(temp_path):get_files(temp_path,tp,rlist,ignore_paths,ignore_names)return rlistdef get_valid_key_files(subdir=""):basedir=subdir or basedirfiles = get_files(basedir=basedir,ignore_paths=ignore_paths,ignore_names=ignore_names)return map(lambda f:(f.replace("\","/"),f),files)def sync():qn_keys=list_all(bucket_name,bucket)qn_set=set(qn_keys)l_key_files=get_valid_key_files(basedir)k2f={}update_keys=[]u_count=500u_index=0for k,f in l_key_files:k2f[k]=fstr_k=kif isinstance(k,str):k=k.decode(charset)if k in qn_set:update_keys.append(str_k)u_index+=1if u_index > u_count:u_index-=u_countupdate_file(k2f,update_keys)update_keys=[]else:# uploapload_file(k,os.path.join(basedir,f))if update_keys:update_file(k2f,update_keys)print "sync end"def update_file(k2f,ulist):ops=qiniu.build_batch_stat(bucket_name,ulist)rets,infos = bucket.batch(ops)for i in xrange(len(ulist)):k=ulist[i]f=k2f.get(k)ret=rets[i]["data"]size=ret.get("fsize",None)put_time = int(ret.get("putTime")/10000000)local_size=os.path.getsize(f)local_time=int(os.path.getatime(f))if local_size==size:continueif put_time >= local_time - diff_time:# is newcontinue# updateupload_file(k,os.path.join(basedir,f))def upload_file(key,localfile):print "upload_file:"print keytoken = q.upload_token(bucket_name, key)mime_type = get_mime_type(localfile)params = {'x:a': 'a'}progress_handler = lambda progress, total: progressret, info = qiniu.put_file(token, key, localfile, params, mime_type, progress_handler=progress_handler)def get_mime_type(path):mime_type = "text/plain"return mime_typedef main():sync()if __name__=="__main__":main()

這個同步腳本支持批量比較文件,差異增量更新、批量更新。

使用方式

安裝七牛Python SDK

?

1pip install qiniu

填寫腳本文件(qiniusync.py)的配置信息

?

123access_key = ''secret_key = ''bucket_name = ''

注冊後可以拿到對應的信息

將腳本文件(qiniusync.py)拷貝到待同步根目錄

運行腳本

?

1python qiniusync.py

後記

寫完提交之後才發現,七牛已經提供相應的工具,我這個算是重復造輪子吧。

既然已經寫,就發出來,當做熟悉一下七牛的SDK也不錯,說不定以後還能用的上。

七牛雲存儲Python SDK使用教程

本教程旨在介紹如何使用七牛的Python SDK來快速地進行文件上傳,下載,處理,管理等工作。

安裝

首先,要使用Python的SDK必須要先安裝。七牛的Python SDK是開源的,託管在Github上面,項目地址為https://github.com/qiniu/python-sdk。

安裝的方式可以如項目的說明上所說,用 pip install qiniu 。當然也可以直接 clone 一份源代碼下來直接使用。我一般喜歡直接 clone 源代碼,這樣的話,如果要對SDK做一些改動也是十分容易的。

最新版本的Python SDK需要依賴 requests 庫,所以要提前安裝好。安裝方式當然也可以用 pip install requests 。

開發環境

Python的開發環境有很多種選擇,如果喜歡文本的方式,比如vim,emacs,sublime text等都是很好的選擇,如果你喜歡IDE,那麼最流行的莫過於 PyCharm 了。 PyCharm 的最新版本到這里下載。

Access Key和Secret Key

我們知道七牛雲存儲的許可權校驗機制基於一對密鑰,分別稱為 Access Key 和 Secret Key 。其中 Access Key 是公鑰, Secret Key 是私鑰。這一對密鑰可以從七牛的後台獲取。

小試牛刀

好了,做了上面的這些准備工作,我們就去上傳一個簡單的文件,練練手。

?

1234python#coding=utf-8__author__ = 'jemy''''

本例演示了一個簡單的文件上傳。

這個例子裡面,sdk根據文件的大小選擇是Form方式上傳還是分片上傳。

?

'''import qiniuaccessKey = "<Your Access Key>"secretKey = "<Your Secret Key>"#解析結果def parseRet(retData, respInfo):if retData != None:print("Upload file success!")print("Hash: " + retData["hash"])print("Key: " + retData["key"])#檢查擴展參數for k, v in retData.items():if k[:2] == "x:":print(k + ":" + v)#檢查其他參數for k, v in retData.items():if k[:2] == "x:" or k == "hash" or k == "key":continueelse:print(k + ":" + str(v))else:print("Upload file failed!")print("Error: " + respInfo.text_body)#無key上傳,http請求中不指定key參數def upload_without_key(bucket, filePath):#生成上傳憑證auth = qiniu.Auth(accessKey, secretKey)upToken = auth.upload_token(bucket, key=None)#上傳文件retData, respInfo = qiniu.put_file(upToken, None, filePath)#解析結果parseRet(retData, respInfo)def main():bucket = "if-pbl"filePath = "/Users/jemy/Documents/jemy.png"upload_without_key(bucket, filePath)if __name__ == "__main__":main()

運行結果為:

Upload file success!
Hash: Fp0XR6tM4yZmeiKXw7eZzmeyYsq8
Key: Fp0XR6tM4yZmeiKXw7eZzmeyYsq8

從上面我們可以看到,使用七牛的Python SDK上傳文件的最基本的步驟是:

1.生成上傳憑證

2.上傳文件

3.解析回復結果

G. 需要一個shell腳本,同步兩台區域網內機器的文件,謝謝了

#!/bin/sh

IP_ADDR=192.168.1.146
cd /var/www/a #進入本機的目錄
ftp -i -n $IP_ADDR <<EOF
user aaaaa mmm#用戶aaaaa,密碼為mmm
prmopt
cd /user/local/http/htdocs
mget *
EOF

#這段代碼再重復兩遍就行了,其中第三行中的目錄分別換成/b和/c
#然後用crontab 腳本名稱 就行了

H. 文件自動同步的bat腳本怎麼寫

需要用軟體實時的同步。很多同步軟體可以做到。如果使用bat,需要設置該bat定時運行,運行時才同步。

熱點內容
sql2012導入數據 發布:2025-02-08 19:09:07 瀏覽:286
java位與運算 發布:2025-02-08 18:48:22 瀏覽:217
sift演算法詳解 發布:2025-02-08 18:35:23 瀏覽:580
linux標准錯誤的是 發布:2025-02-08 18:32:07 瀏覽:916
蠻多小說怎麼緩存書架的小說 發布:2025-02-08 18:30:16 瀏覽:889
光遇花開腳本封號嗎 發布:2025-02-08 18:23:15 瀏覽:535
怎麼弄ld帳號和密碼 發布:2025-02-08 18:11:42 瀏覽:629
新逍客20發動機壓縮比 發布:2025-02-08 17:58:10 瀏覽:116
qq號和密碼我都知道為什麼登不上 發布:2025-02-08 17:52:21 瀏覽:873
寶塔伺服器ip進不去 發布:2025-02-08 17:52:18 瀏覽:383