mysql增量腳本
『壹』 如何實現mysql增量更
Ø 首先，我們需要開啟MySQL伺服器的二進制日誌功能，其實現方法有很多種，最常用的是在MySQL的配置文件的mysqld項中加入log-bin=[filepath]項；也可以使用mysqld –log-bin=[filepath]重新啟動MySQL伺服器。
Ø 其次，使用mysqlmp對資料庫進行完全備份，它可以實現對數據據的聯機，非阻塞的熱備份，不會影響其他進程對資料庫的讀寫操作。（參考指令：mysqlmp -uroot --password=123 --single-transaction --flush-logs --master-data=2 --all-databases --delete-master-logs > d:/mysql5.0/full_%date:~0,10%_1500_PM.sql）
Ø 第三，使用flush logs指令刷新創建新的二進制日誌。可以通過mysqladmin flush logs或者flush logs語句實現。最方便有效的方法是將它做成批處理文件，然後讓操作系統定期執行。
Ø 使用mysql < *.sql進行完全備份的恢復。
『貳』 如何增量導入MYSQL資料庫中的數據
大SQL文件導入資料庫的方法：
1、點擊"開始"-"運行"，輸入cmd，然後回車進入到DOS界面。
2、進入MYSQL安裝目錄。
3、假如MYSQL安裝在D盤，SQL文件也在D盤，加入命名為demo.sql，操作的方法是：
輸入"D:"，回車即進入到D盤了，然後輸入"cd mysql/bin"並回車
4、再輸入"mysql -u root -p database d:/demo.sql"，回車顯示要輸入密碼
5、如果MYSQL資料庫的密碼為空則不輸入任何東西回車，沒有出現錯誤說明導入成功。
注意：上面的database是要導入的資料庫名。
『叄』 怎麼通過java程序實現獲取mysql的增量
Slave I/O線程和Slave SQL線程是典型的單寫單讀生產者-消費者模型，是可以做到無鎖設計的；因此實現思路就是Slave I/O線程在每次寫完數據後，原子更新Relay Log的長度信息，Slave SQL線程讀取Relay Log的時以長度信息為邊界。
『肆』 如何實現Mysql資料庫的差異性備份和增量備份
Ø首先，我們需要開啟MySQL伺服器的二進制日誌功能，其實現方法有很多種，最常用的是在MySQL的配置文件的mysqld項中加入log-bin=[filepath]項；也可以使用mysqld –log-bin=[filepath]重新啟動MySQL伺服器。
Ø其次，使用mysqlmp對資料庫進行完全備份，它可以實現對數據據的聯機，非阻塞的熱備份，不會影響其他進程對資料庫的讀寫操作。（參考指令：mysqlmp -uroot --password=123 --single-transaction --flush-logs --master-data=2 --all-databases --delete-master-logs > d:/mysql5.0/full_%date:~0,10%_1500_PM.sql）
Ø第三，使用flush logs指令刷新創建新的二進制日誌。可以通過mysqladmin flush logs或者flush logs語句實現。最方便有效的方法是將它做成批處理文件，然後讓操作系統定期執行。
Ø使用mysql < *.sql進行完全備份的恢復。
Ø使用mysqlbinlog logs-bin.[0-9]* | mysql進行增量備份的恢復。一般的，假設我們周日下午三點進行了完全備份並生成備份文件full_backup_20100415_3_PM.sql，周一周二中午一點進行了兩次增量備份，分別生成增量備份文件inc_backup_1_PM.0007和inc_backup_1_PM.0008，周三上午10：00資料庫發生崩潰，需要進行資料庫恢復，此時正在記錄的二進制日誌為inc_backup_1_PM.0009，我們還需要恢復其中記錄的操作。具體的恢復操作為：
mysql < full_backup_20100415_3_PM.sql
mysqlbinlog inc_backup_1_PM.0007 inc_backup_1_PM.0008 inc_backup_1_PM.0009
u具體應用(結合T8項目)
根據上述分析，我們在T8項目使用MySQL增量備份，也需要三個步驟：
Ø首選修改MySQL啟動配置文件my.cnf，在其中的mysqld項中增加log-bin選項，重新啟動MySQL伺服器以開啟二進制日誌功能，在生成文件/usr/data/mysql/ t8server-bin.index和t8server-bin..000001。如圖所示：
u總結
MySQL提供了很方便的完全+增量備份實現方法，我們只需調用系統內置的方法或者作出一些細微的配置就可以對MySQL資料庫進行備份和恢復。對於MyISAM資料庫和InnoDB資料庫，都可以通過mysqlmp實現資料庫的完全邏輯備份，通過啟動二進制日誌（binary logs），可以記錄一個時間段內對資料庫的所有可能更新的操作，從而通過flush logs創建新的日誌而實現增量備份。
『伍』 本機運行的MySQL 資料庫 如何安全的備份/還原
一般是即時備份。做主從。或者是每天增量備份。
本文是在linux下,mysql 4.1.14版本下測試的,經過適當修改可能適合mysql 4.0,5.0及其其他版本.
本文適合於沒有啟動復制功能的mysql,如果啟動了復制,可能不需要採取這種備份策略或者需要修改相關參數.
每個人的備份策略都可能不同,所以請根據實際情況修改,做到舉一反三,不要照搬照抄,可能會造成不必要的損失.
希望你明白這個腳本要干什麼工作!
腳本描述
每7天備份一次所有數據,每天備份binlog,也就是增量備份.
(如果數據少,每天備份一次完整數據即可,可能沒必要做增量備份)
作者對shell腳本不太熟悉,所以很多地方寫的很笨 :)
開啟 bin log
在mysql 4.1版本中,默認只有錯誤日誌,沒有其他日誌.可以通過修改配置打開bin log.方法很多,其中一個是在/etc/my.cnf中的mysqld部分加入:
[mysqld]
log-bin
這個日誌的主要作用是增量備份或者復制(可能還有其他用途).
如果想增量備份,必須打開這個日誌.
對於資料庫操作頻繁的mysql,這個日誌會變得很大,而且可能會有多個.
在資料庫中flush-logs,或者使用mysqladmin,mysqlmp調用flush-logs後並且使用參數delete-master-logs,這些日誌文件會消失,並產生新的日誌文件(開始是空的).
所以如果從來不備份,開啟日誌可能沒有必要.
完整備份的同時可以調用flush-logs,增量備份之前flush-logs,以便備份最新的數據.
完整備份腳本
如果資料庫數據比較多,我們一般是幾天或者一周備份一次數據,以免影響應用運行,如果數據量比較小,那麼一天備份一次也無所謂了.
#!/bin/sh
# mysql data backup script
# by scud
# 2005-10-30
#
# use mysqlmp --help,get more detail.
#
BakDir=/backup/mysql
LogFile=/backup/mysql/mysqlbak.log
DATE=`date +%Y%m%d`
echo " " >> $LogFile
echo " " >> $LogFile
echo "-------------------------------------------" >> $LogFile
echo $(date +"%y-%m-%d %H:%M:%S") >> $LogFile
echo "--------------------------" >> $LogFile
cd $BakDir
DumpFile=$DATE.sql
GZDumpFile=$DATE.sql.tgz
mysqlmp --quick --all-databases --flush-logs
--delete-master-logs --lock-all-tables
> $DumpFile
echo "Dump Done" >> $LogFile
tar czvf $GZDumpFile $DumpFile >> $LogFile 2>&1
echo "[$GZDumpFile]Backup Success!" >> $LogFile
rm -f $DumpFile
#delete previous daily backup files:採用增量備份的文件,如果完整備份後,則刪除增量備份的文件.
cd $BakDir/daily
rm -f *
cd $BakDir
echo "Backup Done!"
echo "please Check $BakDir Directory!"
echo " it to your local disk or ftp to somewhere !!!"
ls -al $BakDir
上面的腳本把mysql備份到本地的/backup/mysql目錄,增量備份的文件放在/backup/mysql/daily目錄下.
注意:上面的腳本並沒有把備份後的文件傳送到其他遠程計算機,也沒有刪除幾天前的備份文件:需要用戶增加相關腳本,或者手動操作.
增量備份
增量備份的數據量比較小,但是要在完整備份的基礎上操作,用戶可以在時間和成本上權衡,選擇最有利於自己的方式.
增量備份使用bin log,腳本如下:
#!/bin/sh
#
# mysql binlog backup script
#
/usr/bin/mysqladmin flush-logs
DATADIR=/var/lib/mysql
BAKDIR=/backup/mysql/daily
###如果你做了特殊設置,請修改此處或者修改應用此變數的行:預設取機器名,mysql預設也是取機器名
HOSTNAME=`uname -n`
cd $DATADIR
FILELIST=`cat $HOSTNAME-bin.index`
##計算行數,也就是文件數
COUNTER=0
for file in $FILELIST
do
COUNTER=`expr $COUNTER + 1 `
done
NextNum=0
for file in $FILELIST
do
base=`basename $file`
NextNum=`expr $NextNum + 1`
if [ $NextNum -eq $COUNTER ]
then
echo "skip lastest"
else
dest=$BAKDIR/$base
if(test -e $dest)
then
echo "skip exist $base"
else
echo "ing $base"
cp $base $BAKDIR
fi
fi
done
echo "backup mysql binlog ok"
增量備份腳本是備份前flush-logs,mysql會自動把內存中的日誌放到文件里,然後生成一個新的日誌文件,所以我們只需要備份前面的幾個即可,也就是不備份最後一個.
因為從上次備份到本次備份也可能會有多個日誌文件生成,所以要檢測文件,如果已經備份過,就不用備份了.
注:同樣,用戶也需要自己遠程傳送,不過不需要刪除了,完整備份後程序會自動生成.
訪問設置
腳本寫完了,為了能讓腳本運行,還需要設置對應的用戶名和密碼,mysqladmin和mysqlmp都是需要用戶名和密碼的,當然可以寫在腳本中,但是修改起來不太方便,假設我們用系統的root用戶來運行此腳本,那麼我們需要在/root(也就是root用戶的home目錄)創建一個.my.cnf文件,內容如下
[mysqladmin]
password =password
user= root
[mysqlmp]
user=root
password=password
注:設置本文件只有root可讀.(chmod 600 .my.cnf )
此文件說明程序使用mysql的root用戶備份數據,密碼是對應的設置.這樣就不需要在腳本里寫用戶名和密碼了.
自動運行
為了讓備份程序自動運行,我們需要把它加入crontab.
有2種方法,一種是把腳本根據自己的選擇放入到/etc/cron.daily,/etc/cron.weekly這么目錄里.
一種是使用crontab -e放入到root用戶的計劃任務里,例如完整備份每周日凌晨3點運行,日常備份每周一-周六凌晨3點運行.
『陸』 win7系統下mysql如何增量備份
增量備份其實就是開啟二進制日誌，保留每個操作的sql語句，然後定時備份那個日誌文件，並進行刷新以便生成新的日誌文件
『柒』 有什麼簡單的 mysql 增量備份方案
簡單的 mysql 增量備份方案
想弄一個自動作業每天備份公司項目的一個mysql資料庫，原本採取的方案是crontab+全量mysqlmp 然後gzip壓縮並按日期保存，最後生成文件大概30多M的樣子。但是畢竟這種全量備份放在每天執行不是很好，因為以後數據會越來越大（其中幾張表，每天可能增加幾w條數據）。
網路google了mysql增量備份的方案，看到有2種：
1.也是使用mysqlmp，然後將這一次的mp文件和前一次的文件用比對工具比對，生成patch補丁，將補丁打到上一次的mp文件中，生成一份新的mp文件。（stackoverflow上看到的，感覺思路很奇特，但是不知道這樣會不會有問題）
2.增量拷貝 mysql 的數據文件，以及日誌文件。典型的方式就是用官方mysqlbackup工具配合 --incremental 參數，但是 mysqlbackup 是mysql Enterprise版才有的工具，現在項目安裝的mysql版本貌似沒有。
『捌』 mysql用mysqlmp進行增量備份，如何搞啊有詳細思路以及命令嗎
echo "" > $eMailFile
echo $(date +"%y-%m-%d %H:%M:%S") >> $eMailFile
#
# 刷新日誌，使資料庫使用新的二進制日誌文件
$mysqlDir/bin/mysqladmin -u$user -p$userPWD flush-logs
cd $dataDir
# 得到二進制日誌列表
fileList=`cat $HOSTNAME-bin.index`
iCounter=0
for file in $fileList
do
iCounter=`expr $iCounter + 1`
done
nextNum=0
iFile=0
for file in $fileList
do
binLogName=`basename $file`
nextNum=`expr $nextNum + 1`
# 跳過最後一個二進制日誌（資料庫當前使用的二進制日誌文件）
if [[ $nextNum == $iCounter ]]; then
echo "Skip lastest!" > /dev/null
else
dest=$dailyBackupDir/$binLogName
# 跳過已經備份的二進制日誌文件
if [[ -e $dest ]]; then
echo "Skip exist $binLogName!" > /dev/null
else
# 備份日誌文件到備份目錄
cp $binLogName $dailyBackupDir
if [[ $? == 0 ]]; then
iFile=`expr $iFile + 1`
echo "$binLogName Backup Success!" >> $eMailFile
fi
fi
fi
done
if [[ $iFile == 0 ]];then
echo "No Binlog Backup!" >> $eMailFile
else
echo "Backup $iFile File(s)." >> $eMailFile