前言
前期誤操作,導(dǎo)致數(shù)據(jù)庫表刪除,雖然數(shù)據(jù)量不多,但是通過binlog恢復(fù)比較麻煩,通過備份文件來恢復(fù),備份文件達36個G打開都是問題;
使用備份文件恢復(fù)
大文件編輯器,glogg-latest-x86_64-setup通過該文件打開備份文件,雖然過程稍慢,但是能夠打開,且正常讀取編輯信息,要恢復(fù)的數(shù)據(jù)量不大時采取是沒問題的,但是如果表幾十萬行,操作起來就比較麻煩了;
Golang讀取備份文件
采用Golang讀取,借助編程語言的優(yōu)勢來讀取備份,經(jīng)過測試讀取指定備份文件(約36GB)表,大約需要12min,其實主要就是讀取遍歷備份文件的過程;
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
|
** * @Author: ws * @File: main * @Date: 2019/11/16 0016 14:35 * @Remark: */ var( _INSERT_INTO= "INSERTINTO${table}VALUES" _Dir= "temp" ) var TABLE_CAR= "T_SCM_CAR" func ReadSqlFile(){ t1 := time .Now() // get current time f, err := os.Open( "E:\\update\\crm_20191112_210001.sql\\crm_20191112_210001.sql" ) defer f.Close() if err != nil { } buf := bufio.NewReader(f) nfs:=getTxtFile(TABLE_CAR) for { s, err := buf.ReadString( '\n' ) if (err!=nil){ logger.ERROR(err.Error()) break } if err == nil { if s== "" { continue } sqlstr:=getSqlStr(s,TABLE_CAR) if (sqlstr!= "" ){ nfs.Write([]byte(sqlstr)) } } } elapsed := time .Since(t1) fmt.Println( "App elapsed: " , elapsed) } /** 調(diào)整驗證每一行數(shù)據(jù)的格式化,并與預(yù)設(shè)是否一致,如果一致則讀取加載到 */ func getSqlStr(sqlstr,tableName string)string{ var realTableName=strings.Replace(_INSERT_INTO, "${table}" ,tableName,-1) replaceEmptyStr:=strings.Replace(sqlstr, " " , "" ,-1) tempS:=strings.ToUpper(strings.Replace(replaceEmptyStr, "`" , "" ,-1)) if (len(tempS)>=len(realTableName)) { tabName := tempS[0:len(realTableName)] if (tabName ==realTableName) { return sqlstr } } return "" } /** 打開txt文件 */ func getTxtFile(fileName string)os.File{ txtFile:=createToFile(fmt.Sprintf( "%v/%v.txt" ,_Dir,fileName)) nfs, err := os.OpenFile(txtFile.Name(), os.O_APPEND |os.O_RDWR|os.O_CREATE, 0644) if err != nil { logger.ERROR(fmt.Sprintf( "打開文件失敗:%v" ,err.Error())) } defer nfs.Close() nfs.Seek(0, io.SeekEnd) return *nfs } func readLine(r *bufio.Reader) (string, error) { line, isprefix, err := r.ReadLine() for isprefix && err == nil { var bs []byte bs, isprefix, err = r.ReadLine() line = append(line, bs...) } return string(line), err } func createToFile(fileName string)os.File{ _, err := os.Stat(_Dir) if err == nil { } if os.IsNotExist(err) { os.MkdirAll(_Dir, os.ModePerm) } newFile, err := os.Create(fileName) if err != nil { logger.ERROR(fmt.Sprintf( "文件創(chuàng)建失敗:%v" ,err.Error())) } defer func() { newFile.Close() }() newFile.WriteString( "\xEF\xBB\xBF" ) // 寫入UTF-8 BOM,防止中文亂碼 return *newFile } func main() { ReadSqlFile() } |
總結(jié)
以上就是這篇文章的全部內(nèi)容了,希望本文的內(nèi)容對大家的學習或者工作具有一定的參考學習價值,謝謝大家對服務(wù)器之家的支持。
原文鏈接:https://www.jianshu.com/p/50b1968c42c6