]> andersk Git - svn-all-fast-export.git/blob - src/repository.cpp
checkpoint every now and then
[svn-all-fast-export.git] / src / repository.cpp
1 /*
2  *  Copyright (C) 2007  Thiago Macieira <thiago@kde.org>
3  *
4  *  This program is free software: you can redistribute it and/or modify
5  *  it under the terms of the GNU General Public License as published by
6  *  the Free Software Foundation, either version 2 of the License, or
7  *  (at your option) any later version.
8  *
9  *  This program is distributed in the hope that it will be useful,
10  *  but WITHOUT ANY WARRANTY; without even the implied warranty of
11  *  MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
12  *  GNU General Public License for more details.
13  *
14  *  You should have received a copy of the GNU General Public License
15  *  along with this program.  If not, see <http://www.gnu.org/licenses/>.
16  */
17
18 #include "repository.h"
19 #include <QTextStream>
20 #include <QDebug>
21
22 Repository::Repository(const Rules::Repository &rule)
23     : name(rule.name)
24 {
25     foreach (Rules::Repository::Branch branchRule, rule.branches) {
26         Branch branch;
27         branch.created = 0;     // not created
28
29         branches.insert(branchRule.name, branch);
30     }
31
32     // create the default branch
33     branches["master"].created = 1;
34
35     fastImport.setWorkingDirectory(name);
36 }
37
38 Repository::~Repository()
39 {
40     if (fastImport.state() != QProcess::NotRunning) {
41         fastImport.closeWriteChannel();
42         fastImport.waitForFinished();
43     }
44 }
45
46 void Repository::reloadBranches()
47 {
48     QHash<QString, Branch>::Iterator it = branches.begin(),
49                                     end = branches.end();
50     for ( ; it != end; ++it) {
51         QString branchRef = it.key();
52         if (!branchRef.startsWith("refs/"))
53             branchRef.prepend("refs/heads/");
54
55         bool branchExists;
56         // does this branch already exist?
57         QProcess revParse;
58         revParse.setWorkingDirectory(name);
59         revParse.start("git-rev-parse", QStringList() << "--verify" << branchRef);
60         revParse.waitForFinished();
61
62         if (revParse.exitCode() == 0)
63             branchExists = true;
64         else
65             branchExists = false;
66
67         if (branchExists) {
68             startFastImport();
69             fastImport.write("reset " + branchRef.toUtf8() +
70                              "\nfrom " + branchRef.toUtf8() + "^0\n\n");
71             it->created = 1;
72         }
73     }
74 }
75
76 void Repository::createBranch(const QString &branch, int revnum,
77                               const QString &branchFrom, int)
78 {
79     if (!branches.contains(branch)) {
80         qCritical() << branch << "is not a known branch in repository" << name;
81         exit(1);
82     }
83
84     startFastImport();
85     QByteArray branchRef = branch.toUtf8();
86     if (!branchRef.startsWith("refs/"))
87         branchRef.prepend("refs/heads/");
88
89     Branch &br = branches[branch];
90     if (br.created && br.created != revnum) {
91         QByteArray backupBranch = branchRef + '_' + QByteArray::number(revnum);
92         qWarning() << branch << "already exists; backing up to" << backupBranch;
93
94         fastImport.write("reset " + backupBranch + "\nfrom " + branchRef + "\n\n");
95     }
96
97     // now create the branch
98     br.created = revnum;
99     QByteArray branchFromRef = branchFrom.toUtf8();
100     if (!branchFromRef.startsWith("refs/"))
101         branchFromRef.prepend("refs/heads/");
102
103     fastImport.write("reset " + branchRef + "\nfrom " + branchFromRef + "\n\n");
104 }
105
106 Repository::Transaction *Repository::newTransaction(const QString &branch, const QString &svnprefix,
107                                                     int revnum)
108 {
109     if (!branches.contains(branch)) {
110         qCritical() << branch << "is not a known branch in repository" << name;
111         return 0;
112     }
113
114     Transaction *txn = new Transaction;
115     txn->repository = this;
116     txn->branch = branch.toUtf8();
117     txn->svnprefix = svnprefix.toUtf8();
118     txn->datetime = 0;
119     txn->revnum = revnum;
120     txn->lastmark = revnum;
121
122     startFastImport();
123     if (++commitCount % 10000)
124         // write everything to disk every 10000 commits
125         fastImport.write("checkpoint\n");
126     return txn;
127 }
128
129 void Repository::startFastImport()
130 {
131     if (fastImport.state() == QProcess::NotRunning) {
132         // start the process
133 #ifndef DRY_RUN
134         fastImport.setProcessChannelMode(QProcess::ForwardedChannels);
135         fastImport.start("git-fast-import", QStringList());
136 #else
137         QString outputFile = name;
138         outputFile.replace('/', '_');
139         fastImport.setStandardOutputFile(outputFile, QIODevice::Append);
140         fastImport.start("/bin/cat", QStringList());
141 #endif
142     }
143 }
144
145 Repository::Transaction::~Transaction()
146 {
147 }
148
149 void Repository::Transaction::setAuthor(const QByteArray &a)
150 {
151     author = a;
152 }
153
154 void Repository::Transaction::setDateTime(uint dt)
155 {
156     datetime = dt;
157 }
158
159 void Repository::Transaction::setLog(const QByteArray &l)
160 {
161     log = l;
162 }
163
164 void Repository::Transaction::deleteFile(const QString &path)
165 {
166     deletedFiles.append(path);
167 }
168
169 QIODevice *Repository::Transaction::addFile(const QString &path, int mode, qint64 length)
170 {
171     FileProperties fp;
172     fp.mode = mode;
173     fp.mark = ++lastmark;
174
175 #ifndef DRY_RUN
176     repository->fastImport.write("blob\nmark :");
177     repository->fastImport.write(QByteArray::number(fp.mark));
178     repository->fastImport.write("\ndata ");
179     repository->fastImport.write(QByteArray::number(length));
180     repository->fastImport.write("\n", 1);
181     repository->fastImport.waitForBytesWritten(0);
182 #endif
183
184     modifiedFiles.insert(path, fp);
185     return &repository->fastImport;
186 }
187
188 void Repository::Transaction::commit()
189 {
190     // create the commit message
191     QByteArray message = log;
192     if (!message.endsWith('\n'))
193         message += '\n';
194     message += "\nsvn path=" + svnprefix + "; revision=" + QByteArray::number(revnum) + "\n";
195
196     {
197         QByteArray branchRef = branch;
198         if (!branchRef.startsWith("refs/"))
199             branchRef.prepend("refs/heads/");
200
201         QTextStream s(&repository->fastImport);
202         s << "commit " << branchRef << endl;
203         s << "mark :" << revnum << endl;
204         s << "committer " << author << ' ' << datetime << " -0000" << endl;
205
206         Branch &br = repository->branches[branch];
207         if (!br.created) {
208             qWarning() << "Branch" << branch << "doesn't exist at revision"
209                        << revnum << "-- did you resume from the wrong revision?";
210             br.created = revnum;
211         }
212
213         s << "data " << message.length() << endl;
214     }
215
216     repository->fastImport.write(message);
217     repository->fastImport.putChar('\n');
218
219     // write the file deletions
220     if (deletedFiles.contains(""))
221         repository->fastImport.write("deleteall\n");
222     else
223         foreach (QString df, deletedFiles)
224             repository->fastImport.write("D " + df.toUtf8() + "\n");
225
226     // write the file modifications
227     QHash<QString, FileProperties>::ConstIterator it = modifiedFiles.constBegin();
228     for ( ; it != modifiedFiles.constEnd(); ++it) {
229         repository->fastImport.write("M ", 2);
230         repository->fastImport.write(QByteArray::number(it->mode, 8));
231         repository->fastImport.write(" :", 2);
232         repository->fastImport.write(QByteArray::number(it->mark));
233         repository->fastImport.write(" ", 1);
234         repository->fastImport.write(it.key().toUtf8());
235         repository->fastImport.write("\n", 1);
236     }
237
238     repository->fastImport.write("\n");
239
240     while (repository->fastImport.bytesToWrite() && repository->fastImport.waitForBytesWritten()) {
241         // nothing
242     }
243 }
This page took 0.053097 seconds and 5 git commands to generate.