/stdhome

To get this branch, use:
bzr branch http://bzr.ed.am/stdhome

« back to all changes in this revision

Viewing changes to lib/stdhome/vcs/bzr.py

  • Committer: Tim Marston
  • Date: 2016-02-16 00:26:53 UTC
  • Revision ID: tim@ed.am-20160216002653-oa8dgponknyislg3
added home directory change reporting to CopyOutWalker; added --quiet option to
update, resolve, revert and init commands; replace use of re.match with
re.search for clarity (and fixed related bug in FileMatcher); added BzrVcs.run
command output when verbose >= 2

Show diffs side-by-side

added added

removed removed

lib/stdhome/vcs/bzr.py
26
26
from stdhome import the
27
27
 
28
28
 
29
 
class VcsBzr( Vcs ):
 
29
class BzrVcs( Vcs ):
30
30
 
31
31
 
32
32
        def __init__( self, dir ):
34
34
 
35
35
                @param dir the fully-qualified directory to work in.
36
36
                """
 
37
 
37
38
                self.dir = dir
38
39
 
39
40
 
45
46
                os.mkdir( self.dir )
46
47
 
47
48
                # bzr init
48
 
                p = Popen( [ 'bzr', 'init', '.' ], cwd = self.dir,
49
 
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
50
 
                output = p.communicate()[ 0 ]
51
 
                if p.returncode > 0:
 
49
                try:
 
50
                        self.run( [ 'bzr', 'init', '.' ] )
 
51
                except self.VcsError as e:
52
52
 
53
53
                        # attempt to clean-up dir
54
54
                        try:
56
56
                        except OSError:
57
57
                                pass
58
58
 
59
 
                        raise self.VcsError( 'bzr init failed', output )
 
59
                        raise
60
60
 
61
61
 
62
62
        def checkout( self, url ):
69
69
                os.mkdir( self.dir )
70
70
 
71
71
                # bzr co
72
 
                p = Popen( [ 'bzr', 'co', url, '.' ], cwd = self.dir,
73
 
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
74
 
                output = p.communicate()[ 0 ]
75
 
                if p.returncode > 0:
 
72
                try:
 
73
                        self.run( [ 'bzr', 'checkout', url, '.' ] )
 
74
                except self.VcsError as e:
76
75
 
77
76
                        # attempt to clean-up dir
78
77
                        try:
80
79
                        except OSError:
81
80
                                pass
82
81
 
83
 
                        raise self.VcsError( 'bzr checkout failed', output )
84
 
 
85
 
 
86
 
        def revert( self ):
 
82
                        raise
 
83
 
 
84
 
 
85
        def get_revno( self ):
 
86
                """Obtain some sort of revision identifier
 
87
                """
 
88
 
 
89
                # bzr revno
 
90
                output = self.run( [ 'bzr', 'revno', '--tree' ] )
 
91
 
 
92
                # parse revno
 
93
                buf = StringIO.StringIO( output )
 
94
                return buf.readline().rstrip()
 
95
 
 
96
 
 
97
        def revert( self, revno = None ):
87
98
                """Revert the branch so that there are no outstanding changes or unknown files.
 
99
                If a revno is supplied, then the repository is reverted to that
 
100
                revision.
88
101
                """
89
102
 
 
103
                # bzr st
 
104
                output = self.run( [ 'bzr', 'status' ] )
 
105
                files = self.parse_file_blocks( output )
 
106
 
 
107
                # remove kind changed files (or they can cause `bzr revert` to break in
 
108
                # strange situations, like when a directory has been replaced with a
 
109
                # symlink to a non-existant file)
 
110
                if 'kind changed' in files:
 
111
                        for file in files[ 'kind changed' ]:
 
112
                                matches = re.search( '^(.+?)[/@+]? \([^)]+\)$', file )
 
113
                                if not matches:
 
114
                                        raise RunTimeError(
 
115
                                                'failed to parse bzr kind change: %s' % file )
 
116
                                file = matches.group( 1 )
 
117
                                if the.verbose >= 2: print "removing (kind changed): " + file
 
118
                                full_file = os.path.join( self.dir, file )
 
119
                                if os.path.isfile( full_file ) or os.path.islink( full_file ):
 
120
                                        os.unlink( full_file )
 
121
                                elif os.path.isdir( full_file ):
 
122
                                        shutil.rmtree( full_file )
 
123
                                else:
 
124
                                        raise RuntimeError( 'exotic file in repo: %s' % file )
 
125
 
90
126
                # bzr revert
91
 
                p = Popen( [ 'bzr', 'revert', '--no-backup' ], cwd = self.dir,
92
 
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
93
 
                output = p.communicate()[ 0 ]
94
 
                if p.returncode > 0:
95
 
                        raise self.VcsError( 'bzr revert failed', output )
 
127
                self.run( [ 'bzr', 'revert', '--no-backup' ] )
96
128
 
97
129
                # bzr st
98
 
                p = Popen( [ 'bzr', 'st' ], cwd = self.dir,
99
 
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
100
 
                output = p.communicate()[ 0 ]
101
 
                if p.returncode > 0:
102
 
                        raise self.VcsError( 'bzr status failed', output )
 
130
                output = self.run( [ 'bzr', 'status' ] )
103
131
                files = self.parse_file_blocks( output )
104
132
 
105
133
                # remove unknown files
106
134
                if 'unknown' in files:
107
135
                        for file in files[ 'unknown' ]:
 
136
                                matches = re.search( r'^(.+?)[/@+]?$', file )
 
137
                                if not matches:
 
138
                                        raise RunTimeError(
 
139
                                                'failed to parse bzr unknowns: %s' % file )
 
140
                                file = matches.group( 1 )
 
141
                                if the.verbose >= 2: print "removing (unknown): " + file
108
142
                                full_file = os.path.join( self.dir, file )
109
 
                                if os.path.isfile( full_file ):
 
143
                                if os.path.isfile( full_file ) or os.path.islink( full_file ):
110
144
                                        os.unlink( full_file )
111
 
                                elif os.full_file.isdir( full_file ):
 
145
                                elif os.path.isdir( full_file ):
112
146
                                        shutil.rmtree( full_file )
113
147
                                else:
114
148
                                        raise RuntimeError( 'exotic file in repo: %s' % file )
115
149
 
 
150
                # if a revision identifier has been given, ensure we're updated to that
 
151
                if revno is not None and self.get_revno() != revno:
 
152
 
 
153
                        # bzr update
 
154
                        self.run( [ 'bzr', 'update', '-r', revno ] )
 
155
 
116
156
 
117
157
        def update( self ):
118
158
                """Update the branch, pulling down any upstream changes and merging them.  This
120
160
                operation.
121
161
                """
122
162
 
123
 
                # bzr update
124
 
                p = Popen( [ 'bzr', 'update' ], cwd = self.dir,
125
 
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
126
 
                output = p.communicate()[ 0 ]
127
 
                if p.returncode > 0:
128
 
                        raise self.VcsError( 'bzr update failed', output )
 
163
#               WARNING: the following might cause bzr to ask for your ssh password more than
 
164
#               once during an update!!!
 
165
#
 
166
#               # get revno
 
167
#               revno = self.get_revno()
 
168
#
 
169
#               # update to current revision (pull in history without updating tree)
 
170
#               self.run( [ 'bzr', 'update', '-r', revno ] )
 
171
#
 
172
#               # get log output
 
173
#               next_revno = str( int( revno ) + 1 )
 
174
#               output = self.run( [ 'bzr', 'log', '-r', next_revno + '..' ] )
 
175
#
 
176
#               # parse output
 
177
#               keep_files = list()
 
178
#               buf = StringIO.StringIO( output )
 
179
#               in_message = False
 
180
#               for line in buf:
 
181
#                       line = line.rstrip( '\n' )
 
182
#                       if line.lower() == 'message:':
 
183
#                               in_message = True
 
184
#                       elif in_message:
 
185
#                               if line[ : 2 ] != '  ':
 
186
#                                       in_message = False
 
187
#                               else:
 
188
#                                       line = line[ 2 : ]
 
189
#
 
190
#                                       # process directives
 
191
#                                       if line[ : 6 ].lower() == 'keep: ':
 
192
#                                               file = line[ 6 : ]
 
193
#                                               if file in rename_files: file = rename_files[ file ]
 
194
#                                               keep_files.append( file )
 
195
#                                       elif line[ : 8 ].lower() == 'rename: ':
 
196
#                                               rename_from = line[ 8 : ]
 
197
#                                       elif line[ : 4 ].lower() == 'to: ':
 
198
#                                               if rename_from in rename_files:
 
199
#                                                       rename_from = rename_files[ rename_from ]
 
200
#                                               rename_files[ line[ 4 : ] ] = rename_from
 
201
 
 
202
                # bzr update properly
 
203
                output = self.run( [ 'bzr', 'update' ] )
129
204
 
130
205
                # parse output (see logic in report() in bzrlib/delta.py)
131
206
                files = list()
133
208
                for line in buf:
134
209
                        if not re.search( '^[-R+ ?][K NMD!][* ] ', line ): continue
135
210
                        line = line.rstrip()
136
 
                        if the.verbose: print '  %s' % line
137
211
 
138
212
                        # renames show before and after file names
139
213
                        matches = re.search( '^R.. (.*?)[/@+]? => (.*?)[/@+]?$', line )
155
229
                                continue
156
230
 
157
231
                        raise RuntimeError(
158
 
                                'failed to parse bzr update output line:\n%' % line )
 
232
                                'failed to parse bzr update output line:\n%s' % line )
159
233
 
160
234
                return files
161
235
 
165
239
                """
166
240
 
167
241
                # bzr status
168
 
                p = Popen( [ 'bzr', 'status', '--no-pending' ], cwd = self.dir,
169
 
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
170
 
                output = p.communicate()[ 0 ]
171
 
                if p.returncode > 0:
172
 
                        raise self.VcsError( 'bzr status failed', output )
 
242
                output = self.run( [ 'bzr', 'status', '--no-pending' ] )
 
243
 
 
244
                # parse output
173
245
                files = self.parse_file_blocks( output )
174
246
                return True if len( files ) else False
175
247
 
179
251
                """
180
252
 
181
253
                # bzr status
182
 
                p = Popen( [ 'bzr', 'status', '--no-pending' ], cwd = self.dir,
183
 
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
184
 
                output = p.communicate()[ 0 ]
185
 
                if p.returncode > 0:
186
 
                        raise self.VcsError( 'bzr status failed', output )
 
254
                output = self.run( [ 'bzr', 'status', '--no-pending' ] )
 
255
 
 
256
                # parse output
187
257
                files = self.parse_file_blocks( output )
188
258
                return files['conflicts'] if 'conflicts' in files else None
189
259
 
190
260
 
 
261
        def add( self, files ):
 
262
                """Make sure files are added to version control.
 
263
                @param files a list of relative filenames
 
264
                """
 
265
 
 
266
                # bzr add
 
267
                self.run( [ 'bzr', 'add', '-N' ] + files )
 
268
 
 
269
 
 
270
        def commit( self ):
 
271
                """Commit changes to the repo.
 
272
                """
 
273
 
 
274
                # bzr commit
 
275
                self.run( [ 'bzr', 'commit', '-m', '' ] )
 
276
 
 
277
 
 
278
        def run( self, cmd ):
 
279
                if the.verbose >= 2: print 'exec: %s' % ' '.join( cmd )
 
280
                p = Popen( cmd, cwd = self.dir,
 
281
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
 
282
                output = p.communicate()[ 0 ]
 
283
                if p.returncode > 0:
 
284
                        raise self.VcsError( ' '.join( cmd[ : 2 ] ), output )
 
285
                if the.verbose >= 2:
 
286
                        print re.sub( '(^|\n)', '\\1  > ', output.rstrip() )
 
287
                return output
 
288
 
 
289
 
191
290
        def parse_file_blocks( self, output ):
192
291
                res = dict()
193
292
                current = None
204
303
                                                res[ current ] = list()
205
304
                                        res[ current ].append( matches.group( 1 ) )
206
305
                                        continue
207
 
                        if re.search( '^[0-9]+ shelf exists', line ): continue
 
306
                        if re.search( '^[0-9]+ shel(?:f|ves) exists?', line ): continue
208
307
                        if re.search( '^working tree is out of date', line ): continue
209
308
                        raise self.ParseError( "unrecognised line: %s" % line )
210
309
                return res