/stdhome

To get this branch, use:
bzr branch http://bzr.ed.am/stdhome

« back to all changes in this revision

Viewing changes to lib/stdhome/vcs/bzr.py

  • Committer: Tim Marston
  • Date: 2014-02-26 19:10:31 UTC
  • Revision ID: tim@ed.am-20140226191031-elcqy5j09h2syn2j
moved copy-in, copy-out and deployment conflict checking to a set of "walkers";
bzr vcs back-end now parses affected files during update; deployment state now
includes affected files

Show diffs side-by-side

added added

removed removed

lib/stdhome/vcs/bzr.py
26
26
from stdhome import the
27
27
 
28
28
 
29
 
class BzrVcs( Vcs ):
 
29
class VcsBzr( Vcs ):
30
30
 
31
31
 
32
32
        def __init__( self, dir ):
34
34
 
35
35
                @param dir the fully-qualified directory to work in.
36
36
                """
37
 
 
38
37
                self.dir = dir
39
 
                self.ignored_files = [ '.bzr', '.bzrignore' ]
40
 
 
41
 
 
42
 
        def has_authority( self ):
43
 
                """Check that the directory is under this VCS's control.
44
 
                """
45
 
 
46
 
                return os.path.exists( os.path.join( self.dir, '.bzr' ) )
47
 
 
48
 
 
49
 
        def expand_repo_url( self, url ):
50
 
                """Convert a simple hostname in to an URL that the VCS can use.
51
 
                """
52
 
 
53
 
                return 'bzr+ssh://%s/%s/%s' % ( url, the.dir, the.repo.name )
54
38
 
55
39
 
56
40
        def init( self ):
61
45
                os.mkdir( self.dir )
62
46
 
63
47
                # bzr init
64
 
                try:
65
 
                        self.run( [ 'bzr', 'init', '.' ] )
66
 
                except self.VcsError as e:
 
48
                p = Popen( [ 'bzr', 'init', '.' ], cwd = self.dir,
 
49
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
 
50
                output = p.communicate()[ 0 ]
 
51
                if p.returncode > 0:
67
52
 
68
53
                        # attempt to clean-up dir
69
54
                        try:
71
56
                        except OSError:
72
57
                                pass
73
58
 
74
 
                        raise
 
59
                        raise self.VcsError( 'bzr init failed', output )
75
60
 
76
61
 
77
62
        def checkout( self, url ):
84
69
                os.mkdir( self.dir )
85
70
 
86
71
                # bzr co
87
 
                try:
88
 
                        self.run( [ 'bzr', 'checkout', url, '.' ] )
89
 
                except self.VcsError as e:
 
72
                p = Popen( [ 'bzr', 'co', url, '.' ], cwd = self.dir,
 
73
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
 
74
                output = p.communicate()[ 0 ]
 
75
                if p.returncode > 0:
90
76
 
91
77
                        # attempt to clean-up dir
92
78
                        try:
94
80
                        except OSError:
95
81
                                pass
96
82
 
97
 
                        raise
98
 
 
99
 
 
100
 
        def get_revno( self ):
101
 
                """Obtain some sort of revision identifier
102
 
                """
103
 
 
104
 
                # bzr revno
105
 
                output = self.run( [ 'bzr', 'revno', '--tree' ] )
106
 
 
107
 
                # parse revno
108
 
                buf = StringIO.StringIO( output )
109
 
                return buf.readline().rstrip()
110
 
 
111
 
 
112
 
        def revert( self, revno = None ):
 
83
                        raise self.VcsError( 'bzr checkout failed', output )
 
84
 
 
85
 
 
86
        def revert( self ):
113
87
                """Revert the branch so that there are no outstanding changes or unknown files.
114
 
                If a revno is supplied, then the repository is reverted to that
115
 
                revision.
116
88
                """
117
89
 
118
 
                # bzr st
119
 
                output = self.run( [ 'bzr', 'status' ] )
120
 
                files = self.parse_file_blocks( output )
121
 
 
122
 
                # remove kind changed files (or they can cause `bzr revert` to break in
123
 
                # strange situations, like when a directory has been replaced with a
124
 
                # symlink to a non-existant file)
125
 
                if 'kind changed' in files:
126
 
                        for file in files[ 'kind changed' ]:
127
 
                                matches = re.search( '^(.+?)[/@+]? \([^)]+\)$', file )
128
 
                                if not matches:
129
 
                                        raise RunTimeError(
130
 
                                                'failed to parse bzr kind change: %s' % file )
131
 
                                file = matches.group( 1 )
132
 
                                if the.verbose >= 2: print "removing (kind changed): " + file
133
 
                                full_file = os.path.join( self.dir, file )
134
 
                                if os.path.isfile( full_file ) or os.path.islink( full_file ):
135
 
                                        os.unlink( full_file )
136
 
                                elif os.path.isdir( full_file ):
137
 
                                        shutil.rmtree( full_file )
138
 
                                else:
139
 
                                        raise RuntimeError( 'exotic file in repo: %s' % file )
140
 
 
141
90
                # bzr revert
142
 
                self.run( [ 'bzr', 'revert', '--no-backup' ] )
 
91
                p = Popen( [ 'bzr', 'revert', '--no-backup' ], cwd = self.dir,
 
92
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
 
93
                output = p.communicate()[ 0 ]
 
94
                if p.returncode > 0:
 
95
                        raise self.VcsError( 'bzr revert failed', output )
143
96
 
144
97
                # bzr st
145
 
                output = self.run( [ 'bzr', 'status' ] )
 
98
                p = Popen( [ 'bzr', 'st' ], cwd = self.dir,
 
99
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
 
100
                output = p.communicate()[ 0 ]
 
101
                if p.returncode > 0:
 
102
                        raise self.VcsError( 'bzr status failed', output )
146
103
                files = self.parse_file_blocks( output )
147
104
 
148
105
                # remove unknown files
149
106
                if 'unknown' in files:
150
107
                        for file in files[ 'unknown' ]:
151
 
                                matches = re.search( r'^(.+?)[/@+]?$', file )
152
 
                                if not matches:
153
 
                                        raise RunTimeError(
154
 
                                                'failed to parse bzr unknowns: %s' % file )
155
 
                                file = matches.group( 1 )
156
 
                                if the.verbose >= 2: print "removing (unknown): " + file
157
108
                                full_file = os.path.join( self.dir, file )
158
 
                                if os.path.isfile( full_file ) or os.path.islink( full_file ):
 
109
                                if os.path.isfile( full_file ):
159
110
                                        os.unlink( full_file )
160
 
                                elif os.path.isdir( full_file ):
 
111
                                elif os.full_file.isdir( full_file ):
161
112
                                        shutil.rmtree( full_file )
162
113
                                else:
163
114
                                        raise RuntimeError( 'exotic file in repo: %s' % file )
164
115
 
165
 
                # if a revision identifier has been given, ensure we're updated to that
166
 
                if revno is not None and self.get_revno() != revno:
167
 
 
168
 
                        # bzr update
169
 
                        self.run( [ 'bzr', 'update', '-r', revno ] )
170
 
 
171
116
 
172
117
        def update( self ):
173
118
                """Update the branch, pulling down any upstream changes and merging them.  This
175
120
                operation.
176
121
                """
177
122
 
178
 
#               WARNING: the following might cause bzr to ask for your ssh password more than
179
 
#               once during an update!!!
180
 
#
181
 
#               # get revno
182
 
#               revno = self.get_revno()
183
 
#
184
 
#               # update to current revision (pull in history without updating tree)
185
 
#               self.run( [ 'bzr', 'update', '-r', revno ] )
186
 
#
187
 
#               # get log output
188
 
#               next_revno = str( int( revno ) + 1 )
189
 
#               output = self.run( [ 'bzr', 'log', '-r', next_revno + '..' ] )
190
 
#
191
 
#               # parse output
192
 
#               keep_files = list()
193
 
#               buf = StringIO.StringIO( output )
194
 
#               in_message = False
195
 
#               for line in buf:
196
 
#                       line = line.rstrip( '\n' )
197
 
#                       if line.lower() == 'message:':
198
 
#                               in_message = True
199
 
#                       elif in_message:
200
 
#                               if line[ : 2 ] != '  ':
201
 
#                                       in_message = False
202
 
#                               else:
203
 
#                                       line = line[ 2 : ]
204
 
#
205
 
#                                       # process directives
206
 
#                                       if line[ : 6 ].lower() == 'keep: ':
207
 
#                                               file = line[ 6 : ]
208
 
#                                               if file in rename_files: file = rename_files[ file ]
209
 
#                                               keep_files.append( file )
210
 
#                                       elif line[ : 8 ].lower() == 'rename: ':
211
 
#                                               rename_from = line[ 8 : ]
212
 
#                                       elif line[ : 4 ].lower() == 'to: ':
213
 
#                                               if rename_from in rename_files:
214
 
#                                                       rename_from = rename_files[ rename_from ]
215
 
#                                               rename_files[ line[ 4 : ] ] = rename_from
216
 
 
217
 
                # bzr update properly
218
 
                output = self.run( [ 'bzr', 'update' ] )
 
123
                # bzr update
 
124
                p = Popen( [ 'bzr', 'update' ], cwd = self.dir,
 
125
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
 
126
                output = p.communicate()[ 0 ]
 
127
                if p.returncode > 0:
 
128
                        raise self.VcsError( 'bzr update failed', output )
219
129
 
220
130
                # parse output (see logic in report() in bzrlib/delta.py)
221
131
                files = list()
223
133
                for line in buf:
224
134
                        if not re.search( '^[-R+ ?][K NMD!][* ] ', line ): continue
225
135
                        line = line.rstrip()
 
136
                        if the.verbose: print '  %s' % line
226
137
 
227
138
                        # renames show before and after file names
228
139
                        matches = re.search( '^R.. (.*?)[/@+]? => (.*?)[/@+]?$', line )
244
155
                                continue
245
156
 
246
157
                        raise RuntimeError(
247
 
                                'failed to parse bzr update output line:\n%s' % line )
 
158
                                'failed to parse bzr update output line:\n%' % line )
248
159
 
249
160
                return files
250
161
 
254
165
                """
255
166
 
256
167
                # bzr status
257
 
                output = self.run( [ 'bzr', 'status', '--no-pending' ] )
258
 
 
259
 
                # parse output
 
168
                p = Popen( [ 'bzr', 'status', '--no-pending' ], cwd = self.dir,
 
169
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
 
170
                output = p.communicate()[ 0 ]
 
171
                if p.returncode > 0:
 
172
                        raise self.VcsError( 'bzr status failed', output )
260
173
                files = self.parse_file_blocks( output )
261
174
                return True if len( files ) else False
262
175
 
266
179
                """
267
180
 
268
181
                # bzr status
269
 
                output = self.run( [ 'bzr', 'status', '--no-pending' ] )
270
 
 
271
 
                # parse output
 
182
                p = Popen( [ 'bzr', 'status', '--no-pending' ], cwd = self.dir,
 
183
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
 
184
                output = p.communicate()[ 0 ]
 
185
                if p.returncode > 0:
 
186
                        raise self.VcsError( 'bzr status failed', output )
272
187
                files = self.parse_file_blocks( output )
273
188
                return files['conflicts'] if 'conflicts' in files else None
274
189
 
275
190
 
276
 
        def add( self, files ):
277
 
                """Make sure files are added to version control.
278
 
                @param files a list of relative filenames
279
 
                """
280
 
 
281
 
                # bzr add
282
 
                self.run( [ 'bzr', 'add', '-N' ] + files )
283
 
 
284
 
 
285
 
        def commit( self ):
286
 
                """Commit changes to the repo.
287
 
                """
288
 
 
289
 
                # bzr commit
290
 
                try:
291
 
                        self.run( [ 'bzr', 'commit', '-m', '' ] )
292
 
                except self.VcsError as e:
293
 
                        if re.search( 'Working tree is out of date', e.output ):
294
 
                                raise the.program.FatalError(
295
 
                                        'you must update your files first.\n' +
296
 
                                        'Hint: see "%s update --help"' % the.program.name );
297
 
                        else:
298
 
                                raise e
299
 
 
300
 
 
301
 
        def run( self, cmd ):
302
 
                if the.verbose >= 2: print 'exec: %s' % ' '.join( cmd )
303
 
                p = Popen( cmd, cwd = self.dir,
304
 
                                   stdout = subprocess.PIPE, stderr = subprocess.STDOUT )
305
 
                output = p.communicate()[ 0 ]
306
 
                if p.returncode > 0:
307
 
                        raise self.VcsError( ' '.join( cmd[ : 2 ] ), output )
308
 
                if the.verbose >= 2:
309
 
                        verbose_output = output.rstrip()
310
 
                        if len( verbose_output ):
311
 
                                print re.sub( '(^|\n)', '\\1  : ', verbose_output )
312
 
                return output
313
 
 
314
 
 
315
191
        def parse_file_blocks( self, output ):
316
192
                res = dict()
317
193
                current = None
328
204
                                                res[ current ] = list()
329
205
                                        res[ current ].append( matches.group( 1 ) )
330
206
                                        continue
331
 
                        if re.search( '^[0-9]+ shel(?:f|ves) exists?', line ): continue
 
207
                        if re.search( '^[0-9]+ shelf exists', line ): continue
332
208
                        if re.search( '^working tree is out of date', line ): continue
333
209
                        raise self.ParseError( "unrecognised line: %s" % line )
334
210
                return res