/[smeserver]/builds_bin/update_repos
ViewVC logotype

Diff of /builds_bin/update_repos

Parent Directory Parent Directory | Revision Log Revision Log | View Revision Graph Revision Graph | View Patch Patch

Revision 1.63 by slords, Mon Nov 22 21:17:22 2010 UTC Revision 1.69 by slords, Fri May 25 17:47:34 2012 UTC
# Line 33  my $distrepo = { '7' => { active    => 1 Line 33  my $distrepo = { '7' => { active    => 1
33                            builds    => '/builds/smeserver-7-core/',                            builds    => '/builds/smeserver-7-core/',
34                            community => '/builds/smeserver-7-contribs/',                            community => '/builds/smeserver-7-contribs/',
35                            stage     => '/stage/7/',                            stage     => '/stage/7/',
36                              sign      => 1,
37                              checksum  => 'sha',
38                          },                          },
39                   '8' => { active    => 1,                   '8' => { active    => 1,
40                            centos    => 5,                            centos    => 5,
41                            repo      => '/releases/testing/8/',                            repo      => '/releases/8/',
42                            os        => '',                            os        => '',
43                            builds    => '/builds/smeserver-8-core/',                            builds    => '/builds/smeserver-8-core/',
44                            community => '/builds/smeserver-8-contribs/',                            community => '/builds/smeserver-8-contribs/',
45                            stage     => '/stage/8/',                            stage     => '/stage/8/',
46                              sign      => 1,
47                              checksum  => 'sha',
48                          },                          },
49                 };                 };
50    
51  my $repos = { "${repotag}os"              => { prio => 18, inc => 1, ver => 1, rel => 1, os => 1 },  my $repos = { "${repotag}os"              => { prio => 19, inc => 1, ver => 1, rel => 1, os => 1 },
52                "${repotag}updates"         => { prio => 17, inc => 1, ver => 1, rel => 1 },                "${repotag}updates"         => { prio => 18, inc => 1, ver => 1, rel => 1 },
53                "${repotag}updates-testing" => { prio => 16, inc => 1, ver => 1, rel => 3 },                "${repotag}updates-testing" => { prio => 17, inc => 1, ver => 1, rel => 3 },
54                "${repotag}extras"          => { prio => 15, inc => 0, ver => 1, rel => 1 },                "${repotag}extras"          => { prio => 16, inc => 0, ver => 1, rel => 1 },
55                "${repotag}addons"          => { prio => 14, inc => 0, ver => 1, rel => 1 },                "${repotag}addons"          => { prio => 15, inc => 0, ver => 1, rel => 1 },
56                "${repotag}contribs"        => { prio => 13, inc => 0, ver => 1, rel => 1 },                "${repotag}contribs"        => { prio => 14, inc => 0, ver => 1, rel => 1 },
57                "${repotag}test"            => { prio => 12, inc => 0, ver => 2, rel => 3, devel => 2 },                "${repotag}test"            => { prio => 13, inc => 0, ver => 2, rel => 3, devel => 2 },
58                "${repotag}dev"             => { prio => 11, inc => 0, ver => 1, rel => 1, devel => 1 },                "${repotag}dev"             => { prio => 12, inc => 0, ver => 1, rel => 1, devel => 1 },
59                'centos'                    => { prio => 10, inc => 0, ver => 0, rel => 0, orig => 1, base => 1 },                'centos'                    => { prio => 10, inc => 0, ver => 0, rel => 0, orig => 1, base => 1 },
60                'epel'                      => { prio =>  9, inc => 0, ver => 0, rel => 0, orig => 1, base => 1 },                'epel'                      => { prio =>  9, inc => 0, ver => 0, rel => 0, orig => 1, base => 1 },
61                'rpmforge'                  => { prio =>  7, inc => 0, ver => 0, rel => 0, orig => 1, base => 1 },                'rpmforge'                  => { prio =>  7, inc => 0, ver => 0, rel => 0, orig => 1, base => 1 },
# Line 74  my $baserepo = { "~S${repotag}os/~A/$osd Line 78  my $baserepo = { "~S${repotag}os/~A/$osd
78                   '/mirrors/centos/~C/updates/~A/RPMS/' => 'centos',                   '/mirrors/centos/~C/updates/~A/RPMS/' => 'centos',
79                   '/mirrors/centos/~C/os/~A/CentOS/~O' => 'centos',                   '/mirrors/centos/~C/os/~A/CentOS/~O' => 'centos',
80                   '/mirrors/centos/~C/extras/~A/RPMS/' => 'centos',                   '/mirrors/centos/~C/extras/~A/RPMS/' => 'centos',
81                     '/mirrors/centos-vault/~C/fasttrack/~A/RPMS/' => 'centos',
82                     '/mirrors/centos-vault/~C/updates/~A/RPMS/' => 'centos',
83                     '/mirrors/centos-vault/~C/os/~A/CentOS/~O' => 'centos',
84                     '/mirrors/centos-vault/~C/extras/~A/RPMS/' => 'centos',
85                   '/mirrors/fedora/epel/~C/~A/' => 'epel',                   '/mirrors/fedora/epel/~C/~A/' => 'epel',
86                   '/mirrors/fedora/epel/testing/~C/~A/' => 'epel',                   '/mirrors/fedora/epel/testing/~C/~A/' => 'epel',
87                   '/mirrors/rpmforge/redhat/el~C/en/~A/dag/RPMS/' => 'rpmforge',                   '/mirrors/rpmforge/redhat/el~C/en/~A/dag/RPMS/' => 'rpmforge',
# Line 94  if ( $opts{q} ) { Line 102  if ( $opts{q} ) {
102    
103  my $skippkg = { '7' => { 'centos'        => { map { $_ => 1 } ( 'horde', 'imp-h3', 'ingo-h3', 'turba-h3' ) },  my $skippkg = { '7' => { 'centos'        => { map { $_ => 1 } ( 'horde', 'imp-h3', 'ingo-h3', 'turba-h3' ) },
104                           'epel'          => { map { $_ => 1 } ( 'clamav', 'fping', 'ocsinventory', 'perl-Compress-Bzip2', 'perl-Compress-Raw-Zlib', 'perl-Compress-Raw-Bzip2', 'perl-Crypt-OpenSSL-Bignum', 'perl-Crypt-OpenSSL-Random', 'perl-Crypt-OpenSSL-RSA', 'perl-DateTime', 'perl-Razor-Agent', 'perl-Text-Iconv' ) },                           'epel'          => { map { $_ => 1 } ( 'clamav', 'fping', 'ocsinventory', 'perl-Compress-Bzip2', 'perl-Compress-Raw-Zlib', 'perl-Compress-Raw-Bzip2', 'perl-Crypt-OpenSSL-Bignum', 'perl-Crypt-OpenSSL-Random', 'perl-Crypt-OpenSSL-RSA', 'perl-DateTime', 'perl-Razor-Agent', 'perl-Text-Iconv' ) },
105                           'rpmforge'      => { map { $_ => 1 } ( 'mod_auth_tkt', 'perl-Test-Inline', 'spamassassin' ) },                           'rpmforge'      => { map { $_ => 1 } ( 'dovecot', 'mod_auth_tkt', 'perl-Test-Inline', 'perl-libwww-perl', 'spamassassin' ) },
106                           'atrpms'        => { map { $_ => 1 } ( 'check4updates', 'dovecot', 'trac', 'yum' ) },                           'atrpms'        => { map { $_ => 1 } ( 'check4updates', 'dovecot', 'trac', 'yum' ) },
107                         },                         },
108                  '8' => { 'atrpms'        => { map { $_ => 1 } ( 'gnupg' ) },                  '8' => { 'atrpms'        => { map { $_ => 1 } ( 'gnupg' ) },
109                           'centos'        => { map { $_ => 1 } ( 'horde', 'imp-h3', 'ingo-h3', 'turba-h3' ) },                           'centos'        => { map { $_ => 1 } ( 'horde', 'imp-h3', 'ingo-h3', 'turba-h3' ) },
110                           'epel'          => { map { $_ => 1 } ( 'clamav', 'horde', 'libtalloc', 'libtdb', 'perl-Compress-Bzip2', 'perl-Compress-Raw-Zlib', 'perl-Compress-Raw-Bzip2', 'perl-Crypt-OpenSSL-Bignum', 'perl-Crypt-OpenSSL-Random', 'perl-Crypt-OpenSSL-RSA', 'perl-Razor-Agent', 'smolt' ) },                           'epel'          => { map { $_ => 1 } ( 'clamav', 'fping', 'html2ps', 'horde', 'libtalloc', 'libtdb', 'oidentd', 'perl-Compress-Bzip2', 'perl-Compress-Raw-Zlib', 'perl-Compress-Raw-Bzip2', 'perl-Crypt-OpenSSL-Bignum', 'perl-Crypt-OpenSSL-Random', 'perl-Crypt-OpenSSL-RSA', 'perl-Razor-Agent', 'smolt' ) },
111                           'rpmforge'      => { map { $_ => 1 } ( 'libtalloc', 'mod_auth_tkt', 'perl-Test-Inline', 'spamassassin' ) },                           'rpmforge'      => { map { $_ => 1 } ( 'dovecot', 'libtalloc', 'mod_auth_tkt', 'perl-Test-Inline', 'spamassassin' ) },
112                         },                         },
113                };                };
114    
# Line 160  foreach my $ver ( sort { $a <=> $b } key Line 168  foreach my $ver ( sort { $a <=> $b } key
168    
169                  # rpmforge (.el4.rf to .rf, with rf,rfb,rft,rfx endings)                  # rpmforge (.el4.rf to .rf, with rf,rfb,rft,rfx endings)
170                  ($tmp = $pkg->{svr}) =~ s{\.el\d(\.rf[btx]?)$}{$1}   && $rpms->{$base}->{vers}->{$tmp} && last SRC;                  ($tmp = $pkg->{svr}) =~ s{\.el\d(\.rf[btx]?)$}{$1}   && $rpms->{$base}->{vers}->{$tmp} && last SRC;
171                  # rpmforge (.el4.rfx to .rf, with rfb,rft,rfx switched to rf)                  # rpmforge (.el4.rfx to .rf, rfb,rft,rfx switched to rf)
172                  ($tmp = $pkg->{svr}) =~ s{\.el\d(\.rf)[btx]$}{$1}    && $rpms->{$base}->{vers}->{$tmp} && last SRC;                  ($tmp = $pkg->{svr}) =~ s{\.el\d(\.rf)[btx]$}{$1}    && $rpms->{$base}->{vers}->{$tmp} && last SRC;
173                    # rpmforge (.el4.rf to .rfx, rf,rfb,rft,rfx switched to rfx)
174                    ($tmp = $pkg->{svr}) =~ s{\.el\d(\.rf)[btx]?$}{$1x}   && $rpms->{$base}->{vers}->{$tmp} && last SRC;
175                  # rpmforge (.el4.rf to .el5) TODO: remove when no longer needed                  # rpmforge (.el4.rf to .el5) TODO: remove when no longer needed
176                  ($tmp = $pkg->{svr}) =~ s{\.el\d\.rf$}{.el5}         && $rpms->{$base}->{vers}->{$tmp} && last SRC;                  ($tmp = $pkg->{svr}) =~ s{\.el\d\.rf$}{.el5}         && $rpms->{$base}->{vers}->{$tmp} && last SRC;
177                  # rpmforge (.2.el4.rf to .rf, minor modification not pushed to source?) TODO: remove when no longer needed                  # rpmforge (.2.el4.rf to .rf, minor modification not pushed to source?) TODO: remove when no longer needed
178                  ($tmp = $pkg->{svr}) =~ s{\.2\.el\d(\.rf)$}{$1}      && $rpms->{$base}->{vers}->{$tmp} && last SRC;                  ($tmp = $pkg->{svr}) =~ s{\.2\.el\d(\.rf)$}{$1}      && $rpms->{$base}->{vers}->{$tmp} && last SRC;
179    
180                    # atrpms (remove .at)
181                    ($tmp = $pkg->{svr}) =~ s{\.at$}{}                   && $rpms->{$base}->{vers}->{$tmp} && last SRC;
182                  # atrpms (remove .el4.at)                  # atrpms (remove .el4.at)
183                  ($tmp = $pkg->{svr}) =~ s{\.el\d\.at$}{}             && $rpms->{$base}->{vers}->{$tmp} && last SRC;                  ($tmp = $pkg->{svr}) =~ s{\.el\d\.at$}{}             && $rpms->{$base}->{vers}->{$tmp} && last SRC;
184                  # atrpms (remove .el4)                  # atrpms (remove .el4)
# Line 264  foreach my $ver ( sort { $a <=> $b } key Line 276  foreach my $ver ( sort { $a <=> $b } key
276                              $srpm = $cmp if ! $srpm && $cmp->{src};                              $srpm = $cmp if ! $srpm && $cmp->{src};
277                              $reposrc{$cmp->{repo}}->{srpm} = $cmp if $reposrc{$cmp->{repo}};                              $reposrc{$cmp->{repo}}->{srpm} = $cmp if $reposrc{$cmp->{repo}};
278                          }                          }
279                      } elsif ($repos->{$cmp->{repo}}->{stage} ) {                      } elsif ( $repos->{$cmp->{repo}}->{stage} ) {
280                          $cmp->{delete}++;                          $cmp->{delete}++;
281                      } else {                      } else {
282                          $srpm = $cmp if ! $srpm && $cmp->{src};                          $srpm = $cmp if ! $srpm && $cmp->{src};
# Line 379  foreach my $ver ( sort { $a <=> $b } key Line 391  foreach my $ver ( sort { $a <=> $b } key
391                      push @{$pkg->{repos}}, $stage;                      push @{$pkg->{repos}}, $stage;
392                  }                  }
393              }              }
394              if ( ! $print && ($pkg->{delete} || $pkg->{repos} || $pkg->{nosig} ) ) {              if ( ! $print && ($pkg->{delete} || $pkg->{repos} || ( $pkg->{nosig} && $distrepo->{$ver}->{sign} ) ) ) {
395                  print "\n$base ($disttag$ver)\n", "=" x length("$base ($disttag$ver)"), "\n";                  print "\n$base ($disttag$ver)\n", "=" x length("$base ($disttag$ver)"), "\n";
396                  $print++;                  $print++;
397              }              }
398    
399              my $src = $pkg->{rpm}->filename;              my $src = $pkg->{rpm}->filename;
400              if ( $pkg->{nosig} ) {              if ( $pkg->{nosig} && $distrepo->{$ver}->{sign} ) {
401                  print "sign package (", basename($pkg->{rpm}->filename), ")\n";                  print "sign package (", basename($pkg->{rpm}->filename), ")\n";
402                  unless ( $opts{t} ) {                  unless ( $opts{t} ) {
403                      qx(cat $HOME/.rpmpass | setsid rpm --addsign $src >& /dev/null);                      qx(cat $HOME/.rpmpass | setsid rpm --addsign $src >& /dev/null);
# Line 445  foreach my $ver ( sort { $a <=> $b } key Line 457  foreach my $ver ( sort { $a <=> $b } key
457                  next if $pkg->{done} || $repos->{$pkg->{repo}}->{orig} || $repos->{$pkg->{repo}}->{base};                  next if $pkg->{done} || $repos->{$pkg->{repo}}->{orig} || $repos->{$pkg->{repo}}->{base};
458                  $pkg->{delete}++;                  $pkg->{delete}++;
459                  my $src = $pkg->{rpm}->filename;                  my $src = $pkg->{rpm}->filename;
460                  if ( ! $print && ($pkg->{delete} || $pkg->{repos} || $pkg->{nosig} ) ) {                  if ( ! $print && ($pkg->{delete} || $pkg->{repos} || ( $pkg->{nosig} && $distrepo->{$ver}->{sign} ) ) ) {
461                      print "\n$base ($disttag$ver)\n", "=" x length("$base ($disttag$ver)"), "\n";                      print "\n$base ($disttag$ver)\n", "=" x length("$base ($disttag$ver)"), "\n";
462                      $print++;                      $print++;
463                  }                  }
# Line 467  foreach my $ver ( sort { $a <=> $b } key Line 479  foreach my $ver ( sort { $a <=> $b } key
479              chomp $dir;              chomp $dir;
480              print "rebuild $repo/$arch\n";              print "rebuild $repo/$arch\n";
481              unless ( $opts{t} ) {              unless ( $opts{t} ) {
482                  if ( $dir =~ m{test/|-testing/} ) {                  my $checksum = "--checksum $distrepo->{$ver}->{checksum}";
483                      if ( -f "$dir/repodata/comps.xml" ) {  
484                          qx(createrepo --update --database --exclude *smeserver-release*.rpm --exclude *.src.rpm --exclude *-debuginfo-*.rpm --groupfile repodata/comps.xml $dir);                  my $exclude = "";
485                      } else {                  $exclude = "--exclude *smeserver-release*.rpm" if $dir =~ m{test/|-testing/};
486                          qx(createrepo --update --database --exclude *smeserver-release*.rpm --exclude *.src.rpm --exclude *-debuginfo-*.rpm $dir);  
487                      }                  my $groupfile = "";
488                  } else {                  $groupfile = "--groupfile repodata/comps.xml" if -f "$dir/repodata/comps.xml";
489                      if ( -f "$dir/repodata/comps.xml" ) {  
490                          qx(createrepo --update --database --exclude *.src.rpm --exclude *-debuginfo-*.rpm --groupfile repodata/comps.xml $dir);                  qx(createrepo --update --database --exclude *.src.rpm --exclude *-debuginfo-*.rpm $checksum $exclude $groupfile $dir);
                     } else {  
                         qx(createrepo --update --database --exclude *.src.rpm --exclude *-debuginfo-*.rpm $dir);  
                     }  
                 }  
491                  qx(repoview $dir);                  qx(repoview $dir);
492    
493                  qx(rm -rf $dir/.olddata) if -d "$dir/.olddata";                  qx(rm -rf $dir/.olddata) if -d "$dir/.olddata";
494                  qx(rm -rf $dir/.repodata) if -d "$dir/.repodata";                  qx(rm -rf $dir/.repodata) if -d "$dir/.repodata";
495                  qx(rm -rf $dir/repodata/index.html) if -f "$dir/repodata/index.html";                  qx(rm -rf $dir/repodata/index.html) if -f "$dir/repodata/index.html";
# Line 548  sub process_rpm { Line 557  sub process_rpm {
557      }      }
558      my ($src, $version, $release) = ($pkg->is_source_package ? $pkg->filename : $pkg->sourcerpm) =~ m{(?:^|/)([^/]*)-([^-]+)-([^-]+)\.\w+\.rpm$};      my ($src, $version, $release) = ($pkg->is_source_package ? $pkg->filename : $pkg->sourcerpm) =~ m{(?:^|/)([^/]*)-([^-]+)-([^-]+)\.\w+\.rpm$};
559      return if $skippkg->{$ver}->{$repo} && ( $skippkg->{$ver}->{$repo}->{$src} || $skippkg->{$ver}->{$repo}->{$pkg->name} );      return if $skippkg->{$ver}->{$repo} && ( $skippkg->{$ver}->{$repo}->{$src} || $skippkg->{$ver}->{$repo}->{$pkg->name} );
560      return if $repos->{$repo}->{base} && $nosig;      return if $repos->{$repo}->{base} &&  $nosig && $baserepo->{$ver}->{sign};
561      if ( $nosig && ! -f "$HOME/.rpmpass" ) { print " * missing signature (" .$pkg->filename . ")\n"; return; }      if ( $nosig && ! -f "$HOME/.rpmpass" ) { print " * missing signature (" .$pkg->filename . ")\n"; return; }
562      my $arch = 'unknown';      my $arch = 'unknown';
563      $arch = 'SRPMS' if $pkg->filename =~ m{[/-](SRPMS?|src|source)/};      $arch = 'SRPMS' if $pkg->filename =~ m{[/-](SRPMS?|src|source)/};

Legend:
Removed lines/characters  
Changed lines/characters
  Added lines/characters
admin@koozali.org
 ViewVC Help
Powered by ViewVC 1.2.1 RSS 2.0 feed