move some logic to daklib

Signed-off-by: Mark Hymers <mhy@debian.org>

fix up cross-component logic

Signed-off-by: Mark Hymers <mhy@debian.org>

fix variable references

Signed-off-by: Mark Hymers <mhy@debian.org>

Merge commit 'twerner/cruft' into merge

* commit 'twerner/cruft':
  do not create new db views just improve older ones
  cruft-report: reimplement 'obsolete source'

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge commit 'twerner/process-new' into merge

* commit 'twerner/process-new':
  fix OverrideSuite handling

Signed-off-by: Joerg Jaspert <joerg@debian.org>

fix OverrideSuite handling

do it in determine_new() (queue.py) instead of do_new() (process_new.py)

Signed-off-by: Torsten Werner <twerner@debian.org>

do not create new db views just improve older ones

Signed-off-by: Torsten Werner <twerner@debian.org>

cruft-report: reimplement 'obsolete source'

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge remote branch 'drkranz/master' into merge

* drkranz/master:
  Adjust regex

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Adjust regex

Match "Archive maintenance timestamp" only if present at the
beginning of the row, thus ignoring bogus messages eventually registered
in the logs.

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

different tags

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Do not break manual rejects when a note exists

Signed-off-by: Joerg Jaspert <joerg@debian.org>

p-n

make sure to commit after we rejected stuff and changed database.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

p-n

call upload.remove_known_changes in a few more places.
also give it our session.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

import-users

delete no longer existing users instead of just needlessly spamming us
with their names

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'twerner/web2' into merge

* twerner/web2:
  web: add link to cruft-report-daily.txt

Signed-off-by: Joerg Jaspert <joerg@debian.org>

web: add link to cruft-report-daily.txt

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge remote branch 'drkranz/master' into merge

* drkranz/master:
  Handle broken pipe while waiting for action

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'bdefreese/barry_update25' into merge

* bdefreese/barry_update25:
  Update update_db to use schema 26
  Fix indentation on commit to be outside for loop but inside try. Add update to db_revision to set it to 26.
  Add dakdb/update26.py to add created and modified fields on all tables and add a trigger to update the modified field on update

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'bdefreese/override' into merge

* bdefreese/override:
  Cnf[...] changed to cnf[...] in override.py

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Handle broken pipe while waiting for action

our_raw_input waits for action, but an exception is raised if user
does not provide it. Loop until a correct action is taken, this way
dak does not horribly crash each time.

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Cnf[...] changed to cnf[...] in override.py

Update update_db to use schema 26

Fix indentation on commit to be outside for loop but inside try. Add update to db_revision to set it to 26.

Add dakdb/update26.py to add created and modified fields on all tables and add a trigger to update the modified field on update

p-n

only remove known changes if reject isnt aborted

Signed-off-by: Joerg Jaspert <joerg@debian.org>

no longer changes, its self.pkg.changes here

Signed-off-by: Joerg Jaspert <joerg@debian.org>

its self.rejects

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'bdefreese/barry_c_d' into merge

* bdefreese/barry_c_d:
  Remove suite validation and use check_distributions instead and move it further up in process

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Remove suite validation and use check_distributions instead and move it further up in process

Merge remote branch 'drkranz/master' into merge

* drkranz/master:
  Move TempPath under Dir option instead of creating a new one
  daklib/holding.py:
  config/debian/dak.conf, dak/transitions.py:

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Move TempPath under Dir option instead of creating a new one

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

daklib/holding.py:
ftptrainees don't have write permissions to holding directory,
so allow them to store packages to be reviewed into TempPath.

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

config/debian/dak.conf, dak/transitions.py:

Move TempPath under its own domain, so it can be used by some other
pieces of dak. Adjust transitions accordingly.

Signed-off-by: Luca Falavigna <dktrkranz@debian.org>

Merge remote branch 'twerner/sponsoremail' into merge

* twerner/sponsoremail:
  queue: fix sponsored uploads

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'twerner/msfl' into merge

* twerner/msfl:
  cruft-report: fix exception in full mode
  cruft-report: disable OBS in daily mode
  cruft-report: ignore duplicate source packages
  cruft-report: always check revdeps on NBS removals

Signed-off-by: Joerg Jaspert <joerg@debian.org>

queue: fix sponsored uploads

cruft-report: fix exception in full mode

Signed-off-by: Torsten Werner <twerner@debian.org>

cruft-report: disable OBS in daily mode

Signed-off-by: Torsten Werner <twerner@debian.org>

cruft-report: ignore duplicate source packages

Signed-off-by: Torsten Werner <twerner@debian.org>

cruft-report: always check revdeps on NBS removals

Signed-off-by: Torsten Werner <twerner@debian.org>

Merge remote branch 'twerner/msfl' into merge

* twerner/msfl:
  Really replace msfl by dominate in dinstall
  NEW

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Really replace msfl by dominate in dinstall

Signed-off-by: Torsten Werner <twerner@debian.org>

NEW

dont fillin automated reject message when doing a manual NEW reject.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'twerner/msfl' into merge

* twerner/msfl:
  log ids of deleted rows to aid debugging
  replace msfl by dominate
  closes #246992

Signed-off-by: Joerg Jaspert <joerg@debian.org>

log ids of deleted rows to aid debugging

Signed-off-by: Torsten Werner <twerner@debian.org>

replace msfl by dominate

Merge remote branch 'twerner/msfl' into merge

* twerner/msfl:
  add dominate.py and db upgrade script #25

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Also allow bz2 on the upload queues elsewhere

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge remote branch 'buxy/pu/debianqueued-fix' into merge

* buxy/pu/debianqueued-fix:
  debianqueued: avoid removing .tar.bz2 files too early

Signed-off-by: Joerg Jaspert <joerg@debian.org>

debianqueued: avoid removing .tar.bz2 files too early

add dominate.py and db upgrade script #25

http://ftp-master.debian.org/wiki/projects/arch-all-tracking/

unchecked

additionally run over newstage/

Signed-off-by: Joerg Jaspert <joerg@debian.org>

p-n
cleanup holding dir

Signed-off-by: Joerg Jaspert <joerg@debian.org>

allow newstage to act like unchecked

Signed-off-by: Joerg Jaspert <joerg@debian.org>

p-n

do commit changes. also run do_accept in do_new

Signed-off-by: Joerg Jaspert <joerg@debian.org>

try emptying the lists another way

Signed-off-by: Mark Hymers <mhy@debian.org>

hack to see if it helps cleanup

Signed-off-by: Mark Hymers <mhy@debian.org>

don't continue after quit

Signed-off-by: Mark Hymers <mhy@debian.org>

clean the pending table even when we quit

Signed-off-by: Mark Hymers <mhy@debian.org>

get field name right

Signed-off-by: Mark Hymers <mhy@debian.org>

don't do the same thing twice, do it once, but correctly

Signed-off-by: Mark Hymers <mhy@debian.org>

and another one

Signed-off-by: Mark Hymers <mhy@debian.org>

another typo fix

Signed-off-by: Mark Hymers <mhy@debian.org>

bad stew

Signed-off-by: Mark Hymers <mhy@debian.org>

syntax fixes

Signed-off-by: Mark Hymers <mhy@debian.org>

fill in the changes files tables when moving to a queue

Signed-off-by: Mark Hymers <mhy@debian.org>

make p-u clear out queue information from the tables

Signed-off-by: Mark Hymers <mhy@debian.org>

argh, use the forward reference, not the back one

Signed-off-by: Mark Hymers <mhy@debian.org>

location id, not an object dufus

Signed-off-by: Mark Hymers <mhy@debian.org>

import routines we need

Signed-off-by: Mark Hymers <mhy@debian.org>

Import poolify

Signed-off-by: Mark Hymers <mhy@debian.org>

attempt to deal with files already in the pool

Signed-off-by: Mark Hymers <mhy@debian.org>

seek and ye shall find

Signed-off-by: Mark Hymers <mhy@debian.org>

use queue path

Signed-off-by: Mark Hymers <mhy@debian.org>

generate shasums if necessary due to old changes format

Signed-off-by: Mark Hymers <mhy@debian.org>

maybe working?

Signed-off-by: Mike O'Connor <stew@dhcp-101.dfw1.kickstart.lan>

correctly importing file hashes now

Signed-off-by: Mike O'Connor <stew@dhcp-101.dfw1.kickstart.lan>

Merge commit 'public/process-new' into process-new

dodadoda

Signed-off-by: Mike O'Connor <stew@ries.debian.org>

import_new_files is close to working, right now it misses on the non-null constraints for sha1sum sha256sum

Signed-off-by: Mike O'Connor <stew@dhcp-101.dfw1.kickstart.lan>

missing comma

Signed-off-by: Mike O'Connor <stew@dhcp-101.dfw1.kickstart.lan>

adding a "import_new_files" script which will import into changes_pending_file from the new queue

Signed-off-by: Mike O'Connor <stew@ries.debian.org>

Yay, only moving files doesnt happen yet

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Halfway. at max.

Signed-off-by: Joerg Jaspert <joerg@debian.org>

call do_new and action

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Add back the update_subst call

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge branch 'process-new' into merge

* process-new:
  p-n
  p-n
  p-n
  p-n

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge commit 'stew/master' into merge

* commit 'stew/master':
  i think i fixed sort_changes
  fix the way we move files
  it at least gets to examine_package now
  attempt to fix process_new

Signed-off-by: Joerg Jaspert <joerg@debian.org>

i think i fixed sort_changes

Signed-off-by: Mike O'Connor <stew@ries.debian.org>

Merge branch 'master' of /home/stew/src/dak

fix the way we move files

Signed-off-by: Mike O'Connor <stew@vireo.org>

it at least gets to examine_package now

attempt to fix process_new

a.) move files back into unchecked.
b.) mark them in the database table

Signed-off-by: Mike O'Connor <stew@vireo.org>

don't be too lax with our LIKE match

Signed-off-by: Mark Hymers <mhy@debian.org>

p-n

no load_dot_dak

Signed-off-by: Joerg Jaspert <joerg@debian.org>

p-n

spelling

Signed-off-by: Joerg Jaspert <joerg@debian.org>

p-n

no longer block p-n

Signed-off-by: Joerg Jaspert <joerg@debian.org>

p-n

remove .dak file code

Signed-off-by: Joerg Jaspert <joerg@debian.org>

Merge branch 'master' of /srv/ftp.debian.org/git/dak