]> pd.if.org Git - zpackage/blobdiff - db.sql
add program to generate a hash of package contents
[zpackage] / db.sql
diff --git a/db.sql b/db.sql
index 816cbe55e6e5f43562cffb693160c6cc9525a182..d74803da8800e5115cacc3f7e3c8cd6e7277f931 100644 (file)
--- a/db.sql
+++ b/db.sql
@@ -33,7 +33,7 @@ create table packages (
        packager        text,
        build_time      integer default (strftime('%s', 'now')),
        install_time    integer,
-       checksum        text, -- checksum of package contents.  null for incompleted packages
+       hash    text, -- see integ.c for package hash
        primary key (package,version,release),
        check (typeof(package) = 'text'),
        check (typeof(version) = 'text'),
@@ -52,10 +52,36 @@ create table packages (
 without rowid
 ;
 
+create index package_status_index on packages (status);
+create index package_package_index on packages (package);
+
 create view packages_pkgid as
 select printf('%s-%s-%s', package, version, release) as pkgid, *
 from packages;
 
+create trigger packages_update_trigger instead of
+update on packages_pkgid
+begin
+       update packages
+       set package = NEW.package,
+       version = NEW.version,
+       release = NEW.release,
+       description = NEW.description,
+       architecture = NEW.architecture,
+       url = NEW.url,
+       status = NEW.status,
+       licenses = NEW.licenses,
+       packager = NEW.packager,
+       build_time = NEW.build_time,
+       install_time = NEW.install_time,
+       hash = NEW.hash
+       where package = OLD.package
+       and version = OLD.version
+       and release = OLD.release
+       ;
+end
+;
+
 -- handle package status history with a logging trigger.
 create trigger logpkgstatus after update of status on packages
 begin insert into zpmlog (action,target,info)
@@ -71,17 +97,9 @@ create table packagetags (
        tag     text,
        set_time integer default (strftime('%s', 'now')),
        primary key (package,version,release,tag),
-       foreign key (package,version,release) references packages (package,version,release) on delete cascade
+       foreign key (package,version,release) references packages (package,version,release) on delete cascade on update cascade
 );
 
--- packagefile hash is columns as text, joined with null bytes, then
--- sha256 sum of that
--- package checksum is package columns as text, joined with null bytes,
--- other than the checksum and install_time column
--- then that hashed.  finally, that hash, plus the ascii sorted
--- hashes of the package files all joined with newlines, hashed.
--- really don't like this.
-
 -- files contained in a package
 create table packagefiles (
        -- package id triple
@@ -111,25 +129,66 @@ create table packagefiles (
        hash    text, -- null if no actual content, i.e. anything but a regular file
        mtime   integer, -- seconds since epoch, finer resolution probably not needed
        primary key (package,version,release,path),
-       foreign key (package,version,release) references packages (package,version,release) on delete cascade,
+       foreign key (package,version,release) references packages (package,version,release) on delete cascade on update cascade,
        check (not (filetype = 'l' and target is null)),
        check (not (filetype = 'r' and hash is null)),
-       check (not (filetype = 'c' and (devmajor is null or devminor is null)))
+       check (not (filetype = 'c' and (devmajor is null or devminor is null))),
+       check (not (filetype = 'b' and (devmajor is null or devminor is null))),
+       check (configuration = 0 or configuration = 1)
 )
 without rowid
 ;
+create index packagefile_package_index on packagefiles (package);
+create index packagefile_path_index on packagefiles (path);
+create index packagefile_hash_index on packagefiles (hash);
 
 create view packagefiles_pkgid as
-select printf('%s-%s-%s', package, version, release) as pkgid, *
+select printf('%s-%s-%s', package, version, release) as pkgid, *,
+printf('%s:%o:%s:%s', filetype, mode, username, groupname) as mds
 from packagefiles
 ;
 
+create trigger packagefiles_update_trigger instead of
+update on packagefiles_pkgid
+begin
+       update packagefiles
+       set package = NEW.package,
+       version = NEW.version,
+       release = NEW.release,
+       path = NEW.path,
+       mode = NEW.mode,
+       username = NEW.username,
+       groupname = NEW.groupname,
+       uid = NEW.uid,
+       gid = NEW.gid,
+       configuration = NEW.configuration,
+       filetype = NEW.filetype,
+       target = NEW.target,
+       devmajor = NEW.devmajor,
+       devminor = NEW.devminor,
+       hash = NEW.hash,
+       mtime = NEW.mtime
+       where package = OLD.package
+       and version = OLD.version
+       and release = OLD.release
+       and path = OLD.path
+       ;
+end
+;
+
 create view installed_ref_count as
 select I.path, count(*) as refcount
 from installedfiles I
 group by I.path
 ;
 
+create view sync_status_ref_count as
+select path, status, count(*) as refcount
+from packagefiles_status
+where status in ('installed', 'installing', 'removing')
+group by path, status
+;
+
 create view packagefiles_status as
 select P.status, PF.*
 from packagefiles_pkgid PF
@@ -142,6 +201,7 @@ where status = 'installed'
 ;
 
 create view install_status as
+
 select 'new' as op, PN.*
 from packagefiles_status PN
 left join installed_ref_count RC on RC.path = PN.path
@@ -156,6 +216,7 @@ inner join installedfiles PI on PI.path = PN.path and PI.package = PN.package
 left join installed_ref_count RC on RC.path = PN.path
 where RC.refcount = 1
 and PN.status = 'installing'
+and PI.hash is not PN.hash
 
 union all
 
@@ -165,13 +226,23 @@ inner join installedfiles PI on PI.path = PN.path and PI.package != PN.package
 where PN.status = 'installing'
 
 union all
-
 select 'remove' as op, PI.*
 from installedfiles PI
 left join packagefiles_status PN
     on PI.path = PN.path and PI.package = PN.package
+       and PI.pkgid != PN.pkgid
 where PN.path is null
-and PN.status = 'installing'
+and PI.package in (select package from packages where status = 'installing')
+
+union all
+-- remove files in removing, but not installing
+select distinct 'remove' as op, PR.*
+from packagefiles_status PR
+left join packagefiles_status PN
+on PR.path = PN.path
+and PR.pkgid != PN.pkgid and PN.status in ('installing', 'installed')
+where PN.path is null
+and PR.status = 'removing'
 ;
 
 create table pathtags (
@@ -182,27 +253,20 @@ create table pathtags (
 
        path    text, -- filesystem path
        tag     text,
-       primary key (package,version,release,path,tag)
+       primary key (package,version,release,path,tag),
+       foreign key (package,version,release,path)
+       references packagefiles on delete cascade on update cascade
 )
 without rowid
 ;
 
-create table elfinfo (
-       file    text primary key, -- hash of blob
-       elftype text,
-       foreign key (file) references files on delete cascade
-)
-without rowid
-;
-
-create table elfdeps (
-       file    text,
-       soname  text,
-       dependency text,
-       primary key (file, soname, dependency),
-       foreign key (file) references files on delete cascade
-)
-without rowid
+create view elfdeps as
+select PF.pkgid, PF.status, PF.path, N.needed as needs,
+PL.path as library, PL.pkgid provider, PL.status as library_status
+from packagefiles_status PF
+join elfneeded N on N.file = PF.hash
+left join elflibraries L on N.needed = L.soname
+left join packagefiles_status PL on PL.hash = L.file
 ;
 
 -- TODO just elf information?
@@ -230,7 +294,7 @@ create table scripts (
        stage   text,
        hash    text,
        primary key (package,version,release,stage),
-       foreign key (package,version,release) references packages (package,version,release) on delete cascade
+       foreign key (package,version,release) references packages (package,version,release) on delete cascade on update cascade
 );
 
 create view scripts_pkgid as
@@ -243,12 +307,11 @@ create table packagedeps (
        package text,
        version text,
        release integer,
-       required        text, -- package name
-       -- following can be null for not checked
-       minversion      text,
-       minrelease      integer,
-       maxversion      text,
-       maxrelease      integer
+       requires text, -- package name (only)
+       minimum text,
+       maximum text,
+       primary key (package,version,release,package),
+       foreign key (package,version,release) references packages (package,version,release) on delete cascade on update cascade
 );
 
 -- capability labels
@@ -317,4 +380,151 @@ create table packagesource (
        repository      text references repository
 );
 
+create view syncconflicts as
+with
+preserved as (
+       select BASE.*, 'preserved' as rstatus
+       from packagefiles_status BASE
+       join elflibraries EL on EL.file = BASE.hash
+       where
+       BASE.status in ('removed', 'updated')
+       and BASE.hash in (select hash from packagefiles_status where
+               status in ('installed'))
+),
+syncstatus as (
+       select distinct BASE.*,
+               case when P.status = 'installing' and BASE.status = 'installed'
+               then 'updating'
+       when BASE.status in ('removed','updated')
+               and BASE.path in (select path from preserved) then
+               'preserved'
+       else
+               BASE.status
+       end as rstatus
+       from packagefiles_status BASE
+       left join packages P on P.package = BASE.package
+               and BASE.status in ('installed', 'removing')
+               and P.status = 'installing'
+),
+-- metadata different
+md_conflict as (
+       select path, count(distinct mds) as mdcount,
+               count(distinct hash) as hashcount
+       from syncstatus SS
+       where SS.rstatus in ('installing', 'installed')
+       group by path
+       having (count(distinct mds) > 1 or count(distinct hash) > 1)
+)
+select BASE.*, 'hash' as conflict
+from syncstatus BASE
+where path in (select path from md_conflict where hashcount > 1)
+union
+select BASE.*, 'md' as conflict
+from syncstatus BASE
+where path in (select path from md_conflict where mdcount > 1)
+;
+
+create view syncinfo as
+with
+preserved as (
+       select BASE.*, 'preserved' as rstatus
+       from packagefiles_status BASE
+       join elflibraries EL on EL.file = BASE.hash
+       where
+       BASE.status in ('removed', 'updated')
+       and BASE.hash in (select hash from packagefiles_status where
+               status in ('installed'))
+),
+syncstatus as (
+       select distinct BASE.*,
+               case when P.status = 'installing' and BASE.status = 'installed'
+               then 'updating'
+       when BASE.status in ('removed','updated')
+               and BASE.path in (select path from preserved) then
+               'preserved'
+       else
+               BASE.status
+       end as rstatus
+       from packagefiles_status BASE
+       left join packages P on P.package = BASE.package
+               and BASE.status in ('installed', 'removing')
+               and P.status = 'installing'
+),
+-- new file: in installing, not in installed or updating or removing
+newfiles as (
+       select distinct
+               path,username,uid,groupname,gid,mode,filetype,mtime,hash,
+       target,devminor,devmajor
+       from syncstatus SS
+       where path not in (select path from syncstatus where
+               rstatus in ('installed', 'updating', 'removing')
+       )
+       and rstatus in ('installing')
+),
+-- modified: retained, but with different metadata
+modified as (
+       select distinct
+       SS.path, 
+       SS.username,
+               SS.uid, SS.groupname, SS.gid, SS.mode,
+       SS.filetype, SS.mtime, SS.hash, SS.target, SS.devminor, SS.devmajor
+       from syncstatus SS
+       join syncstatus OS
+       on SS.path = OS.path and SS.pkgid is not OS.pkgid
+       -- preserved?
+       and OS.rstatus in ('installed','updating','removing')
+       and (SS.mds is not OS.mds or SS.hash is not OS.hash)
+       where
+       SS.rstatus in ('installing')
+),
+-- preserve: libraries needed by something in installed or installing
+needed as (
+       select distinct
+               ED.library
+       from elfdeps ED
+       where status in ('installed', 'installing')
+       and library is not null
+),
+preserve as (
+       select distinct
+               path,username,uid,groupname,gid,mode,filetype,mtime,hash,
+       target,devminor,devmajor
+       from syncstatus SS
+       where path in (select library from needed)
+       and SS.rstatus in ('removing', 'removed')
+),
+-- remove: cur, not preserved, not in final set
+remove as (
+       select distinct
+               path,username,uid,groupname,gid,mode,filetype,mtime,hash,
+       target,devminor,devmajor
+       from syncstatus SS
+       where path not in (
+               select path from syncstatus where
+               rstatus in ('installed', 'installing')
+       )
+       and path not in (select path from preserve)
+       and rstatus in ('removing', 'updating')
+),
+-- expired: libraries that had been preserved, but aren't needed now
+expired as (
+       select distinct
+               path,username,uid,groupname,gid,mode,filetype,mtime,hash,
+       target,devminor,devmajor
+       from syncstatus BASE
+       where hash in (select file from elflibraries where file is not null)
+       and path not in (select path from preserve)
+       and rstatus in ('removed','updated')
+)
+select 'update' as op, * from modified
+union
+select 'remove' as op, * from remove
+union
+select 'obsolete' as op, * from expired
+union
+select 'new' as op, * from newfiles
+union
+select 'preserve' as op, * from preserve
+;
+
 commit;