renumbering
[plcapi.git] / migrations / v4-to-v5 / migrate.sql
1 -- Thierry Parmentelat - INRIA
2 -- 
3 -- $Id$
4 --
5 -- this is part of the script to migrate from 4.2 to 5.0
6 -- 
7 -- most of the renamings have taken place already when this script is invoked
8 --
9
10 ----------------------------------------
11 -- views
12 ----------------------------------------
13 -- we want the views to get out of our way, i.e. to drop all views; 
14 -- the views will be reinstantiated later upon loading of planetlab5.sql
15
16 -- this lists all views
17 CREATE OR REPLACE VIEW mgn_all_views AS
18     SELECT c.relname FROM pg_catalog.pg_class c
19        LEFT JOIN pg_catalog.pg_namespace n ON n.oid = c.relnamespace
20           WHERE c.relkind IN ('v','') AND n.nspname in ('public')
21              AND pg_catalog.pg_table_is_visible(c.oid);
22
23 -- shows in logfile
24 select * from mgn_all_views;
25
26 -- this one version almost works, but somehow does not, could not figure why
27 CREATE OR REPLACE FUNCTION mgn_drop_all_views () RETURNS INTEGER AS $$
28     DECLARE 
29         row mgn_all_views%ROWTYPE;
30     BEGIN
31         FOR row IN SELECT * FROM mgn_all_views where relname != 'mgn_all_views' LOOP
32            RAISE NOTICE 'Dropping %',row.relname;
33            EXECUTE 'DROP VIEW ' || row.relname || ' CASCADE' ;
34         END LOOP;
35         RETURN 0;       
36     END;
37 $$ LANGUAGE 'plpgsql';
38
39 -- SELECT mgn_drop_all_views();
40
41 -- so let's have it the boring way
42 DROP VIEW address_address_types CASCADE;
43 DROP VIEW conf_file_nodegroups CASCADE;
44 DROP VIEW conf_file_nodes CASCADE;
45 DROP VIEW dummybox_nodes CASCADE;
46 DROP VIEW event_objects CASCADE;
47 DROP VIEW node_conf_files CASCADE;
48 DROP VIEW node_nodegroups CASCADE;
49 DROP VIEW interfaces_ordered CASCADE;
50 -- caught by some previous cascade -- DROP VIEW node_interfaces CASCADE;
51 DROP VIEW node_pcus CASCADE;
52 DROP VIEW node_slices CASCADE;
53 DROP VIEW node_slices_whitelist CASCADE;
54 DROP VIEW nodegroup_conf_files CASCADE;
55 DROP VIEW nodegroup_nodes CASCADE;
56 DROP VIEW interface_tags CASCADE;
57 DROP VIEW pcu_nodes CASCADE;
58 DROP VIEW pcu_protocol_types CASCADE;
59 DROP VIEW peer_keys CASCADE;
60 DROP VIEW peer_nodes CASCADE;
61 DROP VIEW peer_persons CASCADE;
62 DROP VIEW peer_sites CASCADE;
63 DROP VIEW peer_slices CASCADE;
64 DROP VIEW person_keys CASCADE;
65 DROP VIEW person_roles CASCADE;
66 DROP VIEW person_site_ordered CASCADE;
67 -- caught by some previous cascade -- DROP VIEW person_sites CASCADE;
68 DROP VIEW person_slices CASCADE;
69 DROP VIEW site_addresses CASCADE;
70 DROP VIEW site_nodes CASCADE;
71 DROP VIEW site_pcus CASCADE;
72 DROP VIEW site_persons CASCADE;
73 DROP VIEW site_slices CASCADE;
74 DROP VIEW slice_tags CASCADE;
75 DROP VIEW slice_nodes CASCADE;
76 DROP VIEW slice_persons CASCADE;
77 DROP VIEW slivers CASCADE;
78 -- caught by some previous cascade -- DROP VIEW view_addresses CASCADE;
79 -- caught by some previous cascade -- DROP VIEW view_conf_files CASCADE;
80 -- caught by some previous cascade -- DROP VIEW view_dummyboxes CASCADE;
81 DROP VIEW view_event_objects CASCADE;
82 -- caught by some previous cascade -- DROP VIEW view_events CASCADE;
83 DROP VIEW view_keys CASCADE;
84 -- caught by some previous cascade -- DROP VIEW view_nodegroups CASCADE;
85 DROP VIEW view_interface_tags CASCADE;
86 -- caught by some previous cascade -- DROP VIEW view_interfaces CASCADE;
87 -- caught by some previous cascade -- DROP VIEW view_nodes CASCADE;
88 -- caught by some previous cascade -- DROP VIEW view_pcu_types CASCADE;
89 -- caught by some previous cascade -- DROP VIEW view_pcus CASCADE;
90 -- caught by some previous cascade -- DROP VIEW view_peers CASCADE;
91 -- caught by some previous cascade -- DROP VIEW view_persons CASCADE;
92 DROP VIEW view_sessions CASCADE;
93 -- caught by some previous cascade -- DROP VIEW view_sites CASCADE;
94 DROP VIEW view_slice_tags CASCADE;
95 -- caught by some previous cascade -- DROP VIEW view_slices CASCADE;
96
97 -- shows in logfile
98 select * from mgn_all_views;
99
100 -- cleanup migration utilities
101 drop view mgn_all_views;
102 drop function mgn_drop_all_views ();
103
104 ----------------------------------------
105 -- peers
106 ----------------------------------------
107 ALTER TABLE peers ADD COLUMN shortname TEXT;
108 ALTER TABLE peers ADD COLUMN hrn_root TEXT;
109
110 ----------------------------------------
111 -- nodes
112 ----------------------------------------
113 ALTER TABLE nodes ADD COLUMN node_type TEXT NOT NULL DEFAULT 'regular';
114 ALTER TABLE nodes ADD COLUMN verified boolean NOT NULL DEFAULT false;   -- whether or not the node & pcu are verified
115 ALTER TABLE nodes ADD COLUMN extrainfo TEXT;
116 ALTER TABLE nodes ADD COLUMN run_level TEXT REFERENCES run_levels DEFAULT NULL; -- Node Run Level
117
118 ----------------------------------------
119 -- tag types
120 ----------------------------------------
121 --- merge former slice attribute types and setting attribute types into tagtypes
122
123 ---------- slice attributes
124
125 --- the tag_types table is obtained from the former slice_attribute_types table 
126 ALTER TABLE tag_types RENAME COLUMN name TO tagname;
127 --- former slice_attribute_types had no 'category'
128 ALTER TABLE tag_types ADD COLUMN category TEXT NOT NULL DEFAULT 'slice/legacy';
129
130 --- append in tag_types the contents of former nodenetwork_setting_types
131 INSERT INTO tag_types (tagname,description,min_role_id,category) 
132        SELECT name,description,min_role_id,'interface/legacy' FROM interface_tag_types;
133
134 ---------- interface settings
135
136 --- former nodenetwork_setting_type_id are now renumbered, need to fix interface_tag accordingly
137
138 -- old_index -> new_index relation
139 CREATE OR REPLACE VIEW mgn_setting_renumber AS
140    SELECT 
141       interface_tag_types.interface_tag_type_id AS old_index,   
142       tag_types.tag_type_id AS new_index 
143    FROM 
144       interface_tag_types INNER JOIN tag_types  
145       ON interface_tag_types.name = tag_types.tagname;
146
147 -- need to temporarily drop constraint on interface_tag_type_id
148 ALTER TABLE interface_tag DROP CONSTRAINT interface_tag_interface_tag_type_id_fkey;
149
150 -- do the transcoding
151 UPDATE interface_tag 
152    SET interface_tag_type_id = 
153       (select new_index from mgn_setting_renumber where old_index=interface_tag_type_id);
154
155 -- alter column name to reflect change
156 ALTER TABLE interface_tag RENAME interface_tag_type_id TO tag_type_id;
157
158 -- add constraint again
159 ALTER TABLE interface_tag ADD CONSTRAINT interface_tag_tag_type_id_fkey 
160     FOREIGN KEY (tag_type_id) references tag_types(tag_type_id) ;
161
162 -- drop former interface_tag_types altogether
163 drop view mgn_setting_renumber;
164 drop table interface_tag_types;
165
166 ---------- node tags
167
168 CREATE TABLE node_tag (
169     node_tag_id serial PRIMARY KEY,                     -- ID
170     node_id integer REFERENCES nodes NOT NULL,          -- node id
171     tag_type_id integer REFERENCES tag_types,           -- tag type id
172     value text                                          -- value attached
173 ) WITH OIDS;
174
175
176 ----------------------------------------
177 -- ilinks
178 ----------------------------------------
179 CREATE TABLE ilink (
180        ilink_id serial PRIMARY KEY,                             -- id
181        tag_type_id integer REFERENCES tag_types,                -- id of the tag type
182        src_interface_id integer REFERENCES interfaces not NULL, -- id of src interface
183        dst_interface_id integer REFERENCES interfaces NOT NULL, -- id of dst interface
184        value text                                               -- optional value on the link
185 ) WITH OIDS;
186
187 ----------------------------------------
188 -- nodegroups
189 ----------------------------------------
190
191 ---------- nodegroups table - start
192 -- nodegroup_id is preserved for conf_files and other references
193 -- former nodegroups table was (nodegroup_id,name,description)
194 -- new table is now            (nodegroup_id, groupname, tag_type_id, value)
195
196 -- rename column
197 ALTER TABLE nodegroups RENAME name TO groupname;
198
199 ---------- create missing tag types
200 -- change default for the entries about to be created
201 ALTER TABLE tag_types ALTER COLUMN category SET DEFAULT 'nodegroup/migration';
202
203 -- do it
204 INSERT INTO tag_types (tagname)
205    SELECT DISTINCT tagname FROM mgn_site_nodegroup 
206       WHERE tagname NOT IN (SELECT tagname from tag_types);
207
208 -- xxx drop description in former nodegroups for now, 
209 -- but could have been attached to newly created tag types first
210 ALTER TABLE nodegroups DROP COLUMN description;
211
212 ---------- set the right tags so as to recover former nodegroups
213 INSERT INTO node_tag (node_id, tag_type_id, value)
214    SELECT node_id, tag_type_id, value FROM
215       nodegroup_node LEFT JOIN nodegroups USING (nodegroup_id) 
216          INNER JOIN mgn_site_nodegroup USING (groupname)
217             LEFT JOIN tag_types using (tagname); 
218
219 ---------- nodegroups table - conclusion
220 ALTER TABLE nodegroups ADD COLUMN tag_type_id INTEGER;
221 ALTER TABLE nodegroups ADD COLUMN value TEXT;
222
223 CREATE OR REPLACE VIEW mgn_nodegroups AS
224    SELECT groupname, tag_types.tag_type_id, mgn_site_nodegroup.value 
225       FROM nodegroups INNER JOIN mgn_site_nodegroup USING (groupname) 
226          INNER JOIN tag_types USING (tagname);
227
228 UPDATE nodegroups SET tag_type_id = (SELECT tag_type_id FROM mgn_nodegroups WHERE nodegroups.groupname=mgn_nodegroups.groupname);
229 UPDATE nodegroups SET value = (SELECT value FROM mgn_nodegroups WHERE nodegroups.groupname=mgn_nodegroups.groupname);
230
231 -- install corresponding constraints
232 ALTER TABLE nodegroups ADD CONSTRAINT nodegroups_tag_type_id_fkey
233    FOREIGN KEY (tag_type_id) REFERENCES tag_types (tag_type_id);  
234
235 --- change default now that the column is filled
236 ALTER TABLE tag_types ALTER COLUMN category SET DEFAULT 'general';
237
238 -- cleanup the nodegroup area
239 drop view mgn_nodegroups;
240 drop table mgn_site_nodegroup;
241 drop table nodegroup_node;
242
243 ----------------------------------------
244 -- run levels
245 ----------------------------------------
246 CREATE TABLE run_levels  (
247     run_level text PRIMARY KEY
248 ) WITH OIDS;
249 INSERT INTO run_levels  (run_level) VALUES ('boot');
250 INSERT INTO run_levels  (run_level) VALUES ('safeboot');
251 INSERT INTO run_levels  (run_level) VALUES ('failboot');
252 INSERT INTO run_levels  (run_level) VALUES ('reinstall');
253
254 ----------------------------------------
255 -- boot states
256 ----------------------------------------
257 -- create new ones
258 INSERT INTO boot_states (boot_state) VALUES ('safeboot');
259 INSERT INTO boot_states (boot_state) VALUES ('failboot');
260 INSERT INTO boot_states (boot_state) VALUES ('disabled');
261 INSERT INTO boot_states (boot_state) VALUES ('reinstall');
262
263 -- map old ones
264 -- b/c boot_states are declared by users not reported by node.
265 UPDATE nodes SET boot_state='safeboot' WHERE boot_state='dbg';  
266 UPDATE nodes SET boot_state='safeboot' WHERE boot_state='diag';
267 UPDATE nodes SET boot_state='disabled' WHERE boot_state='disable';
268 UPDATE nodes SET boot_state='reinstall' WHERE boot_state='inst';
269 UPDATE nodes SET boot_state='reinstall' WHERE boot_state='rins';
270 UPDATE nodes SET boot_state='reinstall' WHERE boot_state='new';
271 UPDATE nodes SET boot_state='reinstall' WHERE boot_state='rcnf';
272
273 -- delete old ones
274 DELETE FROM boot_states WHERE boot_state='dbg';
275 DELETE FROM boot_states WHERE boot_state='diag';
276 DELETE FROM boot_states WHERE boot_state='disable';
277 DELETE FROM boot_states WHERE boot_state='install';
278 DELETE FROM boot_states WHERE boot_state='inst';
279 DELETE FROM boot_states WHERE boot_state='rins';
280 DELETE FROM boot_states WHERE boot_state='new';
281 DELETE FROM boot_states WHERE boot_state='rcnf';
282
283 -- ----------------------------------------
284 -- -- debug/information : display current constraints
285 -- ----------------------------------------
286 -- CREATE OR REPLACE VIEW mgn_all_constraints AS
287 --     SELECT * FROM pg_catalog.pg_constraint c
288 --        LEFT JOIN pg_catalog.pg_namespace n ON n.oid = c.connamespace
289 --        LEFT JOIN pg_catalog.pg_class t ON t.oid = c.conrelid
290 --           WHERE c.contype IN ('c','f','p','u') AND n.nspname in ('public')
291 --           AND pg_catalog.pg_table_is_visible(c.oid);
292 -- 
293 -- select * from mgn_all_constraints;
294 --
295 -- drop view mgn_all_constraints;
296
297 --- versioning (plc_db_version): ignore for now, so we keep both entries (v4 and v5)