nodes have a node_type (NodeType object and api calls still missing)
[plcapi.git] / migrations / v4-to-v5 / migrate.sql
1 -- Thierry Parmentelat - INRIA
2 -- 
3 -- $Id$
4 --
5 -- this is part of the script to migrate from 4.2 to 5.0
6 -- 
7 -- most of the renamings have taken place already when this script is invoked
8 --
9
10 ----------------------------------------
11 -- views
12 ----------------------------------------
13 -- we want the views to get out of our way, i.e. to drop all views; 
14 -- the views will be reinstantiated later upon loading of planetlab5.sql
15
16 -- this lists all views
17 CREATE OR REPLACE VIEW mgn_all_views AS
18     SELECT c.relname FROM pg_catalog.pg_class c
19        LEFT JOIN pg_catalog.pg_namespace n ON n.oid = c.relnamespace
20           WHERE c.relkind IN ('v','') AND n.nspname in ('public')
21              AND pg_catalog.pg_table_is_visible(c.oid);
22
23 -- shows in logfile
24 select * from mgn_all_views;
25
26 -- this one version almost works, but somehow does not, could not figure why
27 CREATE OR REPLACE FUNCTION mgn_drop_all_views () RETURNS INTEGER AS $$
28     DECLARE 
29         row mgn_all_views%ROWTYPE;
30     BEGIN
31         FOR row IN SELECT * FROM mgn_all_views where relname != 'mgn_all_views' LOOP
32            RAISE NOTICE 'Dropping %',row.relname;
33            EXECUTE 'DROP VIEW ' || row.relname || ' CASCADE' ;
34         END LOOP;
35         RETURN 0;       
36     END;
37 $$ LANGUAGE 'plpgsql';
38
39 -- SELECT mgn_drop_all_views();
40
41 -- so let's have it the boring way
42 DROP VIEW address_address_types CASCADE;
43 DROP VIEW conf_file_nodegroups CASCADE;
44 DROP VIEW conf_file_nodes CASCADE;
45 DROP VIEW dummybox_nodes CASCADE;
46 DROP VIEW event_objects CASCADE;
47 DROP VIEW node_conf_files CASCADE;
48 DROP VIEW node_nodegroups CASCADE;
49 DROP VIEW interfaces_ordered CASCADE;
50 -- caught by some previous cascade -- DROP VIEW node_interfaces CASCADE;
51 DROP VIEW node_pcus CASCADE;
52 DROP VIEW node_slices CASCADE;
53 DROP VIEW node_slices_whitelist CASCADE;
54 DROP VIEW nodegroup_conf_files CASCADE;
55 DROP VIEW nodegroup_nodes CASCADE;
56 DROP VIEW interface_tags CASCADE;
57 DROP VIEW pcu_nodes CASCADE;
58 DROP VIEW pcu_protocol_types CASCADE;
59 DROP VIEW peer_keys CASCADE;
60 DROP VIEW peer_nodes CASCADE;
61 DROP VIEW peer_persons CASCADE;
62 DROP VIEW peer_sites CASCADE;
63 DROP VIEW peer_slices CASCADE;
64 DROP VIEW person_keys CASCADE;
65 DROP VIEW person_roles CASCADE;
66 DROP VIEW person_site_ordered CASCADE;
67 -- caught by some previous cascade -- DROP VIEW person_sites CASCADE;
68 DROP VIEW person_slices CASCADE;
69 DROP VIEW site_addresses CASCADE;
70 DROP VIEW site_nodes CASCADE;
71 DROP VIEW site_pcus CASCADE;
72 DROP VIEW site_persons CASCADE;
73 DROP VIEW site_slices CASCADE;
74 DROP VIEW slice_tags CASCADE;
75 DROP VIEW slice_nodes CASCADE;
76 DROP VIEW slice_persons CASCADE;
77 DROP VIEW slivers CASCADE;
78 -- caught by some previous cascade -- DROP VIEW view_addresses CASCADE;
79 -- caught by some previous cascade -- DROP VIEW view_conf_files CASCADE;
80 -- caught by some previous cascade -- DROP VIEW view_dummyboxes CASCADE;
81 DROP VIEW view_event_objects CASCADE;
82 -- caught by some previous cascade -- DROP VIEW view_events CASCADE;
83 DROP VIEW view_keys CASCADE;
84 -- caught by some previous cascade -- DROP VIEW view_nodegroups CASCADE;
85 DROP VIEW view_interface_tags CASCADE;
86 -- caught by some previous cascade -- DROP VIEW view_interfaces CASCADE;
87 -- caught by some previous cascade -- DROP VIEW view_nodes CASCADE;
88 -- caught by some previous cascade -- DROP VIEW view_pcu_types CASCADE;
89 -- caught by some previous cascade -- DROP VIEW view_pcus CASCADE;
90 -- caught by some previous cascade -- DROP VIEW view_peers CASCADE;
91 -- caught by some previous cascade -- DROP VIEW view_persons CASCADE;
92 DROP VIEW view_sessions CASCADE;
93 -- caught by some previous cascade -- DROP VIEW view_sites CASCADE;
94 DROP VIEW view_slice_tags CASCADE;
95 -- caught by some previous cascade -- DROP VIEW view_slices CASCADE;
96
97 -- shows in logfile
98 select * from mgn_all_views;
99
100 -- cleanup migration utilities
101 drop view mgn_all_views;
102 drop function mgn_drop_all_views ();
103
104 ----------------------------------------
105 -- nodes
106 ----------------------------------------
107 ALTER TABLE nodes ADD COLUMN node_type TEXT NOT NULL DEFAULT 'regular';
108
109 ----------------------------------------
110 -- tag types
111 ----------------------------------------
112 --- merge former slice attribute types and setting attribute types into tagtypes
113
114 ---------- slice attributes
115
116 --- the tag_types table is obtained from the former slice_attribute_types table 
117 ALTER TABLE tag_types RENAME COLUMN name TO tagname;
118 --- former slice_attribute_types had no 'category'
119 ALTER TABLE tag_types ADD COLUMN category TEXT NOT NULL DEFAULT 'slice/legacy';
120
121 --- append in tag_types the contents of nodenetwork_setting_types
122 INSERT INTO tag_types (tagname,description,min_role_id,category) 
123        SELECT name,description,min_role_id,'interface/legacy' FROM interface_tag_types;
124
125 ---------- interface settings
126
127 --- former nodenetwork_setting_type_id are now renumbered, need to fix interface_tag accordingly
128
129 -- old_index -> new_index relation
130 CREATE OR REPLACE VIEW mgn_setting_renumber AS
131    SELECT 
132       interface_tag_types.interface_tag_type_id AS old_index,   
133       tag_types.tag_type_id AS new_index 
134    FROM 
135       interface_tag_types INNER JOIN tag_types  
136       ON interface_tag_types.name = tag_types.tagname;
137
138 -- need to temporarily drop constraint on interface_tag_type_id
139 ALTER TABLE interface_tag DROP CONSTRAINT interface_tag_interface_tag_type_id_fkey;
140
141 -- do the transcoding
142 UPDATE interface_tag 
143    SET interface_tag_type_id = 
144       (select new_index from mgn_setting_renumber where old_index=interface_tag_type_id);
145
146 -- alter column name to reflect change
147 ALTER TABLE interface_tag RENAME interface_tag_type_id TO tag_type_id;
148
149 -- add constraint again
150 ALTER TABLE interface_tag ADD CONSTRAINT interface_tag_tag_type_id_fkey 
151     FOREIGN KEY (tag_type_id) references tag_types(tag_type_id) ;
152
153 -- drop former interface_tag_types altogether
154 drop view mgn_setting_renumber;
155 drop table interface_tag_types;
156
157 ---------- node tags
158
159 CREATE TABLE node_tag (
160     node_tag_id serial PRIMARY KEY,                     -- ID
161     node_id integer REFERENCES nodes NOT NULL,          -- node id
162     tag_type_id integer REFERENCES tag_types,           -- tag type id
163     tagvalue text                                       -- value attached
164 ) WITH OIDS;
165
166
167 ----------------------------------------
168 -- ilinks
169 ----------------------------------------
170 CREATE TABLE ilink (
171        ilink_id serial PRIMARY KEY,                             -- id
172        tag_type_id integer REFERENCES tag_types,                -- id of the tag type
173        src_interface_id integer REFERENCES interfaces not NULL, -- id of src interface
174        dst_interface_id integer REFERENCES interfaces NOT NULL, -- id of dst interface
175        value text                                               -- optional value on the link
176 ) WITH OIDS;
177
178 ----------------------------------------
179 -- nodegroups
180 ----------------------------------------
181
182 ---------- nodegroups table - start
183 -- nodegroup_id is preserved for conf_files and other references
184 -- former nodegroups table was (nodegroup_id,name,description)
185 -- new table is now            (nodegroup_id, groupname, tag_type_id, tagvalue)
186
187 -- rename column
188 ALTER TABLE nodegroups RENAME name TO groupname;
189
190 ---------- create missing tag types
191 -- change default for the entries about to be created
192 ALTER TABLE tag_types ALTER COLUMN category SET DEFAULT 'nodegroup/migration';
193
194 -- do it
195 INSERT INTO tag_types (tagname)
196    SELECT DISTINCT tagname FROM mgn_site_nodegroup 
197       WHERE tagname NOT IN (SELECT tagname from tag_types);
198
199 -- xxx drop description in former nodegroups for now, 
200 -- but could have been attached to newly created tag types first
201 ALTER TABLE nodegroups DROP COLUMN description;
202
203 ---------- set the right tags so as to recover former nodegroups
204 INSERT INTO node_tag (node_id, tag_type_id, tagvalue)
205    SELECT node_id, tag_type_id, tagvalue FROM
206       nodegroup_node LEFT JOIN nodegroups USING (nodegroup_id) 
207          INNER JOIN mgn_site_nodegroup USING (groupname)
208             LEFT JOIN tag_types using (tagname); 
209
210 ---------- nodegroups table - conclusion
211 ALTER TABLE nodegroups ADD COLUMN tag_type_id INTEGER;
212 ALTER TABLE nodegroups ADD COLUMN tagvalue TEXT;
213
214 CREATE OR REPLACE VIEW mgn_nodegroups AS
215    SELECT groupname, tag_types.tag_type_id, mgn_site_nodegroup.tagvalue 
216       FROM nodegroups INNER JOIN mgn_site_nodegroup USING (groupname) 
217          INNER JOIN tag_types USING (tagname);
218
219 UPDATE nodegroups SET tag_type_id = (SELECT tag_type_id FROM mgn_nodegroups WHERE nodegroups.groupname=mgn_nodegroups.groupname);
220 UPDATE nodegroups SET tagvalue = (SELECT tagvalue FROM mgn_nodegroups WHERE nodegroups.groupname=mgn_nodegroups.groupname);
221
222 -- install corresponding constraints
223 ALTER TABLE nodegroups ADD CONSTRAINT nodegroups_tag_type_id_fkey
224    FOREIGN KEY (tag_type_id) REFERENCES tag_types (tag_type_id);  
225
226 --- change default now that the column is filled
227 ALTER TABLE tag_types ALTER COLUMN category SET DEFAULT 'general';
228
229 -- cleanup the nodegroup area
230 drop view mgn_nodegroups;
231 drop table mgn_site_nodegroup;
232 drop table nodegroup_node;
233
234 ----------------------------------------
235 -- boot states
236 ----------------------------------------
237 -- create new ones
238 INSERT INTO boot_states (boot_state) VALUES ('safeboot');
239 INSERT INTO boot_states (boot_state) VALUES ('failboot');
240 INSERT INTO boot_states (boot_state) VALUES ('disabled');
241 INSERT INTO boot_states (boot_state) VALUES ('install');
242 INSERT INTO boot_states (boot_state) VALUES ('reinstall');
243
244 -- map old ones
245 UPDATE nodes SET boot_state='failboot' WHERE boot_state='dbg';
246 UPDATE nodes SET boot_state='safeboot' WHERE boot_state='diag';
247 UPDATE nodes SET boot_state='disabled' WHERE boot_state='disable';
248 UPDATE nodes SET boot_state='install' WHERE boot_state='inst';
249 UPDATE nodes SET boot_state='reinstall' WHERE boot_state='rins';
250 UPDATE nodes SET boot_state='reinstall' WHERE boot_state='new';
251 UPDATE nodes SET boot_state='failboot' WHERE boot_state='rcnf';
252
253 -- delete old ones
254 DELETE FROM boot_states WHERE boot_state='dbg';
255 DELETE FROM boot_states WHERE boot_state='diag';
256 DELETE FROM boot_states WHERE boot_state='disable';
257 DELETE FROM boot_states WHERE boot_state='inst';
258 DELETE FROM boot_states WHERE boot_state='rins';
259 DELETE FROM boot_states WHERE boot_state='new';
260 DELETE FROM boot_states WHERE boot_state='rcnf';
261
262 -- ----------------------------------------
263 -- -- debug/information : display current constraints
264 -- ----------------------------------------
265 -- CREATE OR REPLACE VIEW mgn_all_constraints AS
266 --     SELECT * FROM pg_catalog.pg_constraint c
267 --        LEFT JOIN pg_catalog.pg_namespace n ON n.oid = c.connamespace
268 --        LEFT JOIN pg_catalog.pg_class t ON t.oid = c.conrelid
269 --           WHERE c.contype IN ('c','f','p','u') AND n.nspname in ('public')
270 --           AND pg_catalog.pg_table_is_visible(c.oid);
271 -- 
272 -- select * from mgn_all_constraints;
273 --
274 -- drop view mgn_all_constraints;
275
276 --- versioning (plc_db_version): ignore for now, so we keep both entries (v4 and v5)