manifold/static/js/manifold.js

   1 // utilities
   2 function debug_dict_keys (msg, o) {
   3     var keys=[];
   4     for (var k in o) keys.push(k);
   5     messages.debug ("debug_dict_keys: " + msg + " keys= " + keys);
   6 }
   7 function debug_dict (msg, o) {
   8     for (var k in o) messages.debug ("debug_dict: " + msg + " [" + k + "]=" + o[k]);
   9 }
  10 function debug_value (msg, value) {
  11     messages.debug ("debug_value: " + msg + " " + value);
  12 }
  13 function debug_query (msg, query) {
  14     if (query === undefined) messages.debug ("debug_query: " + msg + " -> undefined");
  15     else if (query == null) messages.debug ("debug_query: " + msg + " -> null");
  16     else if ('query_uuid' in query) messages.debug ("debug_query: " + msg + query.__repr());
  17     else messages.debug ("debug_query: " + msg + " query= " + query);
  18 }
  19
  20 // http://javascriptweblog.wordpress.com/2011/08/08/fixing-the-javascript-typeof-operator/
  21 Object.toType = (function toType(global) {
  22   return function(obj) {
  23     if (obj === global) {
  24       return "global";
  25     }
  26     return ({}).toString.call(obj).match(/\s([a-z|A-Z]+)/)[1].toLowerCase();
  27   }
  28 })(this);
  29
  30 /* ------------------------------------------------------------ */
  31
  32 // Constants that should be somehow moved to a plugin.js file
  33 var FILTER_ADDED   = 1;
  34 var FILTER_REMOVED = 2;
  35 var CLEAR_FILTERS  = 3;
  36 var FIELD_ADDED    = 4;
  37 var FIELD_REMOVED  = 5;
  38 var CLEAR_FIELDS   = 6;
  39 var NEW_RECORD     = 7;
  40 var CLEAR_RECORDS  = 8;
  41 var FIELD_STATE_CHANGED = 9;
  42
  43 var IN_PROGRESS    = 101;
  44 var DONE           = 102;
  45
  46 /* Update requests related to subqueries */
  47 var SET_ADD        = 201;
  48 var SET_REMOVED    = 202;
  49
  50 // request
  51 var FIELD_REQUEST_CHANGE  = 301;
  52 var FIELD_REQUEST_ADD     = 302;
  53 var FIELD_REQUEST_REMOVE  = 303;
  54 var FIELD_REQUEST_ADD_RESET = 304;
  55 var FIELD_REQUEST_REMOVE_RESET = 305;
  56 // status
  57 var FIELD_REQUEST_PENDING = 401;
  58 var FIELD_REQUEST_SUCCESS = 402;
  59 var FIELD_REQUEST_FAILURE = 403;
  60
  61 /* Query status */
  62 var STATUS_NONE               = 500; // Query has not been started yet
  63 var STATUS_GET_IN_PROGRESS    = 501; // Query has been sent, no result has been received
  64 var STATUS_GET_RECEIVED       = 502; // Success
  65 var STATUS_GET_ERROR          = 503; // Error
  66 var STATUS_UPDATE_PENDING     = 504;
  67 var STATUS_UPDATE_IN_PROGRESS = 505;
  68 var STATUS_UPDATE_RECEIVED    = 506;
  69 var STATUS_UPDATE_ERROR       = 507;
  70
  71 /* Requests for query cycle */
  72 var RUN_UPDATE     = 601;
  73
  74 /* MANIFOLD types */
  75 var TYPE_VALUE  = 1;
  76 var TYPE_RECORD = 2;
  77 var TYPE_LIST_OF_VALUES = 3;
  78 var TYPE_LIST_OF_RECORDS = 4;
  79
  80
  81 // A structure for storing queries
  82
  83 function QueryExt(query, parent_query_ext, main_query_ext, update_query_ext, disabled) {
  84
  85     /* Constructor */
  86     if (typeof query == "undefined")
  87         throw "Must pass a query in QueryExt constructor";
  88     this.query                 = query;
  89     this.parent_query_ext      = (typeof parent_query_ext      == "undefined") ? null  : parent_query_ext;
  90     this.main_query_ext        = (typeof main_query_ext        == "undefined") ? null  : main_query_ext;
  91     this.update_query_ext      = (typeof update_query_ext      == "undefined") ? null  : update_query_ext;
  92     this.update_query_orig_ext = (typeof update_query_orig_ext == "undefined") ? null  : update_query_orig_ext;
  93     this.disabled              = (typeof update_query_ext      == "undefined") ? false : disabled;
  94
  95     this.status       = null;
  96     this.results      = null;
  97     // update_query null unless we are a main_query (aka parent_query == null); only main_query_fields can be updated...
  98 }
  99
 100 function QueryStore() {
 101
 102     this.main_queries     = {};
 103     this.analyzed_queries = {};
 104
 105     /* Insertion */
 106
 107     this.insert = function(query) {
 108         // We expect only main_queries are inserted
 109
 110         /* If the query has not been analyzed, then we analyze it */
 111         if (query.analyzed_query == null) {
 112             query.analyze_subqueries();
 113         }
 114
 115         /* We prepare the update query corresponding to the main query and store both */
 116         /* Note: they have the same UUID */
 117
 118         // XXX query.change_action() should become deprecated
 119         update_query = query.clone();
 120         update_query.action = 'update';
 121         update_query.analyzed_query.action = 'update';
 122         update_query.params = {};
 123         update_query_ext = new QueryExt(update_query);
 124
 125         /* We remember the original query to be able to reset it */
 126         update_query_orig_ext = new QueryExt(update_query.clone());
 127
 128
 129         /* We store the main query */
 130         query_ext = new QueryExt(query, null, null, update_query_ext, update_query_orig_ext, false);
 131         manifold.query_store.main_queries[query.query_uuid] = query_ext;
 132         /* Note: the update query does not have an entry! */
 133
 134
 135         // The query is disabled; since it is incomplete until we know the content of the set of subqueries
 136         // XXX unless we have no subqueries ???
 137         // we will complete with params when records are received... this has to be done by the manager
 138         // SET_ADD, SET_REMOVE will change the status of the elements of the set
 139         // UPDATE will change also, etc.
 140         // XXX We need a proper structure to store this information...
 141
 142         // We also need to insert all queries and subqueries from the analyzed_query
 143         // XXX We need the root of all subqueries
 144         query.iter_subqueries(function(sq, data, parent_query) {
 145             if (parent_query)
 146                 parent_query_ext = manifold.query_store.find_analyzed_query_ext(parent_query.query_uuid);
 147             else
 148                 parent_query_ext = null;
 149             // XXX parent_query_ext == false
 150             // XXX main.subqueries = {} # Normal, we need analyzed_query
 151             sq_ext = new QueryExt(sq, parent_query_ext, query_ext)
 152             manifold.query_store.analyzed_queries[sq.query_uuid] = sq_ext;
 153         });
 154
 155         // XXX We have spurious update queries...
 156     }
 157
 158     /* Searching */
 159
 160     this.find_query_ext = function(query_uuid) {
 161         return this.main_queries[query_uuid];
 162     }
 163
 164     this.find_query = function(query_uuid) {
 165         return this.find_query_ext(query_uuid).query;
 166     }
 167
 168     this.find_analyzed_query_ext = function(query_uuid) {
 169         return this.analyzed_queries[query_uuid];
 170     }
 171
 172     this.find_analyzed_query = function(query_uuid) {
 173         return this.find_analyzed_query_ext(query_uuid).query;
 174     }
 175 }
 176
 177 /*!
 178  * This namespace holds functions for globally managing query objects
 179  * \Class Manifold
 180  */
 181 var manifold = {
 182
 183     /**************************************************************************
 184      * Helper functions
 185      **************************************************************************/
 186
 187     separator: '__',
 188
 189     spin_presets: {},
 190
 191     spin: function(locator, active /*= true */) {
 192         active = typeof active !== 'undefined' ? active : true;
 193         try {
 194             if (active) {
 195                 $(locator).spin(manifold.spin_presets);
 196             } else {
 197                 $(locator).spin(false);
 198             }
 199         } catch (err) { messages.debug("Cannot turn spins on/off " + err); }
 200     },
 201
 202     get_type: function(variable) {
 203         switch(Object.toType(variable)) {
 204             case 'number':
 205             case 'string':
 206                 return TYPE_VALUE;
 207             case 'object':
 208                 return TYPE_RECORD;
 209             case 'array':
 210                 if ((variable.length > 0) && (Object.toType(variable[0]) === 'object'))
 211                     return TYPE_LIST_OF_RECORDS;
 212                 else
 213                     return TYPE_LIST_OF_VALUES;
 214         }
 215     },
 216
 217     /**************************************************************************
 218      * Metadata management
 219      **************************************************************************/
 220
 221      metadata: {
 222
 223         get_table: function(method) {
 224             var table = MANIFOLD_METADATA[method];
 225             return (typeof table === 'undefined') ? null : table;
 226         },
 227
 228         get_columns: function(method) {
 229             var table = this.get_table(method);
 230             if (!table) {
 231                 return null;
 232             }
 233
 234             return (typeof table.column === 'undefined') ? null : table.column;
 235         },
 236
 237         get_key: function(method) {
 238             var table = this.get_table(method);
 239             if (!table)
 240                 return null;
 241
 242             return (typeof table.key === 'undefined') ? null : table.key;
 243         },
 244
 245
 246         get_column: function(method, name) {
 247             var columns = this.get_columns(method);
 248             if (!columns)
 249                 return null;
 250
 251             $.each(columns, function(i, c) {
 252                 if (c.name == name)
 253                     return c
 254             });
 255             return null;
 256         },
 257
 258         get_type: function(method, name) {
 259             var table = this.get_table(method);
 260             if (!table)
 261                 return null;
 262
 263             return (typeof table.type === 'undefined') ? null : table.type;
 264         }
 265
 266      },
 267
 268     /**************************************************************************
 269      * Query management
 270      **************************************************************************/
 271
 272     query_store: new QueryStore(),
 273
 274     // XXX Remaining functions are deprecated since they are replaced by the query store
 275
 276     /*!
 277      * Associative array storing the set of queries active on the page
 278      * \memberof Manifold
 279      */
 280     all_queries: {},
 281
 282     /*!
 283      * Insert a query in the global hash table associating uuids to queries.
 284      * If the query has no been analyzed yet, let's do it.
 285      * \fn insert_query(query)
 286      * \memberof Manifold
 287      * \param ManifoldQuery query Query to be added
 288      */
 289     insert_query : function (query) {
 290         // NEW API
 291         manifold.query_store.insert(query);
 292
 293         // FORMER API
 294         if (query.analyzed_query == null) {
 295             query.analyze_subqueries();
 296         }
 297         manifold.all_queries[query.query_uuid]=query;
 298     },
 299
 300     /*!
 301      * Returns the query associated to a UUID
 302      * \fn find_query(query_uuid)
 303      * \memberof Manifold
 304      * \param string query_uuid The UUID of the query to be returned
 305      */
 306     find_query : function (query_uuid) {
 307         return manifold.all_queries[query_uuid];
 308     },
 309
 310     /**************************************************************************
 311      * Query execution
 312      **************************************************************************/
 313
 314     // trigger a query asynchroneously
 315     proxy_url : '/manifold/proxy/json/',
 316
 317     // reasonably low-noise, shows manifold requests coming in and out
 318     asynchroneous_debug : true,
 319     // print our more details on result publication and related callbacks
 320     publish_result_debug : true,
 321
 322     /**
 323      * \brief We use js function closure to be able to pass the query (array)
 324      * to the callback function used when data is received
 325      */
 326     success_closure: function(query, publish_uuid, callback) {
 327         return function(data, textStatus) {
 328             manifold.asynchroneous_success(data, query, publish_uuid, callback);
 329         }
 330     },
 331
 332     run_query: function(query, callback) {
 333         // default value for callback = null
 334         if (typeof callback === 'undefined')
 335             callback = null;
 336
 337         var query_json = JSON.stringify(query);
 338
 339         /* Nothing related to pubsub here... for the moment at least. */
 340         //query.iter_subqueries(function (sq) {
 341         //    manifold.raise_record_event(sq.query_uuid, IN_PROGRESS);
 342         //});
 343
 344         $.post(manifold.proxy_url, {'json': query_json} , manifold.success_closure(query, null, callback));
 345     },
 346
 347     // Executes all async. queries - intended for the javascript header to initialize queries
 348     // input queries are specified as a list of {'query_uuid': <query_uuid> }
 349     // each plugin is responsible for managing its spinner through on_query_in_progress
 350     asynchroneous_exec : function (query_exec_tuples) {
 351
 352         // Loop through input array, and use publish_uuid to publish back results
 353         $.each(query_exec_tuples, function(index, tuple) {
 354             var query=manifold.find_query(tuple.query_uuid);
 355             var query_json=JSON.stringify (query);
 356             var publish_uuid=tuple.publish_uuid;
 357             // by default we publish using the same uuid of course
 358             if (publish_uuid==undefined) publish_uuid=query.query_uuid;
 359             if (manifold.publish_result_debug) {
 360                 messages.debug("sending POST on " + manifold.proxy_url + query.__repr());
 361             }
 362
 363             query.iter_subqueries(function (sq) {
 364                 manifold.raise_record_event(sq.query_uuid, IN_PROGRESS);
 365             });
 366
 367             // not quite sure what happens if we send a string directly, as POST data is named..
 368             // this gets reconstructed on the proxy side with ManifoldQuery.fill_from_POST
 369             $.post(manifold.proxy_url, {'json':query_json},
 370                    manifold.success_closure(query, publish_uuid, tuple.callback));
 371         })
 372     },
 373
 374     /**
 375      * \brief Forward a query to the manifold backend
 376      * \param query (dict) the query to be executed asynchronously
 377      * \param callback (function) the function to be called when the query terminates
 378      */
 379     forward: function(query, callback) {
 380         var query_json = JSON.stringify(query);
 381         $.post(manifold.proxy_url, {'json': query_json} ,
 382                manifold.success_closure(query, query.query_uuid, callback));
 383     },
 384
 385     /*!
 386      * Returns whether a query expects a unique results.
 387      * This is the case when the filters contain a key of the object
 388      * \fn query_expects_unique_result(query)
 389      * \memberof Manifold
 390      * \param ManifoldQuery query Query for which we are testing whether it expects a unique result
 391      */
 392     query_expects_unique_result: function(query) {
 393         /* XXX we need functions to query metadata */
 394         //var keys = MANIFOLD_METADATA[query.object]['keys']; /* array of array of field names */
 395         /* TODO requires keys in metadata */
 396         return true;
 397     },
 398
 399     /*!
 400      * Publish result
 401      * \fn publish_result(query, results)
 402      * \memberof Manifold
 403      * \param ManifoldQuery query Query which has received results
 404      * \param array results results corresponding to query
 405      */
 406     publish_result: function(query, result) {
 407         if (typeof result === 'undefined')
 408             result = [];
 409
 410         // NEW PLUGIN API
 411         manifold.raise_record_event(query.query_uuid, CLEAR_RECORDS);
 412         if (manifold.publish_result_debug)
 413             messages.debug(".. publish_result (1) ");
 414         var count=0;
 415         $.each(result, function(i, record) {
 416             manifold.raise_record_event(query.query_uuid, NEW_RECORD, record);
 417             count += 1;
 418         });
 419         if (manifold.publish_result_debug)
 420             messages.debug(".. publish_result (2) has used NEW API on " + count + " records");
 421         manifold.raise_record_event(query.query_uuid, DONE);
 422         if (manifold.publish_result_debug)
 423             messages.debug(".. publish_result (3) has used NEW API to say DONE");
 424
 425         // OLD PLUGIN API BELOW
 426         /* Publish an update announce */
 427         var channel="/results/" + query.query_uuid + "/changed";
 428         if (manifold.publish_result_debug)
 429             messages.debug(".. publish_result (4) OLD API on channel" + channel);
 430
 431         $.publish(channel, [result, query]);
 432
 433         if (manifold.publish_result_debug)
 434             messages.debug(".. publish_result (5) END q=" + query.__repr());
 435     },
 436
 437     /*!
 438      * Recursively publish result
 439      * \fn publish_result_rec(query, result)
 440      * \memberof Manifold
 441      * \param ManifoldQuery query Query which has received result
 442      * \param array result result corresponding to query
 443      *
 444      * Note: this function works on the analyzed query
 445      */
 446     publish_result_rec: function(query, result) {
 447         /* If the result is not unique, only publish the top query;
 448          * otherwise, publish the main object as well as subqueries
 449          * XXX how much recursive are we ?
 450          */
 451         if (manifold.publish_result_debug)
 452             messages.debug (">>>>> publish_result_rec " + query.object);
 453         if (manifold.query_expects_unique_result(query)) {
 454             /* Also publish subqueries */
 455             $.each(query.subqueries, function(object, subquery) {
 456                 manifold.publish_result_rec(subquery, result[0][object]);
 457                 /* TODO remove object from result */
 458             });
 459         }
 460         if (manifold.publish_result_debug)
 461             messages.debug ("===== publish_result_rec " + query.object);
 462
 463         manifold.publish_result(query, result);
 464
 465         if (manifold.publish_result_debug)
 466             messages.debug ("<<<<< publish_result_rec " + query.object);
 467     },
 468
 469     setup_update_query: function(query, records) {
 470         // We don't prepare an update query if the result has more than 1 entry
 471         if (records.length != 1)
 472             return;
 473         var query_ext = manifold.query_store.find_query_ext(query.query_uuid);
 474
 475         var record = records[0];
 476
 477         var update_query_ext = query_ext.update_query_ext;
 478         var update_query = update_query_ext.query;
 479         var update_query_ext = query_ext.update_query_ext;
 480         var update_query_orig = query_ext.update_query_orig_ext.query;
 481
 482         // Testing whether the result has subqueries (one level deep only)
 483         // iif the query has subqueries
 484         var count = 0;
 485         var obj = query.analyzed_query.subqueries;
 486         for (method in obj) {
 487             if (obj.hasOwnProperty(method)) {
 488                 var key = manifold.metadata.get_key(method);
 489                 if (!key)
 490                     continue;
 491                 if (key.length > 1)
 492                     continue;
 493                 key = key[0];
 494                 var sq_keys = [];
 495                 var subrecords = record[method];
 496                 if (!subrecords)
 497                     continue
 498                 $.each(subrecords, function (i, subrecord) {
 499                     sq_keys.push(subrecord[key]);
 500                 });
 501                 update_query.params[method] = sq_keys;
 502                 update_query_orig.params[method] = sq_keys.slice();
 503                 count++;
 504             }
 505         }
 506
 507         if (count > 0) {
 508             update_query_ext.disabled = false;
 509             update_query_orig_ext.disabled = false;
 510         }
 511     },
 512
 513     process_get_query_records: function(query, records) {
 514         this.setup_update_query(query, records);
 515
 516         /* Publish full results */
 517         var tmp_query = manifold.find_query(query.query_uuid);
 518         manifold.publish_result_rec(tmp_query.analyzed_query, records);
 519     },
 520
 521     /**
 522      *
 523      * What we need to do when receiving results from an update query:
 524      * - differences between what we had, what we requested, and what we obtained
 525      *    . what we had : update_query_orig (simple fields and set fields managed differently)
 526      *    . what we requested : update_query
 527      *    . what we received : records
 528      * - raise appropriate events
 529      *
 530      * The normal process is that results similar to Get will be pushed in the
 531      * pubsub mechanism, thus repopulating everything while we only need
 532      * diff's. This means we need to move the publish functionalities in the
 533      * previous 'process_get_query_records' function.
 534      */
 535     process_update_query_records: function(query, records) {
 536         // First issue: we request everything, and not only what we modify, so will will have to ignore some fields
 537         var query_uuid        = query.query_uuid;
 538         var query_ext         = manifold.query_store.find_analyzed_query_ext(query_uuid);
 539         var update_query      = query_ext.main_query_ext.update_query_ext.query;
 540         var update_query_orig = query_ext.main_query_ext.update_query_orig_ext.query;
 541
 542         // Since we update objects one at a time, we can get the first record
 543         var record = records[0];
 544
 545         // Let's iterate over the object properties
 546         for (var field in record) {
 547             switch (this.get_type(record[field])) {
 548                 case TYPE_VALUE:
 549                     // Did we ask for a change ?
 550                     var update_value = update_query[field];
 551                     if (!update_value)
 552                         // Not requested, if it has changed: OUT OF SYNC
 553                         // How we can know ?
 554                         // We assume it won't have changed
 555                         continue;
 556
 557                     var result_value = record[field];
 558                     if (!result_value)
 559                         throw "Internal error";
 560
 561                     data = {
 562                         request: FIELD_REQUEST_CHANGE,
 563                         key   : field,
 564                         value : update_value,
 565                         status: (update_value == result_value) ? FIELD_REQUEST_SUCCESS : FIELD_REQUEST_FAILURE,
 566                     }
 567                     manifold.raise_record_event(query_uuid, FIELD_STATE_CHANGED, data);
 568
 569                     break;
 570                 case TYPE_RECORD:
 571                     throw "Not implemented";
 572                     break;
 573
 574                 case TYPE_LIST_OF_VALUES:
 575                     // Same as list of records, but we don't have to extract keys
 576                     var result_keys  = record[field]
 577
 578                     // The rest of exactly the same (XXX factorize)
 579                     var update_keys  = update_query_orig.params[field];
 580                     var query_keys   = update_query.params[field];
 581                     var added_keys   = $.grep(query_keys, function (x) { return $.inArray(x, update_keys) == -1 });
 582                     var removed_keys = $.grep(update_keys, function (x) { return $.inArray(x, query_keys) == -1 });
 583
 584
 585                     $.each(added_keys, function(i, key) {
 586                         if ($.inArray(key, result_keys) == -1) {
 587                             data = {
 588                                 request: FIELD_REQUEST_ADD,
 589                                 key   : field,
 590                                 value : key,
 591                                 status: FIELD_REQUEST_FAILURE,
 592                             }
 593                         } else {
 594                             data = {
 595                                 request: FIELD_REQUEST_ADD,
 596                                 key   : field,
 597                                 value : key,
 598                                 status: FIELD_REQUEST_SUCCESS,
 599                             }
 600                         }
 601                         manifold.raise_record_event(query_uuid, FIELD_STATE_CHANGED, data);
 602                     });
 603                     $.each(removed_keys, function(i, key) {
 604                         if ($.inArray(key, result_keys) == -1) {
 605                             data = {
 606                                 request: FIELD_REQUEST_REMOVE,
 607                                 key   : field,
 608                                 value : key,
 609                                 status: FIELD_REQUEST_SUCCESS,
 610                             }
 611                         } else {
 612                             data = {
 613                                 request: FIELD_REQUEST_REMOVE,
 614                                 key   : field,
 615                                 value : key,
 616                                 status: FIELD_REQUEST_FAILURE,
 617                             }
 618                         }
 619                         manifold.raise_record_event(query_uuid, FIELD_STATE_CHANGED, data);
 620                     });
 621
 622
 623                     break;
 624                 case TYPE_LIST_OF_RECORDS:
 625                     // example: slice.resource
 626                     //  - update_query_orig.params.resource = resources in slice before update
 627                     //  - update_query.params.resource = resource requested in slice
 628                     //  - keys from field = resources obtained
 629                     var key = manifold.metadata.get_key(field);
 630                     if (!key)
 631                         continue;
 632                     if (key.length > 1) {
 633                         throw "Not implemented";
 634                         continue;
 635                     }
 636                     key = key[0];
 637
 638                     /* XXX should be modified for multiple keys */
 639                     var result_keys  = $.map(record[field], function(x) { return x[key]; });
 640
 641                     var update_keys  = update_query_orig.params[field];
 642                     var query_keys   = update_query.params[field];
 643                     var added_keys   = $.grep(query_keys, function (x) { return $.inArray(x, update_keys) == -1 });
 644                     var removed_keys = $.grep(update_keys, function (x) { return $.inArray(x, query_keys) == -1 });
 645
 646
 647                     $.each(added_keys, function(i, key) {
 648                         if ($.inArray(key, result_keys) == -1) {
 649                             data = {
 650                                 request: FIELD_REQUEST_ADD,
 651                                 key   : field,
 652                                 value : key,
 653                                 status: FIELD_REQUEST_FAILURE,
 654                             }
 655                         } else {
 656                             data = {
 657                                 request: FIELD_REQUEST_ADD,
 658                                 key   : field,
 659                                 value : key,
 660                                 status: FIELD_REQUEST_SUCCESS,
 661                             }
 662                         }
 663                         manifold.raise_record_event(query_uuid, FIELD_STATE_CHANGED, data);
 664                     });
 665                     $.each(removed_keys, function(i, key) {
 666                         if ($.inArray(key, result_keys) == -1) {
 667                             data = {
 668                                 request: FIELD_REQUEST_REMOVE,
 669                                 key   : field,
 670                                 value : key,
 671                                 status: FIELD_REQUEST_SUCCESS,
 672                             }
 673                         } else {
 674                             data = {
 675                                 request: FIELD_REQUEST_REMOVE,
 676                                 key   : field,
 677                                 value : key,
 678                                 status: FIELD_REQUEST_FAILURE,
 679                             }
 680                         }
 681                         manifold.raise_record_event(query_uuid, FIELD_STATE_CHANGED, data);
 682                     });
 683
 684
 685                     break;
 686             }
 687         }
 688
 689         // XXX Now we need to adapt 'update' and 'update_orig' queries as if we had done a get
 690         this.setup_update_query(query, records);
 691     },
 692
 693     process_query_records: function(query, records) {
 694         if (query.action == 'get') {
 695             this.process_get_query_records(query, records);
 696         } else if (query.action == 'update') {
 697             this.process_update_query_records(query, records);
 698         }
 699     },
 700
 701     // if set callback is provided it is called
 702     // most of the time publish_uuid will be query.query_uuid
 703     // however in some cases we wish to publish the result under a different uuid
 704     // e.g. an updater wants to publish its result as if from the original (get) query
 705     asynchroneous_success : function (data, query, publish_uuid, callback) {
 706         // xxx should have a nicer declaration of that enum in sync with the python code somehow
 707
 708         var start = new Date();
 709         if (manifold.asynchroneous_debug)
 710             messages.debug(">>>>>>>>>> asynchroneous_success query.object=" + query.object);
 711
 712         if (data.code == 2) { // ERROR
 713             // We need to make sense of error codes here
 714             alert("Your session has expired, please log in again");
 715             window.location="/logout/";
 716             if (manifold.asynchroneous_debug) {
 717                 duration=new Date()-start;
 718                 messages.debug ("<<<<<<<<<< asynchroneous_success " + query.object + " -- error returned - logging out " + duration + " ms");
 719             }
 720             return;
 721         }
 722         if (data.code == 1) { // WARNING
 723             messages.error("Some errors have been received from the manifold backend at " + MANIFOLD_URL + " [" + data.description + "]");
 724             // publish error code and text message on a separate channel for whoever is interested
 725             if (publish_uuid)
 726                 $.publish("/results/" + publish_uuid + "/failed", [data.code, data.description] );
 727
 728         }
 729
 730         // If a callback has been specified, we redirect results to it
 731         if (!!callback) {
 732             callback(data);
 733             if (manifold.asynchroneous_debug) {
 734                 duration=new Date()-start;
 735                 messages.debug ("<<<<<<<<<< asynchroneous_success " + query.object + " -- callback ended " + duration + " ms");
 736             }
 737             return;
 738         }
 739
 740         if (manifold.asynchroneous_debug)
 741             messages.debug ("========== asynchroneous_success " + query.object + " -- before process_query_records [" + query.query_uuid +"]");
 742
 743         // once everything is checked we can use the 'value' part of the manifoldresult
 744         var result=data.value;
 745         if (result) {
 746             /* Eventually update the content of related queries (update, etc) */
 747             this.process_query_records(query, result);
 748
 749             /* Publish results: disabled here, done in the previous call */
 750             //tmp_query = manifold.find_query(query.query_uuid);
 751             //manifold.publish_result_rec(tmp_query.analyzed_query, result);
 752         }
 753         if (manifold.asynchroneous_debug) {
 754             duration=new Date()-start;
 755             messages.debug ("<<<<<<<<<< asynchroneous_success " + query.object + " -- done " + duration + " ms");
 756         }
 757
 758     },
 759
 760     /**************************************************************************
 761      * Plugin API helpers
 762      **************************************************************************/
 763
 764     raise_event_handler: function(type, query_uuid, event_type, value) {
 765         if (manifold.publish_result_debug)
 766             messages.debug("raise_event_handler, quuid="+query_uuid+" type="+type+" event_type="+event_type);
 767         if ((type != 'query') && (type != 'record'))
 768             throw 'Incorrect type for manifold.raise_event()';
 769         // xxx we observe quite a lot of incoming calls with an undefined query_uuid
 770         // this should be fixed upstream in manifold I expect
 771         if (query_uuid === undefined) {
 772             messages.warning("undefined query in raise_event_handler");
 773             return;
 774         }
 775
 776         // notify the change to objects that either listen to this channel specifically,
 777         // or to the wildcard channel
 778         var channels = [ manifold.get_channel(type, query_uuid), manifold.get_channel(type, '*') ];
 779
 780         $.each(channels, function(i, channel) {
 781             if (value === undefined) {
 782                 if (manifold.publish_result_debug) messages.debug("triggering [no value] on channel="+channel+" and event_type="+event_type);
 783                 $('.plugin').trigger(channel, [event_type]);
 784             } else {
 785                 if (manifold.publish_result_debug) messages.debug("triggering [value="+value+"] on channel="+channel+" and event_type="+event_type);
 786                 $('.plugin').trigger(channel, [event_type, value]);
 787             }
 788         });
 789     },
 790
 791     raise_query_event: function(query_uuid, event_type, value) {
 792         manifold.raise_event_handler('query', query_uuid, event_type, value);
 793     },
 794
 795     raise_record_event: function(query_uuid, event_type, value) {
 796         manifold.raise_event_handler('record', query_uuid, event_type, value);
 797     },
 798
 799
 800     raise_event: function(query_uuid, event_type, value) {
 801         // Query uuid has been updated with the key of a new element
 802         query_ext    = manifold.query_store.find_analyzed_query_ext(query_uuid);
 803         query = query_ext.query;
 804
 805         switch(event_type) {
 806             case FIELD_STATE_CHANGED:
 807                 // value is an object (request, key, value, status)
 808                 // update is only possible is the query is not pending, etc
 809                 // SET_ADD is on a subquery, FIELD_STATE_CHANGED on the query itself
 810                 // we should map SET_ADD on this...
 811
 812                 // 1. Update internal query store about the change in status
 813
 814                 // 2. Update the update query
 815                 update_query      = query_ext.main_query_ext.update_query_ext.query;
 816                 update_query_orig = query_ext.main_query_ext.update_query_orig_ext.query;
 817
 818                 switch(value.request) {
 819                     case FIELD_REQUEST_CHANGE:
 820                         if (update_query.params[value.key] === undefined)
 821                             update_query.params[value.key] = Array();
 822                         update_query.params[value.key] = value.value;
 823                         break;
 824                     case FIELD_REQUEST_ADD:
 825                         if ($.inArray(value.value, update_query_orig.params[value.key]) != -1)
 826                             value.request = FIELD_REQUEST_ADD_RESET;
 827                         if (update_query.params[value.key] === undefined)
 828                             update_query.params[value.key] = Array();
 829                         update_query.params[value.key].push(value.value);
 830                         break;
 831                     case FIELD_REQUEST_REMOVE:
 832                         if ($.inArray(value.value, update_query_orig.params[value.key]) == -1)
 833                             value.request = FIELD_REQUEST_REMOVE_RESET;
 834
 835                         var arr = update_query.params[value.key];
 836                         arr = $.grep(arr, function(x) { return x != value.value; });
 837                         if (update_query.params[value.key] === undefined)
 838                             update_query.params[value.key] = Array();
 839                         update_query.params[value.key] = arr;
 840
 841                         break;
 842                     case FIELD_REQUEST_ADD_RESET:
 843                     case FIELD_REQUEST_REMOVE_RESET:
 844                         // XXX We would need to keep track of the original query
 845                         throw "Not implemented";
 846                         break;
 847                 }
 848
 849                 // 3. Inform others about the change
 850                 // a) the main query...
 851                 manifold.raise_record_event(query_uuid, event_type, value);
 852
 853                 // b) subqueries eventually (dot in the key)
 854                 // Let's unfold
 855                 var path_array = value.key.split('.');
 856                 var value_key = value.key.split('.');
 857
 858                 var cur_query = query;
 859                 if (cur_query.analyzed_query)
 860                     cur_query = cur_query.analyzed_query;
 861                 $.each(path_array, function(i, method) {
 862                     cur_query = cur_query.subqueries[method];
 863                     value_key.shift(); // XXX check that method is indeed shifted
 864                 });
 865                 value.key = value_key;
 866
 867                 manifold.raise_record_event(cur_query.query_uuid, event_type, value);
 868
 869                 // XXX make this DOT a global variable... could be '/'
 870                 break;
 871
 872             case SET_ADD:
 873             case SET_REMOVED:
 874
 875                 // update is only possible is the query is not pending, etc
 876                 // CHECK status !
 877
 878                 // XXX we can only update subqueries of the main query. Check !
 879                 // assert query_ext.parent_query == query_ext.main_query
 880                 // old // update_query = query_ext.main_query_ext.update_query_ext.query;
 881
 882                 // This SET_ADD is called on a subquery, so we have to
 883                 // recontruct the path of the key in the main_query
 884                 // We then call FIELD_STATE_CHANGED which is the equivalent for the main query
 885
 886                 var path = "";
 887                 var sq = query_ext;
 888                 while (sq.parent_query_ext) {
 889                     if (path != "")
 890                         path = '.' + path;
 891                     path = sq.query.object + path;
 892                     sq = sq.parent_query_ext;
 893                 }
 894
 895                 main_query = query_ext.main_query_ext.query;
 896                 data = {
 897                     request: (event_type == SET_ADD) ? FIELD_REQUEST_ADD : FIELD_REQUEST_REMOVE,
 898                     key   : path,
 899                     value : value,
 900                     status: FIELD_REQUEST_PENDING,
 901                 };
 902                 this.raise_event(main_query.query_uuid, FIELD_STATE_CHANGED, data);
 903
 904                 // old //update_query.params[path].push(value);
 905                 // old // console.log('Updated query params', update_query);
 906                 // NOTE: update might modify the fields in Get
 907                 // NOTE : we have to modify all child queries
 908                 // NOTE : parts of a query might not be started (eg slice.measurements, how to handle ?)
 909
 910                 // if everything is done right, update_query should not be null.
 911                 // It is updated when we received results from the get query
 912                 // object = the same as get
 913                 // filter = key : update a single object for now
 914                 // fields = the same as get
 915                 manifold.raise_query_event(query_uuid, event_type, value);
 916
 917                 break;
 918
 919             case RUN_UPDATE:
 920                 manifold.run_query(query_ext.main_query_ext.update_query_ext.query);
 921                 break;
 922
 923             case FILTER_ADDED:
 924 // Thierry - this is probably wrong but intended as a hotfix
 925 // http://trac.myslice.info/ticket/32
 926 //                manifold.raise_query_event(query_uuid, event_type, value);
 927                 break;
 928             case FILTER_REMOVED:
 929                 manifold.raise_query_event(query_uuid, event_type, value);
 930                 break;
 931             case FIELD_ADDED:
 932                 main_query = query_ext.main_query_ext.query;
 933                 main_update_query = query_ext.main_query_ext.update_query;
 934                 query.select(value);
 935
 936                 // Here we need the full path through all subqueries
 937                 path = ""
 938                 // XXX We might need the query name in the QueryExt structure
 939                 main_query.select(value);
 940
 941                 // XXX When is an update query associated ?
 942                 // XXX main_update_query.select(value);
 943
 944                 manifold.raise_query_event(query_uuid, event_type, value);
 945                 break;
 946
 947             case FIELD_REMOVED:
 948                 query = query_ext.query;
 949                 main_query = query_ext.main_query_ext.query;
 950                 main_update_query = query_ext.main_query_ext.update_query;
 951                 query.unselect(value);
 952                 main_query.unselect(value);
 953
 954                 // We need to inform about changes in these queries to the respective plugins
 955                 // Note: query & main_query have the same UUID
 956                 manifold.raise_query_event(query_uuid, event_type, value);
 957                 break;
 958         }
 959         // We need to inform about changes in these queries to the respective plugins
 960         // Note: query, main_query & update_query have the same UUID
 961         manifold.raise_query_event(query_uuid, event_type, value);
 962         // We are targeting the same object with get and update
 963         // The notion of query is bad, we should have a notion of destination, and issue queries on the destination
 964         // NOTE: Editing a subquery == editing a local view on the destination
 965
 966         // XXX We might need to run the new query again and manage the plugins in the meantime with spinners...
 967         // For the time being, we will collect all columns during the first query
 968     },
 969
 970     /* Publish/subscribe channels for internal use */
 971     get_channel: function(type, query_uuid) {
 972         if ((type !== 'query') && (type != 'record'))
 973             return null;
 974         return '/' + type + '/' + query_uuid;
 975     },
 976
 977 }; // manifold object
 978 /* ------------------------------------------------------------ */
 979
 980 (function($) {
 981
 982     // OLD PLUGIN API: extend jQuery/$ with pubsub capabilities
 983     // https://gist.github.com/661855
 984     var o = $({});
 985     $.subscribe = function( channel, selector, data, fn) {
 986       /* borrowed from jQuery */
 987       if ( data == null && fn == null ) {
 988           // ( channel, fn )
 989           fn = selector;
 990           data = selector = undefined;
 991       } else if ( fn == null ) {
 992           if ( typeof selector === "string" ) {
 993               // ( channel, selector, fn )
 994               fn = data;
 995               data = undefined;
 996           } else {
 997               // ( channel, data, fn )
 998               fn = data;
 999               data = selector;
1000               selector = undefined;
1001           }
1002       }
1003       /* </ugly> */
1004
1005       /* We use an indirection function that will clone the object passed in
1006        * parameter to the subscribe callback
1007        *
1008        * FIXME currently we only clone query objects which are the only ones
1009        * supported and editable, we might have the same issue with results but
1010        * the page load time will be severely affected...
1011        */
1012       o.on.apply(o, [channel, selector, data, function() {
1013           for(i = 1; i < arguments.length; i++) {
1014               if ( arguments[i].constructor.name == 'ManifoldQuery' )
1015                   arguments[i] = arguments[i].clone();
1016           }
1017           fn.apply(o, arguments);
1018       }]);
1019     };
1020
1021     $.unsubscribe = function() {
1022       o.off.apply(o, arguments);
1023     };
1024
1025     $.publish = function() {
1026       o.trigger.apply(o, arguments);
1027     };
1028
1029 }(jQuery));
1030
1031 /* ------------------------------------------------------------ */
1032
1033 //http://stackoverflow.com/questions/5100539/django-csrf-check-failing-with-an-ajax-post-request
1034 //make sure to expose csrf in our outcoming ajax/post requests
1035 $.ajaxSetup({
1036      beforeSend: function(xhr, settings) {
1037          function getCookie(name) {
1038              var cookieValue = null;
1039              if (document.cookie && document.cookie != '') {
1040                  var cookies = document.cookie.split(';');
1041                  for (var i = 0; i < cookies.length; i++) {
1042                      var cookie = jQuery.trim(cookies[i]);
1043                      // Does this cookie string begin with the name we want?
1044                  if (cookie.substring(0, name.length + 1) == (name + '=')) {
1045                      cookieValue = decodeURIComponent(cookie.substring(name.length + 1));
1046                      break;
1047                  }
1048              }
1049          }
1050          return cookieValue;
1051          }
1052          if (!(/^http:.*/.test(settings.url) || /^https:.*/.test(settings.url))) {
1053              // Only send the token to relative URLs i.e. locally.
1054              xhr.setRequestHeader("X-CSRFToken", getCookie('csrftoken'));
1055          }
1056      }
1057 });