]> git.openstreetmap.org Git - nominatim.git/commitdiff
move setupclass, move command line array, remove args from update array
authorThomasBarris <thomas.barris@googlemail.com>
Mon, 17 Sep 2018 08:28:00 +0000 (10:28 +0200)
committerThomasBarris <thomas.barris@googlemail.com>
Mon, 17 Sep 2018 08:28:00 +0000 (10:28 +0200)
lib/setup/SetupClass.php [moved from lib/classes/SetupClass.php with 98% similarity]
lib/setup_functions.php
utils/setup.php
utils/update.php

similarity index 98%
rename from lib/classes/SetupClass.php
rename to lib/setup/SetupClass.php
index 09f37e515bbee4f102e5fe2d89fdf6807ac7c1e8..f31c235304223ed11bf9cffa1e7300861140d213 100755 (executable)
@@ -16,7 +16,7 @@ class SetupFunctions
     protected $oDB = null;              // set in setupDB (earliest) or later in loadData, importData, drop, createSqlFunctions, importTigerData
                                                 // pgsqlRunPartitionScript, calculatePostcodes, ..if no already set
 
-    public function __construct($aCMDResult)
+    public function __construct($aCMDResult, $callingFunction = 'setup')
     {
         // by default, use all but one processor, but never more than 15.
         $this->iInstances = isset($aCMDResult['threads'])
@@ -45,7 +45,6 @@ class SetupFunctions
  
         // setting member variables based on command line options stored in $aCMDResult
         $this->sVerbose = $aCMDResult['verbose'];
-        $this->bEnableDiffUpdates = $aCMDResult['enable-diff-updates'];
 
         //setting default values which are not set by the update.php array
         if (isset($aCMDResult['ignore-errors'])) {
@@ -63,6 +62,14 @@ class SetupFunctions
         } else {
             $this->bNoPartitions = false;
         }
+
+        // if class is instantiated by update.php, we have to set EnableDiffUpdates to true
+        // otherwise set to value provided comand line to setup.php
+        if ($callingFunction == 'update') {
+            $this->bEnableDiffUpdates = true;
+        } elseif ($callingFunction == 'setup') {
+            $this->bEnableDiffUpdates = $aCMDResult['enable-diff-updates'];
+        }
     }
 
     public function createDB()
@@ -166,8 +173,8 @@ class SetupFunctions
             $this->pgsqlRunScript('update country_name set partition = 0');
         }
 
-        // the following will be needed by create_functions later but
-        // is only defined in the subsequently called T
+        // the following will be needed by createFunctions later but
+        // is only defined in the subsequently called createTables
         // Create dummies here that will be overwritten by the proper
         // versions in create-tables.
         $this->pgsqlRunScript('CREATE TABLE IF NOT EXISTS place_boundingbox ()');
index af718ed0f5e909eb18ab2e931208a68ffcb37eda..b1417678269d9f49d57a0e439de01ee68ed37bf1 100755 (executable)
@@ -34,90 +34,5 @@ function checkModulePresence()
         echo $oResult->userinfo . "\n\n";
         $bResult = false;
     }
-
     return $bResult;
 }
-
-// (long-opt, short-opt, min-occurs, max-occurs, num-arguments, num-arguments, type, help)
-// create and array
-function createSetupArgvArray()
-{
-    $aCMDOptions
-    = array(
-        'Create and setup nominatim search system',
-        array('help', 'h', 0, 1, 0, 0, false, 'Show Help'),
-        array('quiet', 'q', 0, 1, 0, 0, 'bool', 'Quiet output'),
-        array('verbose', 'v', 0, 1, 0, 0, 'bool', 'Verbose output'),
-
-        array('osm-file', '', 0, 1, 1, 1, 'realpath', 'File to import'),
-        array('threads', '', 0, 1, 1, 1, 'int', 'Number of threads (where possible)'),
-
-        array('all', '', 0, 1, 0, 0, 'bool', 'Do the complete process'),
-
-        array('create-db', '', 0, 1, 0, 0, 'bool', 'Create nominatim db'),
-        array('setup-db', '', 0, 1, 0, 0, 'bool', 'Build a blank nominatim db'),
-        array('import-data', '', 0, 1, 0, 0, 'bool', 'Import a osm file'),
-        array('osm2pgsql-cache', '', 0, 1, 1, 1, 'int', 'Cache size used by osm2pgsql'),
-        array('create-functions', '', 0, 1, 0, 0, 'bool', 'Create functions'),
-        array('enable-diff-updates', '', 0, 1, 0, 0, 'bool', 'Turn on the code required to make diff updates work'),
-        array('enable-debug-statements', '', 0, 1, 0, 0, 'bool', 'Include debug warning statements in pgsql commands'),
-        array('ignore-errors', '', 0, 1, 0, 0, 'bool', 'Continue import even when errors in SQL are present (EXPERT)'),
-        array('create-tables', '', 0, 1, 0, 0, 'bool', 'Create main tables'),
-        array('create-partition-tables', '', 0, 1, 0, 0, 'bool', 'Create required partition tables'),
-        array('create-partition-functions', '', 0, 1, 0, 0, 'bool', 'Create required partition triggers'),
-        array('no-partitions', '', 0, 1, 0, 0, 'bool', 'Do not partition search indices (speeds up import of single country extracts)'),
-        array('import-wikipedia-articles', '', 0, 1, 0, 0, 'bool', 'Import wikipedia article dump'),
-        array('load-data', '', 0, 1, 0, 0, 'bool', 'Copy data to live tables from import table'),
-        array('disable-token-precalc', '', 0, 1, 0, 0, 'bool', 'Disable name precalculation (EXPERT)'),
-        array('import-tiger-data', '', 0, 1, 0, 0, 'bool', 'Import tiger data (not included in \'all\')'),
-        array('calculate-postcodes', '', 0, 1, 0, 0, 'bool', 'Calculate postcode centroids'),
-        array('osmosis-init', '', 0, 1, 0, 0, 'bool', 'Generate default osmosis configuration'),
-        array('index', '', 0, 1, 0, 0, 'bool', 'Index the data'),
-        array('index-noanalyse', '', 0, 1, 0, 0, 'bool', 'Do not perform analyse operations during index (EXPERT)'),
-        array('create-search-indices', '', 0, 1, 0, 0, 'bool', 'Create additional indices required for search and update'),
-        array('create-country-names', '', 0, 1, 0, 0, 'bool', 'Create default list of searchable country names'),
-        array('drop', '', 0, 1, 0, 0, 'bool', 'Drop tables needed for updates, making the database readonly (EXPERIMENTAL)'),
-    );
-    return $aCMDOptions;
-}
-
-function createUpdateArgvArray()
-{
-    $aCMDOptions
-    = array(
-        'Import / update / index osm data',
-        array('help', 'h', 0, 1, 0, 0, false, 'Show Help'),
-        array('quiet', 'q', 0, 1, 0, 0, 'bool', 'Quiet output'),
-        array('verbose', 'v', 0, 1, 0, 0, 'bool', 'Verbose output'),
-
-        array('init-updates', '', 0, 1, 0, 0, 'bool', 'Set up database for updating'),
-        array('check-for-updates', '', 0, 1, 0, 0, 'bool', 'Check if new updates are available'),
-        array('no-update-functions', '', 0, 1, 0, 0, 'bool', 'Do not update trigger functions to support differential updates (assuming the diff update logic is already present)'),
-        array('import-osmosis', '', 0, 1, 0, 0, 'bool', 'Import updates once'),
-        array('import-osmosis-all', '', 0, 1, 0, 0, 'bool', 'Import updates forever'),
-        array('no-index', '', 0, 1, 0, 0, 'bool', 'Do not index the new data'),
-
-        array('calculate-postcodes', '', 0, 1, 0, 0, 'bool', 'Update postcode centroid table'),
-
-        array('import-file', '', 0, 1, 1, 1, 'realpath', 'Re-import data from an OSM file'),
-        array('import-diff', '', 0, 1, 1, 1, 'realpath', 'Import a diff (osc) file from local file system'),
-        array('osm2pgsql-cache', '', 0, 1, 1, 1, 'int', 'Cache size used by osm2pgsql'),
-
-        array('import-node', '', 0, 1, 1, 1, 'int', 'Re-import node'),
-        array('import-way', '', 0, 1, 1, 1, 'int', 'Re-import way'),
-        array('import-relation', '', 0, 1, 1, 1, 'int', 'Re-import relation'),
-        array('import-from-main-api', '', 0, 1, 0, 0, 'bool', 'Use OSM API instead of Overpass to download objects'),
-
-        array('index', '', 0, 1, 0, 0, 'bool', 'Index'),
-        array('index-rank', '', 0, 1, 1, 1, 'int', 'Rank to start indexing from'),
-        array('index-instances', '', 0, 1, 1, 1, 'int', 'Number of indexing instances (threads)'),
-
-        array('deduplicate', '', 0, 1, 0, 0, 'bool', 'Deduplicate tokens'),
-        array('recompute-word-counts', '', 0, 1, 0, 0, 'bool', 'Compute frequency of full-word search terms'),
-        array('no-npi', '', 0, 1, 0, 0, 'bool', '(obsolete)'),
-
-        array('create-functions', '', 0, 1, 1, 1, 'bool', 'Create functions'),
-        array('enable-diff-updates', '', 0, 1, 1, 1, 'bool', 'Turn on the code required to make diff updates work'),
-    );
-    return $aCMDOptions;
-}
index 96d66a16f41d4af681c3fd3a0dd564fe7ebef2db..5bc2a6f93e11c73bf691d8cf40be93ac5a4d4443 100755 (executable)
@@ -6,13 +6,49 @@ require_once(CONST_BasePath.'/lib/init-cmd.php');
 // ->indirect via init-cmd.php->/lib/cmd.php                for runWithEnv, getCmdOpt
 // ->indirect via init-cmd.php->/lib/init.php->db.php       for &getDB()
 
-require_once(CONST_BasePath.'/lib/classes/SetupClass.php');
+require_once(CONST_BasePath.'/lib/setup/SetupClass.php');
 require_once(CONST_BasePath.'/lib/setup_functions.php');
 ini_set('memory_limit', '800M');
 
 use Nominatim\Setup\SetupFunctions as SetupFunctions;
 
-$aCMDOptions = createSetupArgvArray();
+// (long-opt, short-opt, min-occurs, max-occurs, num-arguments, num-arguments, type, help)
+$aCMDOptions
+= array(
+    'Create and setup nominatim search system',
+    array('help', 'h', 0, 1, 0, 0, false, 'Show Help'),
+    array('quiet', 'q', 0, 1, 0, 0, 'bool', 'Quiet output'),
+    array('verbose', 'v', 0, 1, 0, 0, 'bool', 'Verbose output'),
+
+    array('osm-file', '', 0, 1, 1, 1, 'realpath', 'File to import'),
+    array('threads', '', 0, 1, 1, 1, 'int', 'Number of threads (where possible)'),
+
+    array('all', '', 0, 1, 0, 0, 'bool', 'Do the complete process'),
+
+    array('create-db', '', 0, 1, 0, 0, 'bool', 'Create nominatim db'),
+    array('setup-db', '', 0, 1, 0, 0, 'bool', 'Build a blank nominatim db'),
+    array('import-data', '', 0, 1, 0, 0, 'bool', 'Import a osm file'),
+    array('osm2pgsql-cache', '', 0, 1, 1, 1, 'int', 'Cache size used by osm2pgsql'),
+    array('create-functions', '', 0, 1, 0, 0, 'bool', 'Create functions'),
+    array('enable-diff-updates', '', 0, 1, 0, 0, 'bool', 'Turn on the code required to make diff updates work'),
+    array('enable-debug-statements', '', 0, 1, 0, 0, 'bool', 'Include debug warning statements in pgsql commands'),
+    array('ignore-errors', '', 0, 1, 0, 0, 'bool', 'Continue import even when errors in SQL are present (EXPERT)'),
+    array('create-tables', '', 0, 1, 0, 0, 'bool', 'Create main tables'),
+    array('create-partition-tables', '', 0, 1, 0, 0, 'bool', 'Create required partition tables'),
+    array('create-partition-functions', '', 0, 1, 0, 0, 'bool', 'Create required partition triggers'),
+    array('no-partitions', '', 0, 1, 0, 0, 'bool', 'Do not partition search indices (speeds up import of single country extracts)'),
+    array('import-wikipedia-articles', '', 0, 1, 0, 0, 'bool', 'Import wikipedia article dump'),
+    array('load-data', '', 0, 1, 0, 0, 'bool', 'Copy data to live tables from import table'),
+    array('disable-token-precalc', '', 0, 1, 0, 0, 'bool', 'Disable name precalculation (EXPERT)'),
+    array('import-tiger-data', '', 0, 1, 0, 0, 'bool', 'Import tiger data (not included in \'all\')'),
+    array('calculate-postcodes', '', 0, 1, 0, 0, 'bool', 'Calculate postcode centroids'),
+    array('osmosis-init', '', 0, 1, 0, 0, 'bool', 'Generate default osmosis configuration'),
+    array('index', '', 0, 1, 0, 0, 'bool', 'Index the data'),
+    array('index-noanalyse', '', 0, 1, 0, 0, 'bool', 'Do not perform analyse operations during index (EXPERT)'),
+    array('create-search-indices', '', 0, 1, 0, 0, 'bool', 'Create additional indices required for search and update'),
+    array('create-country-names', '', 0, 1, 0, 0, 'bool', 'Create default list of searchable country names'),
+    array('drop', '', 0, 1, 0, 0, 'bool', 'Drop tables needed for updates, making the database readonly (EXPERIMENTAL)'),
+);
 
 // $aCMDOptions passed to getCmdOpt by reference
 getCmdOpt($_SERVER['argv'], $aCMDOptions, $aCMDResult, true, true);
index 0e12bb8671e4f3ed8c66612f8e2f52fb634a5084..9175a617a2c454dc6ccd93e8c1157b677f3ccd3a 100755 (executable)
@@ -4,13 +4,47 @@
 require_once(dirname(dirname(__FILE__)).'/settings/settings.php');
 require_once(CONST_BasePath.'/lib/init-cmd.php');
 require_once(CONST_BasePath.'/lib/setup_functions.php');
-require_once(CONST_BasePath.'/lib/classes/SetupClass.php');
+require_once(CONST_BasePath.'/lib/setup/SetupClass.php');
 
 ini_set('memory_limit', '800M');
 
 use Nominatim\Setup\SetupFunctions as SetupFunctions;
 
-$aCMDOptions = createUpdateArgvArray();
+// (long-opt, short-opt, min-occurs, max-occurs, num-arguments, num-arguments, type, help)
+$aCMDOptions
+= array(
+    'Import / update / index osm data',
+    array('help', 'h', 0, 1, 0, 0, false, 'Show Help'),
+    array('quiet', 'q', 0, 1, 0, 0, 'bool', 'Quiet output'),
+    array('verbose', 'v', 0, 1, 0, 0, 'bool', 'Verbose output'),
+
+    array('init-updates', '', 0, 1, 0, 0, 'bool', 'Set up database for updating'),
+    array('check-for-updates', '', 0, 1, 0, 0, 'bool', 'Check if new updates are available'),
+    array('no-update-functions', '', 0, 1, 0, 0, 'bool', 'Do not update trigger functions to support differential updates (assuming the diff update logic is already present)'),
+    array('import-osmosis', '', 0, 1, 0, 0, 'bool', 'Import updates once'),
+    array('import-osmosis-all', '', 0, 1, 0, 0, 'bool', 'Import updates forever'),
+    array('no-index', '', 0, 1, 0, 0, 'bool', 'Do not index the new data'),
+
+    array('calculate-postcodes', '', 0, 1, 0, 0, 'bool', 'Update postcode centroid table'),
+
+    array('import-file', '', 0, 1, 1, 1, 'realpath', 'Re-import data from an OSM file'),
+    array('import-diff', '', 0, 1, 1, 1, 'realpath', 'Import a diff (osc) file from local file system'),
+    array('osm2pgsql-cache', '', 0, 1, 1, 1, 'int', 'Cache size used by osm2pgsql'),
+
+    array('import-node', '', 0, 1, 1, 1, 'int', 'Re-import node'),
+    array('import-way', '', 0, 1, 1, 1, 'int', 'Re-import way'),
+    array('import-relation', '', 0, 1, 1, 1, 'int', 'Re-import relation'),
+    array('import-from-main-api', '', 0, 1, 0, 0, 'bool', 'Use OSM API instead of Overpass to download objects'),
+
+    array('index', '', 0, 1, 0, 0, 'bool', 'Index'),
+    array('index-rank', '', 0, 1, 1, 1, 'int', 'Rank to start indexing from'),
+    array('index-instances', '', 0, 1, 1, 1, 'int', 'Number of indexing instances (threads)'),
+
+    array('deduplicate', '', 0, 1, 0, 0, 'bool', 'Deduplicate tokens'),
+    array('recompute-word-counts', '', 0, 1, 0, 0, 'bool', 'Compute frequency of full-word search terms'),
+    array('no-npi', '', 0, 1, 0, 0, 'bool', '(obsolete)'),
+);
+
 getCmdOpt($_SERVER['argv'], $aCMDOptions, $aResult, true, true);
 
 if (!isset($aResult['index-instances'])) $aResult['index-instances'] = 1;
@@ -72,7 +106,7 @@ if ($aResult['init-updates']) {
 
     if (!$aResult['no-update-functions']) {
         // instantiate setupClass to use the function therein
-        $cSetup = new SetupFunctions($aResult);
+        $cSetup = new SetupFunctions($aResult, 'update');
         $cSetup->createFunctions();
     }