IPP Software Navigation Tools IPP Links Communication Pan-STARRS Links

Ignore:
Timestamp:
Apr 2, 2013, 3:01:21 PM (13 years ago)
Author:
eugene
Message:

merge changes from trunk

Location:
branches/eam_branches/ipp-20130307
Files:
5 edited
2 copied

Legend:

Unmodified
Added
Removed

  • branches/eam_branches/ipp-20130307

  • branches/eam_branches/ipp-20130307/ippTasks

  • branches/eam_branches/ipp-20130307/ippTasks/addstar.pro

    r34804 r35350  
    66check.globals
    77
     8
     9if ($?ADDSTAGES:n == 0)       set ADDSTAGES:n = 0
     10
     11
     12
    813book init addPendingExp
    914
    … …  
    1722
    1823macro addstar.on
    19   task addstar.exp.load.stack
    20     active true
    21   end
    22   task addstar.exp.load.cam
    23     active true
    24   end
    25   task addstar.exp.load.staticsky
    26     active true 
    27   end
    28   task addstar.exp.load.skycal
     24  task addstar.exp.load
    2925    active true
    3026  end
    … …  
    3531
    3632macro addstar.off
    37   task addstar.exp.load.stack
    38     active false
    39   end
    40   task addstar.exp.load.cam
    41     active false
    42   end
    43   task addstar.exp.load.staticsky
    44     active false
    45   end
    46   task addstar.exp.load.skycal
     33  task addstar.exp.load
    4734    active false
    4835  end
    … …  
    8370
    8471
     72#addstar stages
     73
     74macro add.addstages
     75  if ($0 != 2)
     76    echo "USAGE: add.addstages (addstages)"
     77    break
     78  end
     79  if ($?ADDSTAGES:n == 0)
     80    list ADDSTAGES -add $1
     81    return
     82  end
     83
     84  local found
     85  $found = 0
     86  for i 0 $ADDSTAGES:n
     87    if ($ADDSTAGES:$i == $1)
     88      $found = 1
     89      echo "$ADDSTAGES:$i set"
     90      last
     91    end
     92  end
     93 
     94  if ($found == 0)
     95    list ADDSTAGES -add $1
     96  end
     97end
     98
     99macro del.addstages
     100  if ($0 != 2)
     101    echo "USAGE: del.addstages (addstages)"
     102    break
     103  end
     104  if ($?ADDSTAGES:n == 0)
     105    return
     106  end
     107
     108  list ADDSTAGES -del $1
     109end
     110
     111macro show.addstages
     112  if ($0 != 1)
     113    echo "USAGE: show.addstages"
     114    break
     115  end
     116  if ($?ADDSTAGES:n == 0)
     117    echo "no addstar stages defined"
     118  end
     119  if ($ADDSTAGES:n == 0)
     120    echo "no addstar stages defined"
     121  end
     122
     123  local i
     124  for i 0 $ADDSTAGES:n
     125    echo $ADDSTAGES:$i
     126  end
     127end
     128
     129macro stuff
     130   echo $LOADEXEC_ADD
     131   echo $LOADPOLL
     132end
     133
    85134# this variable will cycle through the known database names
    86135$addstar_DB = 0
     136$addstar_stages_DB = 0
    87137#this may not work for more databases (addstar) will do that later)
    88138$addstar_revert_DB_C = 0
    … …  
    92142$addstar_revert_DB_SC = 0
    93143
    94 $LOADEXEX_ADD = 300
    95 
     144#$LOADEXEC_ADD = 300
     145$LOADEXEC_ADD = 10
    96146
    97147
    … …  
    99149# new entries are added to addPendingExp
    100150# skip already-present entries
    101 task           addstar.exp.load.stack
     151task           addstar.exp.load
    102152  host         local
    103153
    … …  
    111161
    112162  task.exec
    113    # if ($LABEL:n == 0) break
    114     $run = addtool -pendingexp -stage stack
    115     if ($DB:n == 0)
    116       option DEFAULT
    117     else
    118       # save the DB name for the exit tasks
    119       option $DB:$addstar_DB
    120       $run = $run -dbname $DB:$addstar_DB
    121       $addstar_DB ++
    122       if ($addstar_DB >= $DB:n) set addstar_DB = 0
    123     end
     163    #if no stages defined we can't run
     164    if ($ADDSTAGES:n == 0) echo "what"
     165 #   if ($ADDSTAGES:n == 0) break
     166    $run = addtool -pendingexp
     167   
     168    #option $ADDSTAGES:$addstar_stages_DB
     169    $run = $run -stage $ADDSTAGES:$addstar_stages_DB 
     170    option $DB:$addstar_DB
     171    $run = $run -dbname $DB:$addstar_DB
     172    $addstar_stages_DB ++
     173      if ($addstar_stages_DB >= $ADDSTAGES:n)
     174         set addstar_stages_DB = 0
     175         $addstar_DB ++
     176         if ($addstar_DB >= $DB:n) set addstar_DB = 0
     177         #go to next stage. if run out of stages, go to 0 stage and
     178         #cycle through dbname, if run out of dbnames, go to 0 dbname
     179      end
    124180    add_poll_args run
    125181    add_poll_labels run
     182    echo $run
    126183    command $run
    127184  end
    … …  
    153210  end
    154211end
    155 
    156 task           addstar.exp.load.cam
    157   host         local
    158 
    159   periods      -poll $LOADPOLL
    160   periods      -exec $LOADEXEC_ADD
    161   periods      -timeout 300
    162   npending     1
    163 
    164   stdout NULL
    165   stderr $LOGDIR/addstar.exp.log
    166 
    167   task.exec
    168    # if ($LABEL:n == 0) break
    169     $run = addtool -pendingexp -stage cam
    170     if ($DB:n == 0)
    171       option DEFAULT
    172     else
    173       # save the DB name for the exit tasks
    174       option $DB:$addstar_DB
    175       $run = $run -dbname $DB:$addstar_DB
    176       $addstar_DB ++
    177       if ($addstar_DB >= $DB:n) set addstar_DB = 0
    178     end
    179     add_poll_args run
    180     add_poll_labels run
    181     command $run
    182   end
    183 
    184   # success
    185   task.exit    0
    186     # convert 'stdout' to book format
    187     ipptool2book stdout addPendingExp -key add_id -uniq -setword dbname $options:0 -setword pantaskState INIT
    188     if ($VERBOSE > 2)
    189       book listbook addPendingExp
    190     end
    191 
    192     # delete existing entries in the appropriate pantaskStates
    193     process_cleanup addPendingExp
    194   end
    195 
    196   # default exit status
    197   task.exit    default
    198     showcommand failure
    199   end
    200 
    201   task.exit    crash
    202     showcommand crash
    203   end
    204 
    205   # operation times out?
    206   task.exit    timeout
    207     showcommand timeout
    208   end
    209 end
    210 
    211 task           addstar.exp.load.staticsky
    212   host         local
    213   periods      -poll $LOADPOLL
    214   periods      -exec $LOADEXEC_ADD
    215   periods      -timeout 300
    216   npending     1
    217 
    218   stdout NULL
    219   stderr $LOGDIR/addstar.exp.log
    220 
    221   task.exec
    222    # if ($LABEL:n == 0) break
    223     $run = addtool -pendingexp -stage staticsky
    224     if ($DB:n == 0)
    225       option DEFAULT
    226     else
    227       # save the DB name for the exit tasks
    228       option $DB:$addstar_DB
    229       $run = $run -dbname $DB:$addstar_DB
    230       $addstar_DB ++
    231       if ($addstar_DB >= $DB:n) set addstar_DB = 0
    232     end
    233     add_poll_args run
    234     add_poll_labels run
    235     command $run
    236   end
    237 
    238   # success
    239   task.exit    0
    240     # convert 'stdout' to book format
    241     ipptool2book stdout addPendingExp -key add_id -uniq -setword dbname $options:0 -setword pantaskState INIT
    242     if ($VERBOSE > 2)
    243       book listbook addPendingExp
    244     end
    245 
    246     # delete existing entries in the appropriate pantaskStates
    247     process_cleanup addPendingExp
    248   end
    249 
    250   # default exit status
    251   task.exit    default
    252     showcommand failure
    253   end
    254 
    255   task.exit    crash
    256     showcommand crash
    257   end
    258 
    259   # operation times out?
    260   task.exit    timeout
    261     showcommand timeout
    262   end
    263 end
    264 
    265 task           addstar.exp.load.skycal
    266   host         local
    267   periods      -poll $LOADPOLL
    268   periods      -exec $LOADEXEC_ADD
    269   periods      -timeout 300
    270   npending     1
    271 
    272   stdout NULL
    273   stderr $LOGDIR/addstar.exp.log
    274 
    275   task.exec
    276    # if ($LABEL:n == 0) break                                                                                 
    277     $run = addtool -pendingexp -stage skycal
    278     if ($DB:n == 0)
    279       option DEFAULT
    280     else
    281       # save the DB name for the exit tasks                                                                   
    282       option $DB:$addstar_DB
    283       $run = $run -dbname $DB:$addstar_DB
    284       $addstar_DB ++
    285       if ($addstar_DB >= $DB:n) set addstar_DB = 0
    286     end
    287     add_poll_args run
    288     add_poll_labels run
    289     command $run
    290   end
    291 
    292   # success                                                                                                   
    293   task.exit    0
    294     # convert 'stdout' to book format                                                                         
    295     ipptool2book stdout addPendingExp -key add_id -uniq -setword dbname $options:0 -setword pantaskState INIT
    296     if ($VERBOSE > 2)
    297       book listbook addPendingExp
    298     end
    299 
    300     # delete existing entries in the appropriate pantaskStates                                               
    301     process_cleanup addPendingExp
    302   end
    303 
    304   # default exit status                                                                                       
    305   task.exit    default
    306     showcommand failure
    307   end
    308 
    309   task.exit    crash
    310     showcommand crash
    311   end
    312 
    313   # operation times out?                                                                                     
    314   task.exit    timeout
    315     showcommand timeout
    316   end
    317 end
    318 
    319212
    320213# run the addstar script on pending exposures

  • branches/eam_branches/ipp-20130307/ippTasks/minidvodb.pro

    r33706 r35350  
    145145  book setword MINIDVODB_PREMERGE $1 MINIDVODB_GROUP $1
    146146  book setword MINIDVODB_PREMERGE $1 DVODB $3
     147  book setword MINIDVODB_PREMERGE $1 CAMERA $5
    147148  book setword MINIDVODB_PREMERGE $1 STATE PENDING
    148149  #active 
    … …  
    443444    book getword minidvodbPreMergelist $pageName minidvodb_group -var MINIDVODB_GROUP
    444445    book getword minidvodbPreMergelist $pageName minidvodb_path -var MINIDVODB_PATH
     446    book getword minidvodbPreMergelist $pageName camera -var CAMERA
    445447    book getword minidvodbPreMergelist $pageName state -var STATE
    446448    stdout $LOGDIR/minidvodb.premerge.run.log
    447449    stderr $LOGDIR/minidvodb.premerge.run.log
    448450
    449     $run = minidvodb_premerge.pl --camera GPC1 --minidvodb $MINIDVODB_PATH --minidvodb_group $MINIDVODB_GROUP --minidvodb_id $MINIDVODB_ID
     451    $run = minidvodb_premerge.pl --camera $CAMERA --minidvodb $MINIDVODB_PATH --minidvodb_group $MINIDVODB_GROUP --minidvodb_id $MINIDVODB_ID
    450452   
    451453  if ($DB:n == 0)

  • branches/eam_branches/ipp-20130307/ippTasks/survey.pro

    r34976 r35350  
    1818 book create SURVEY_STATICSKYSINGLE
    1919 book create SURVEY_SKYCAL
     20 book create SURVEY_LAPGROUP
    2021 $haveSurveyBooks = TRUE
    2122end
    … …  
    3334$SURVEY_PUBLISH_DB = 0
    3435$SURVEY_SKYCAL_DB = 0
     36$SURVEY_LAPGROUP_DB = 0
    3537$SURVEY_STATICSKYSINGLE_DB = 0
    3638$SURVEY_EXEC = 120
    … …  
    7880    active true
    7981  end
     82  task survey.lapgroup
     83    active true
     84  end
    8085end
    8186
    … …  
    118123  end
    119124  task survey.skycal
     125    active false
     126  end
     127  task survey.lapgroup
    120128    active false
    121129  end
    … …  
    494502macro survey.show.skycal
    495503  if ($0 != 1)
    496     echo "USAGE: survey.show.skyacl"
     504    echo "USAGE: survey.show.skycal"
    497505    break
    498506  end
    499507  book listbook SURVEY_SKYCAL
     508end
     509
     510macro survey.add.lapgroup
     511  if ($0 != 3)
     512    echo "USAGE: survey.add.lapgroup (label) (seq_id)"
     513    break
     514  end
     515  book newpage SURVEY_LAPGROUP $1
     516  book setword SURVEY_LAPGROUP $1 LABEL $1
     517  book setword SURVEY_LAPGROUP $1 SEQ_ID $2
     518  book setword SURVEY_LAPGROUP $1 STATE PENDING
     519end
     520
     521macro survey.del.lapgroup
     522  if ($0 != 2)
     523    echo "USAGE: survey.del.lapgroup (label)"
     524    break
     525  end
     526  book delpage SURVEY_LAPGROUP $1
     527end
     528
     529macro survey.show.lapgroup
     530  if ($0 != 1)
     531    echo "USAGE: survey.show.lapgroup"
     532    break
     533  end
     534  book listbook SURVEY_LAPGROUP
    500535end
    501536
    … …  
    15611596  end
    15621597end
     1598
     1599task survey.lapgroup
     1600  host local
     1601 
     1602  periods      -poll $SURVEY_POLL
     1603  periods      -exec $SURVEY_EXEC
     1604  periods      -timeout $SURVEY_TIMEOUT
     1605  npending     1
     1606
     1607  stdout $LOGDIR/survey.lapgroup.log
     1608  stderr $LOGDIR/survey.lapgroup.log
     1609
     1610  task.exec
     1611    book npages SURVEY_LAPGROUP -var N
     1612    if ($N == 0)
     1613#      echo "No labels for processing"
     1614      break
     1615    endif
     1616
     1617    book getpage SURVEY_LAPGROUP 0 -var label -key STATE NEW
     1618    if ("$label" == "NULL")
     1619      # All labels have been done --- reset
     1620#      echo "Resetting labels"
     1621      for i 0 $N
     1622        book getpage SURVEY_LAPGROUP $i -var label
     1623        book setword SURVEY_LAPGROUP $label STATE NEW
     1624      end
     1625      book getpage SURVEY_LAPGROUP 0 -var label -key STATE NEW
     1626
     1627      # Select different database
     1628      $SURVEY_LAPGROUP ++
     1629      if ($SURVEY_LAPGROUP >= $DB:n) set SURVEY_LAPGROUP = 0
     1630    end
     1631
     1632    book setword SURVEY_LAPGROUP $label STATE DONE
     1633    book getword SURVEY_LAPGROUP $label SEQ_ID -var SEQ_ID
     1634
     1635    # For now the list of filters
     1636    $run = laptool -definegroup -seq_id $SEQ_ID -set_label $label -filter g.00000 -filter r.00000 -filter i.00000 -filter z.00000 -filter y.00000
     1637
     1638    if ($DB:n == 0)
     1639      option DEFAULT
     1640    else
     1641      $run = $run -dbname $DB:$SURVEY_LAPGROUP_DB
     1642      option $DB:$SURVEY_LAPGROUP_DB
     1643    end
     1644   
     1645    # echo $run
     1646    command $run
     1647  end
     1648
     1649  # success
     1650  task.exit    0
     1651#    echo "Success"
     1652  end
     1653
     1654  # locked list
     1655  task.exit    default
     1656    showcommand failure
     1657  end
     1658
     1659  task.exit    crash
     1660    showcommand crash
     1661  end
     1662
     1663  # operation times out?
     1664  task.exit    timeout
     1665    showcommand timeout
     1666  end
     1667end
Note: See TracChangeset for help on using the changeset viewer.