IPP Software Navigation Tools IPP Links Communication Pan-STARRS Links

Changeset 38449


Ignore:
Timestamp:
Jun 12, 2015, 9:46:43 PM (11 years ago)
Author:
eugene
Message:

merge from trunk

Location:
branches/eam_branches/ipp-20150419/ippconfig
Files:
17 edited
1 copied

Legend:

Unmodified
Added
Removed

  • branches/eam_branches/ipp-20150419/ippconfig

  • branches/eam_branches/ipp-20150419/ippconfig/gpc1/ppStack.config

    r38062 r38449  
    357357
    358358
    359 STACK_MD_PV3_NIGHT_1DG  METADATA   ## Revised MD 8 input NIGHT stacks for PV3 -- not complete
     359STACK_MD_PV3_NIGHT_1DG  METADATA   ## Revised MD 8 input NIGHT stacks for PV3 -- no time to test, so similar to original but 1DG
    360360    OUTPUT.NOCOMP             BOOL  FALSE
    361361    OUTPUT.LOGFLUX            BOOL  FALSE
    … …  
    365365    PSF.INPUT.THRESH        F32   NAN
    366366    PSF.INPUT.ASYMMETRY     F32   NAN
    367     MATCH.REJ               F32   4.0   # need ot tune?
    368     SAFE                    BOOL  FALSE
    369     ##
     367    MATCH.REJ               F32   4.0       # need ot tune?
     368    SAFE                    BOOL  TRUE      # Play safe when combining small number of values?
    370369    PSF.TARGET.AS.MAX       BOOL  TRUE      # Set the target PSF FWHM as the maximum of accepted input FWHM values.
    371370    PSF.TARGET.AS.MAX.EPSILON F32 0.1       # Amount to set the target PSF FWHM larger than the maximum input. Target = eps + max(input)
    372     THRESHOLD.MASK  F32     0.1             # Threshold for mask deconvolution (0..1)
    373     COMBINE.ITER    F32     0.5             # Number of rejection iterations per input
    374     COMBINE.REJ     F32     3.0             # Rejection threshold in combination (sigma)
    375     COMBINE.SYS     F32     0.1             # Relative systematic error in combination
    376     COMBINE.DISCARD F32     0.2             # Discard fraction for Olympic weighted mean
    377     IMAGE.REJ       F32     0.1             # Rejected pixel fraction threshold for rejecting entire image
    378     NMINPIX         S32     4               # Minimum input per pixel
    379     MASK.VAL        STR     SUSPECT,MASK.VALUE,CONV.BAD,GHOST # Mask value of input bad pixels
     371    ## -- extra masking not tested and likely not want for small Nin stack
     372    #THRESHOLD.MASK  F32     0.1             # Threshold for mask deconvolution (0..1)
     373    #COMBINE.ITER    F32     0.5             # Number of rejection iterations per input
     374    #COMBINE.REJ     F32     3.0             # Rejection threshold in combination (sigma)
     375    #COMBINE.SYS     F32     0.1             # Relative systematic error in combination
     376    #COMBINE.DISCARD F32     0.2             # Discard fraction for Olympic weighted mean
     377    #IMAGE.REJ       F32     0.1             # Rejected pixel fraction threshold for rejecting entire image
     378    #MASK.VAL        STR     SUSPECT,MASK.VALUE,CONV.BAD,GHOST # Mask value of input bad pixels
     379    ## --
     380    NMINPIX         S32     1               # Minimum input per pixel
    380381    MASK.BLANKBORDER S32    20              # Mask blank border in final stack output
    381382    BSCALEOFFSET    BOOL    FALSE           # MUST be FALSE for PV3

  • branches/eam_branches/ipp-20150419/ippconfig/gpc1/psastro.config

    r38117 r38449  
    398398END
    399399
     400SNIA_ASTRO METADATA
     401   ZERO.POINT.USE.MEAN         BOOL  TRUE
     402   PSASTRO.MAX.ALLOWED.FWHM    F32   16
     403   PSASTRO.CATDIR              STR   PS1.REF.20140713
     404END
     405
    400406MD_ASTRO METADATA
    401407   ZERO.POINT.BY.EXPOSURE      BOOL  TRUE

  • branches/eam_branches/ipp-20150419/ippconfig/gpc2/Makefile.am

    r37413 r38449  
    1111        ppMerge.config \
    1212        psphot.config \
    13         psastro.config
     13        psastro.config \
     14        nightly_science.config
    1415
    1516install_DATA = $(install_files)

  • branches/eam_branches/ipp-20150419/ippconfig/gpc2/camera.config

    r37413 r38449  
    112112        PSASTRO         STR     gpc2/psastro.config
    113113        PSPHOT          STR     gpc2/psphot.config
     114        NIGHTLY_SCIENCE STR     gpc2/nightly_science.config
    114115#       PSWARP          STR     gpc2/pswarp.config
    115116#       PSVIDEOPHOT     STR     gpc2/psvideophot.config

  • branches/eam_branches/ipp-20150419/ippconfig/gpc2/ppImage.config

    r37413 r38449  
    708708# Overscan, bias, dark, shutter, flat-field, fringe, photom, astrom
    709709PPIMAGE_DET_ONLY   METADATA
    710   BASE.FITS        BOOL    FALSE           # Save base detrended image?
     710  BASE.FITS        BOOL    TRUE            # Save base detrended image?
    711711  BASE.MASK.FITS   BOOL    FALSE           # Save base detrended image?
    712712  BASE.VARIANCE.FITS BOOL  FALSE           # Save base detrended image?
    713   CHIP.FITS        BOOL    TRUE            # Save chip-mosaic-ed image?
    714   CHIP.MASK.FITS   BOOL    TRUE            # Save chip-mosaic-ed image?
    715   CHIP.VARIANCE.FITS BOOL  TRUE            # Save chip-mosaic-ed image?
     713  CHIP.FITS        BOOL    FALSE            # Save chip-mosaic-ed image?
     714  CHIP.MASK.FITS   BOOL    FALSE            # Save chip-mosaic-ed image?
     715  CHIP.VARIANCE.FITS BOOL  FALSE            # Save chip-mosaic-ed image?
    716716  OVERSCAN         BOOL    TRUE            # Overscan subtraction
    717717  NONLIN           BOOL    FALSE           # apply non-linearity correction
    … …  
    719719  DARK             BOOL    TRUE            # Dark subtraction
    720720  SHUTTER          BOOL    FALSE           # Shutter correction
    721   FLAT             BOOL    TRUE            # Flat-field normalisation
     721  FLAT             BOOL    FALSE           # Flat-field normalisation
    722722  MASK             BOOL    TRUE            # Mask bad pixels
    723723  MASK.BUILD       BOOL    TRUE            # Build internal mask?
    724724  FRINGE           BOOL    FALSE           # Fringe subtraction
    725   BIN1.FITS        BOOL    TRUE            # Save 1st binned chip image?
    726   BIN2.FITS        BOOL    TRUE            # Save 2nd binned chip image?
     725  BIN1.FITS        BOOL    FALSE           # Save 1st binned chip image?
     726  BIN2.FITS        BOOL    FALSE           # Save 2nd binned chip image?
    727727  FPA1.FITS        BOOL    FALSE           # Save 1st binned fpa image?
    728728  FPA2.FITS        BOOL    FALSE           # Save 2nd binned fpa image?

  • branches/eam_branches/ipp-20150419/ippconfig/recipes/Makefile.am

    r34212 r38449  
    3333        nightly_science.config \
    3434        ppBackground.mdc \
    35         pstamp.config
     35        pstamp.config \
     36        remote_hosts.config
    3637
    3738install_DATA = $(install_files)

  • branches/eam_branches/ipp-20150419/ippconfig/recipes/filerules-mef.mdc

    r36838 r38449  
    9696PSPHOT.STACK.EXPNUM.RAW   INPUT    @FILES        CHIP       EXPNUM     
    9797PSPHOT.STACK.PSF.RAW      INPUT    @FILES        CHIP       PSF       
     98PSPHOT.STACK.BACKMDL.RAW    INPUT    @FILES        CHIP       IMAGE       
    9899PSPHOT.STACK.INPUT.CNV    INPUT    @FILES        CHIP       IMAGE
    99100PSPHOT.STACK.MASK.CNV     INPUT    @FILES        CHIP       MASK     

  • branches/eam_branches/ipp-20150419/ippconfig/recipes/filerules-simple.mdc

    r36838 r38449  
    6767PSPHOT.STACK.EXPNUM.RAW   INPUT    @FILES        CHIP       MASK     
    6868PSPHOT.STACK.PSF.RAW      INPUT    @FILES        CHIP       PSF       
     69PSPHOT.STACK.BACKMDL.RAW  INPUT    @FILES        CHIP       IMAGE       
    6970PSPHOT.STACK.INPUT.CNV    INPUT    @FILES        CHIP       IMAGE
    7071PSPHOT.STACK.MASK.CNV     INPUT    @FILES        CHIP       MASK     

  • branches/eam_branches/ipp-20150419/ippconfig/recipes/filerules-split.mdc

    r37078 r38449  
    8787PSPHOT.STACK.EXPNUM.RAW   INPUT    @FILES        CHIP       EXPNUM     
    8888PSPHOT.STACK.PSF.RAW      INPUT    @FILES        CHIP       PSF       
     89PSPHOT.STACK.BACKMDL.RAW  INPUT    @FILES        CHIP       IMAGE       
    8990PSPHOT.STACK.INPUT.CNV    INPUT    @FILES        CHIP       IMAGE
    9091PSPHOT.STACK.MASK.CNV     INPUT    @FILES        CHIP       MASK     
    … …  
    190191PPIMAGE.CONFIG               OUTPUT {OUTPUT}.{CHIP.NAME}.ppImage.mdc  TEXT            NONE       CHIP       TRUE      NONE
    191192                                                                                                     
     193PPIMAGE.OUTPUT.NOCOMP        OUTPUT {OUTPUT}.{CHIP.NAME}.raw.fits     IMAGE           RAW_IMG    CHIP       TRUE      NONE
     194# PPIMAGE.OUTPUT.NOCOMP        OUTPUT {OUTPUT}.{CHIP.NAME}.fits            IMAGE           RAW_IMG    CHIP       TRUE      NONE
     195
    192196PPIMAGE.CHIP                 OUTPUT {OUTPUT}.{CHIP.NAME}.ch.fits      IMAGE           COMP_IMG   CHIP       TRUE      NONE
    193197PPIMAGE.CHIP.DETMASK         OUTPUT {OUTPUT}.{CHIP.NAME}.ch.fits      IMAGE           NONE       CHIP       TRUE      NONE

  • branches/eam_branches/ipp-20150419/ippconfig/recipes/fitstypes.mdc

    r31633 r38449  
    5151SKY_WEIGHT      METADATA
    5252        BITPIX          S32     -32
     53END
     54
     55# Uncompressed positive image
     56RAW_IMG METADATA
     57#       BITPIX          S32     -32
     58        BITPIX          S32     16
     59        SCALING         STR     MANUAL
     60        BSCALE          F32     1.0
     61        BZERO           F32     32768.0
     62        STDEV.BITS      S32     4
     63        STDEV.NUM       F32     10
     64        COMPRESSION     STR     NONE
     65        TILE.X          S32     0
     66        TILE.Y          S32     1
     67        TILE.Z          S32     1
     68        NOISE           S32     8
    5369END
    5470

  • branches/eam_branches/ipp-20150419/ippconfig/recipes/nightly_science.config

    r38023 r38449  
    9494  DIFFABLE    BOOL FALSE
    9595  OFFNIGHT_DIFFS BOOL FALSE
     96  REDUCTION STR SNIA_DEFAULT
    9697  ## change days till cleanup
    9798  DIST      S16 300

  • branches/eam_branches/ipp-20150419/ippconfig/recipes/ppImage.config

    r38274 r38449  
    4040CHECK.CTE          BOOL    FALSE           # measure CTE errors?
    4141CHECK.NOISE        BOOL    FALSE         
     42SQUASH.NANS        BOOL    FALSE         
    4243USE.DEBURNED.IMAGE BOOL    FALSE           # use burntool-repaired image?
    4344USE.BEST.BURNTOOL  BOOL    FALSE           # require the best burntooled data
    … …  
    584585  BIN1.FITS        BOOL    TRUE            # Save 1st binned chip image?
    585586  BIN2.FITS        BOOL    TRUE            # Save 2nd binned chip image?
     587  BACKGROUND       BOOL    TRUE            # Subtract background?
    586588END
    587589

  • branches/eam_branches/ipp-20150419/ippconfig/recipes/psastro.config

    r38062 r38449  
    205205DVO.GETSTAR.FIXED.ZEROPT      F32       0.0     
    206206
     207TRANSFORM.GALAXY.SHAPE.ERRORS   BOOL     FALSE
     208
    207209ZERO.POINT.BY.EXPOSURE          BOOL     TRUE
    208210ZERO.POINT.USE.MEAN             BOOL     TRUE
    … …  
    286288END
    287289
     290SNIA_ASTRO METADATA
     291END
     292
    288293CNP_ASTRO_PV3 METADATA
    289294END

  • branches/eam_branches/ipp-20150419/ippconfig/recipes/reductionClasses.mdc

    r38117 r38449  
    226226        FULLFORCE_PSPHOT  STR   FULLFORCE_WARP
    227227END
     228
     229# SNIa basic/nightly science analysis
     230SNIA_DEFAULT         METADATA
     231        CHIP_PPIMAGE      STR     CHIP
     232        CHIP_PSPHOT       STR     CHIP
     233        WARP_PSWARP       STR     WARP
     234        STACK_PPSTACK     STR     STACK
     235        STACK_PPSUB       STR     STACK
     236        STACK_PSPHOT      STR     STACK
     237        DIFF_PPSUB        STR     DIFF
     238        DIFF_PSPHOT       STR     DIFF
     239        JPEG_BIN1         STR     PPIMAGE_J1
     240        JPEG_BIN2         STR     PPIMAGE_J2
     241        FAKEPHOT          STR     FAKEPHOT
     242        ADDSTAR           STR     ADDSTAR
     243        PSASTRO           STR     SNIA_ASTRO
     244        STACKPHOT_PSPHOT  STR     STACKPHOT
     245        STACKPHOT_PPSUB   STR     STACKPHOT
     246        STACKPHOT_PPSTACK STR     STACKPHOT
     247        STACKPHOT_SINGLE_PSPHOT  STR     STACKPHOT_SINGLE
     248        BACKGROUND_PPBACKGROUND STR     BACKGROUND
     249        BACKGROUND_PSWARP       STR     BACKGROUND
     250        PSVIDEOPHOT             STR     PSVIDEOPHOT
     251        STATICSKY_CALIBRATION   STR     STATICSKY_CAL
     252        FULLFORCE_PSPHOT  STR   FULLFORCE_WARP
     253END
     254
    228255
    229256# basic science analysis
    … …  
    756783      STACK_PSPHOT    STR      STACK
    757784      STACKPHOT_PSPHOT        STR     STACKPHOT
     785      STACKPHOT_PPSUB         STR     STACKPHOT_1DG
     786      STACKPHOT_PPSTACK       STR     STACKPHOT
     787      STACKPHOT_SINGLE_PSPHOT STR     STACKPHOT_SINGLE
    758788      STATICSKY_CALIBRATION   STR     STATICSKY_NIGHTCAL
    759789END

  • branches/eam_branches/ipp-20150419/ippconfig/recipes/remote_hosts.config

    r38144 r38449  
    55
    66     SEC_HOST MULTI
    7        SEC_HOST STR     mu-fe1
    8        SEC_HOST STR     mu-fe2
    9        SEC_HOST STR     mu-fe3
    10        SEC_HOST STR     mu-fe4
     7     SEC_HOST METADATA
     8       SEC_HOST1        STR     mu-fe1
     9       SEC_HOST2        STR     mu-fe2
     10       SEC_HOST3        STR     mu-fe3
     11       SEC_HOST4        STR     mu-fe4
    1112     END
    1213
    1314     IPP_PATH        STR     /turquoise/usr/projects/cosmo/mswarren/ipp/
    1415     REMOTE_ROOT     STR     /scratch3/watersc1/
    15      REMOTE_HOSTNAME STR     LANL/Mustang
     16     REMOTE_HOSTNAME STR     LANL/Mustang       
     17
     18# This is used to decide if we bring back warp images, and if stack should ask for local copies.
     19     TRANSFER_WARP_IMAGES BOOL FALSE
     20
     21     SCHEDULER       STR     MOAB
     22
     23     PROC_PER_NODE   S32     24
     24     MIN_NODES       S32     1
     25     MAX_NODES       S32     1000
     26     MIN_TIME        S32     1
     27     MAX_TIME        S32     8
    1628END
    1729
    … …  
    2032
    2133     SEC_HOST MULTI
     34     SEC_HOST METADATA
    2235     END
    2336
    … …  
    2538     REMOTE_ROOT     STR     /lus/scratch/watersc/
    2639     REMOTE_HOSTNAME STR     UH/Cray
     40
     41     TRANSFER_WARP_IMAGES BOOL FALSE
     42
     43     SCHEDULER       STR     SLURM
     44
     45     PROC_PER_NODE   S32     20
     46     MIN_NODES       S32     1
     47     MAX_NODES       S32     10
     48     MIN_TIME        S32     1
     49     MAX_TIME        S32     8
    2750END     

  • branches/eam_branches/ipp-20150419/ippconfig/system.config

    r37415 r38449  
    6666        PSVIDEOPHOT     STR             recipes/psvideophot.config # video cell photometry
    6767        PSTAMP          STR             recipes/pstamp.config       # postage stamp server
     68        REMOTE          STR             recipes/remote_hosts.config # Remote supercomputer processing
    6869END
Note: See TracChangeset for help on using the changeset viewer.