IPP Software Navigation Tools IPP Links Communication Pan-STARRS Links

Changes between Version 5 and Version 6 of 201103_Optimization


Ignore:
Timestamp:
Mar 4, 2011, 2:33:37 PM (15 years ago)
Author:
Serge CHASTEL
Comment:

--

Legend:

Unmodified
Added
Removed
Modified

  • 201103_Optimization

    v5 v6  
    22
    33= Nebulous Optimization =
    4  * Run as ipp on ippdb00 within a screen session
     4 * Run as ipp on ippdb00
    55 * Each table was optimized one after the other
    66   See attached log file: log.nebulous.optimization
    … …  
    2020
    2121= GPC1 Optimization =
    22  *
     22 * Run as ipp on ippdb01
     23 * Each table was optimized one after the other
     24   See attached log file: log.gpc1.optimization
     25 * Size variation:
     26||                      Filename||      Before||       After||   Change||||
     27||                     Label.ibd||      131072||      131072||||||
     28||                   addMask.ibd||       98304||       98304||||||
     29||           addProcessedExp.ibd||    26214400||    26214400||||||
     30||                    addRun.ibd||    58720256||    54525952||    -7.1%||     ||
     31||                     calDB.ibd||      114688||      114688||||||
     32||                    calRun.ibd||      131072||      131072||||||
     33||                   camMask.ibd||       98304||       98304||||||
     34||           camProcessedExp.ibd||   100663296||    88080384||   -12.5%||    !||
     35||                    camRun.ibd||   117440512||   109051904||    -7.1%||     ||
     36||      chipBackgroundImfile.ibd||    54525952||    37748736||   -30.8%||   !!||
     37||         chipBackgroundRun.ibd||     8388608||      819200||   -90.2%||  !!!||
     38||                chipImfile.ibd||   843055104||   843055104||||||
     39||                  chipMask.ibd||       98304||       98304||||||
     40||       chipProcessedImfile.ibd||  8573157376||  7004487680||   -18.3%||    !||
     41||                   chipRun.ibd||   134217728||   113246208||   -15.6%||    !||
     42||                 dbversion.ibd||       98304||       98304||||||
     43||               detInputExp.ibd||    12582912||    11534336||    -8.3%||     ||
     44||          detNormalizedExp.ibd||      114688||      114688||||||
     45||       detNormalizedImfile.ibd||    12582912||    10485760||   -16.7%||    !||
     46||   detNormalizedStatImfile.ibd||      835584||      655360||   -21.6%||    !||
     47||           detProcessedExp.ibd||    10485760||    10485760||||||
     48||        detProcessedImfile.ibd||   373293056||   264241152||   -29.2%||   !!||
     49||       detRegisteredImfile.ibd||     9437184||     9437184||||||
     50||               detResidExp.ibd||    11534336||    10485760||    -9.1%||     ||
     51||            detResidImfile.ibd||   381681664||   255852544||   -33.0%||   !!||
     52||                    detRun.ibd||      344064||      344064||||||
     53||             detRunSummary.ibd||      147456||      114688||   -22.2%||    !||
     54||          detStackedImfile.ibd||    11534336||    10485760||    -9.1%||     ||
     55||       detectionEfficiency.ibd||   780140544||   318767104||   -59.1%||  !!!||
     56||          diffInputSkyfile.ibd||  4102029312||  4097835008||    -0.1%||     ||
     57||               diffPhotRun.ibd||    10485760||    10485760||||||
     58||           diffPhotSkyfile.ibd||   226492416||   121634816||   -46.3%||   !!||
     59||                   diffRun.ibd||    67108864||    58720256||   -12.5%||    !||
     60||               diffSkyfile.ibd||  4223664128||  3070230528||   -27.3%||   !!||
     61||               diffSummary.ibd||    41943040||    30408704||   -27.5%||   !!||
     62||             distComponent.ibd||  5402263552||  2906652672||   -46.2%||   !!||
     63||                   distRun.ibd||   314572800||   247463936||   -21.3%||    !||
     64||                distTarget.ibd||      655360||      655360||||||
     65||            dqstatsContent.ibd||   130023424||   130023424||||||
     66||                dqstatsRun.ibd||      475136||      491520||||||
     67||                  fakeMask.ibd||       98304||       98304||||||
     68||       fakeProcessedImfile.ibd||  4194304000||  2323644416||   -44.6%||   !!||
     69||                   fakeRun.ibd||    92274688||    88080384||    -4.5%||     ||
     70||       flatcorrAddstarLink.ibd||      311296||      311296||||||
     71||           flatcorrCamLink.ibd||      557056||      557056||||||
     72||          flatcorrChipLink.ibd||      360448||      360448||||||
     73||               flatcorrRun.ibd||      114688||      114688||||||
     74||               magicDSFile.ibd||  8191475712||  5607784448||   -31.5%||   !!||
     75||                magicDSRun.ibd||   255852544||   239075328||    -6.6%||     ||
     76||          magicDSUpdateRun.ibd||    54525952||    37748736||   -30.8%||   !!||
     77||         magicInputSkyfile.ibd||   427819008||   427819008||||||
     78||                 magicMask.ibd||    46137344||    37748736||   -18.2%||    !||
     79||           magicNodeResult.ibd||  3984588800||  2000683008||   -49.8%||   !!||
     80||                  magicRun.ibd||    79691776||    71303168||   -10.5%||    !||
     81||                 magicTree.ibd||  5226102784||  5226102784||||||
     82||            magicUpdateRun.ibd||    18874368||    17825792||    -5.6%||     ||
     83||             minidvodbCopy.ibd||      131072||      114688||   -12.5%||    !||
     84||        minidvodbProcessed.ibd||      180224||      163840||    -9.1%||     ||
     85||              minidvodbRun.ibd||      196608||      180224||    -8.3%||     ||
     86||                    newExp.ibd||   100663296||    96468992||    -4.2%||     ||
     87||                 newImfile.ibd||  3632267264||  2722103296||   -25.1%||   !!||
     88||             publishClient.ibd||      114688||      114688||||||
     89||               publishDone.ibd||    31457280||    25165824||   -20.0%||    !||
     90||                publishRun.ibd||    58720256||    50331648||   -14.3%||    !||
     91||               pzDataStore.ibd||       98304||       98304||||||
     92||             pzDownloadExp.ibd||    41943040||    37748736||   -10.0%||     ||
     93||          pzDownloadImfile.ibd||  5951717376||  3435134976||   -42.3%||   !!||
     94||                    rawExp.ibd||   184549376||   155189248||   -15.9%||    !||
     95||                 rawImfile.ibd|| 16655581184|| 14298382336||   -14.2%||    !||
     96||               rcDSFileset.ibd||   121634816||   100663296||   -17.2%||    !||
     97||             rcDestination.ibd||      114688||      114688||||||
     98||                rcInterest.ibd||      573440||      589824||||||
     99||                     rcRun.ibd||      131072||      131072||||||
     100||               receiveFile.ibd||      131072||      131072||||||
     101||            receiveFileset.ibd||      131072||      131072||||||
     102||             receiveResult.ibd||      114688||      114688||||||
     103||             receiveSource.ibd||      147456||      147456||||||
     104||          stackAssociation.ibd||      524288||      524288||||||
     105||       stackAssociationMap.ibd||    15728640||    15728640||||||
     106||         stackInputSkyfile.ibd||   230686720||   226492416||    -1.8%||     ||
     107||                  stackRun.ibd||   125829120||   109051904||   -13.3%||    !||
     108||           stackSumSkyfile.ibd||   134217728||   109051904||   -18.8%||    !||
     109||              stackSummary.ibd||      475136||      376832||   -20.7%||    !||
     110||            staticskyInput.ibd||      163840||      163840||||||
     111||           staticskyResult.ibd||      196608||      180224||    -8.3%||     ||
     112||              staticskyRun.ibd||      212992||      196608||    -7.7%||     ||
     113||                 summitExp.ibd||    67108864||    58720256||   -12.5%||    !||
     114||              summitImfile.ibd||  5616173056||  4630511616||   -17.6%||    !||
     115||         warpBackgroundRun.ibd||     1015808||      917504||    -9.7%||     ||
     116||     warpBackgroundSkyfile.ibd||    75497472||    54525952||   -27.8%||   !!||
     117||                warpImfile.ibd||  2646605824||  2172649472||   -17.9%||    !||
     118||                  warpMask.ibd||       98304||       98304||||||
     119||                   warpRun.ibd||   113246208||    96468992||   -14.8%||    !||
     120||            warpSkyCellMap.ibd|| 13170114560||  5901385728||   -55.2%||  !!!||
     121||               warpSkyfile.ibd|| 12532580352||  9118416896||   -27.2%||   !!||
     122||               warpSummary.ibd||    75497472||    54525952||   -27.8%||   !!||
     123||                         Total||110201241600|| 79408070656||   -27.9%||||