Uploaded image for project: 'Jahia Community'
  1. Jahia Community
  2. JAHIA-1284

cron: Import de 4'724 elements toutes les heures !!!

    XMLWordPrintable

Details

    • Bug
    • Resolution: Done
    • Critical
    • WCM 5.0
    • WCM 5.0
    • None
    • 14926

    Description

      J'ai lancé des crons toutes les heures pendant ce week-end sur un gros site (demon online + 4 fois l'import des 129 pages du minefi).

      A chaque heure il y a une erreur (sur les "")... mais ce qui est plus troublant, c'est qu'après un processing de 20 minutes (super pour les perfs quand j'ai en // un bon petit load pendant 20 minutes chaque heure!), il m'importe à chaque fois 4724 éléments.

      C'est quoi ces 4724 éléments: des doublons (pas top pour ma BD ça)? Il écrase les précédantes valeurs (pas surper top non plus car ensuite j'ai des masses d'indexation dû à ces imports successifs )? C'est dû à l'erreur pendant l'import (mais j'espère bien qu'il réimporte pas tout s'il y a une erreur sur un seul champ)? Bref je prige pas trop ce qu'il me fait là... excepté que ça me ralentit à fond + que ça relance l'indexation sur les 4720 éléments et ceci chaque heure...

      ex:
      07:14

      221763125 [2006-08-21 07:14:43,546] [org.jahia.services.importexport.ImportHandler] INFO - Imported 4724 elements
      221763157 [2006-08-21 07:14:43,578] [org.jahia.bin.Jahia] INFO - Processed [/jahia/Jahia/site/demo/pid/171] esi=[Skeleton] user=[ECHOVET] ip=[127.0.0.1] in [
      360ms]
      221763157 [2006-08-21 07:14:43,578] [org.jahia.services.importexport.ImportHandler] INFO - Import starts
      221763797 [2006-08-21 07:14:44,218] [org.jahia.services.importexport.ImportHandler] ERROR - Error when importing :
      java.lang.NumberFormatException: For input string: ""
      at java.lang.NumberFormatException.forInputString(NumberFormatException.java:48)
      at java.lang.Integer.parseInt(Integer.java:468)
      at java.lang.Integer.parseInt(Integer.java:497)
      at org.jahia.data.fields.JahiaApplicationField.save(JahiaApplicationField.java:199)
      at org.jahia.services.fields.JahiaFieldBaseService.saveField(JahiaFieldBaseService.java:1082)
      at org.jahia.services.fields.JahiaFieldBaseService$$FastClassByCGLIB$$a23200ff.invoke(<generated>)
      at net.sf.cglib.proxy.MethodProxy.invoke(MethodProxy.java:149)
      at org.springframework.aop.framework.Cglib2AopProxy$CglibMethodInvocation.invokeJoinpoint(Cglib2AopProxy.java:661)
      at org.springframework.aop.framework.ReflectiveMethodInvocation.proceed(ReflectiveMethodInvocation.java:122)
      at org.jahia.spring.aop.interceptor.SilentJamonPerformanceMonitorInterceptor.invokeUnderTrace(SilentJamonPerformanceMonitorInterceptor.java:43)

      ------------------------------

      08:28

      226180000 [2006-08-21 08:28:20,421] [org.jahia.services.importexport.ImportHandler] INFO - Imported 4724 elements
      226180141 [2006-08-21 08:28:20,562] [org.jahia.bin.Jahia] INFO - Processed [/jahia/Jahia/site/demo/pid/237] esi=[Skeleton] user=[DPIETRINI] ip=[127.0.0.1] in
      [125ms]
      226180282 [2006-08-21 08:28:20,703] [org.jahia.services.importexport.ImportHandler] INFO - Import starts
      226183313 [2006-08-21 08:28:23,734] [org.jahia.bin.Jahia] INFO - Processed [/jahia/Jahia/site/demo/pid/248] esi=[Skeleton] user=[EDUVERNET] ip=[127.0.0.1] in
      [391ms]
      226184688 [2006-08-21 08:28:25,109] [org.jahia.services.importexport.ImportHandler] ERROR - Error when importing :
      java.lang.NumberFormatException: For input string: ""
      at java.lang.NumberFormatException.forInputString(NumberFormatException.java:48)
      at java.lang.Integer.parseInt(Integer.java:468)
      at java.lang.Integer.parseInt(Integer.java:497)
      at org.jahia.data.fields.JahiaApplicationField.save(JahiaApplicationField.java:199)
      at org.jahia.services.fields.JahiaFieldBaseService.saveField(JahiaFieldBaseService.java:1082)
      at org.jahia.services.fields.JahiaFieldBaseService$$FastClassByCGLIB$$a23200ff.invoke(<generated>)
      at net.sf.cglib.proxy.MethodProxy.invoke(MethodProxy.java:149)
      at org.springframework.aop.framework.Cglib2AopProxy$CglibMethodInvocation.invokeJoinpoint(Cglib2AopProxy.java:661)
      at org.springframework.aop.framework.ReflectiveMethodInvocation.proceed(ReflectiveMethodInvocation.java:122)

      -------------------------------------

      09:19

      229025891 [2006-08-21 09:15:46,312] [org.jahia.services.search.lucene.AbstractLuceneSearchIndexer] INFO - Finished processing 314 indexing orders in 7984ms.
      229074125 [2006-08-21 09:16:34,546] [org.jahia.services.search.lucene.AbstractLuceneSearchIndexer] INFO - Finished processing 251 indexing orders in 6218ms.
      229141813 [2006-08-21 09:17:42,234] [org.jahia.services.search.lucene.AbstractLuceneSearchIndexer] INFO - Finished processing 343 indexing orders in 8641ms.
      229172282 [2006-08-21 09:18:12,703] [org.jahia.services.search.lucene.AbstractLuceneSearchIndexer] INFO - Finished processing 204 indexing orders in 4532ms.
      229203563 [2006-08-21 09:18:43,984] [org.jahia.services.search.lucene.AbstractLuceneSearchIndexer] INFO - Finished processing 196 indexing orders in 5203ms.
      229218782 [2006-08-21 09:18:59,203] [org.jahia.services.importexport.ImportHandler] INFO - Imported 4724 elements
      229218782 [2006-08-21 09:18:59,203] [org.jahia.services.importexport.ImportHandler] INFO - Import starts
      229220750 [2006-08-21 09:19:01,171] [org.jahia.services.importexport.ImportHandler] ERROR - Error when importing :
      java.lang.NumberFormatException: For input string: ""
      at java.lang.NumberFormatException.forInputString(NumberFormatException.java:48)
      at java.lang.Integer.parseInt(Integer.java:468)
      at java.lang.Integer.parseInt(Integer.java:497)
      at org.jahia.data.fields.JahiaApplicationField.save(JahiaApplicationField.java:199)
      at org.jahia.services.fields.JahiaFieldBaseService.saveField(JahiaFieldBaseService.java:1082)
      at org.jahia.services.fields.JahiaFieldBaseService$$FastClassByCGLIB$$a23200ff.invoke(<generated>)
      at net.sf.cglib.proxy.MethodProxy.invoke(MethodProxy.java:149)
      at org.springframework.aop.framework.Cglib2AopProxy$CglibMethodInvocation.invokeJoinpoint(Cglib2AopProxy.java:661)
      at org.springframework.aop.framework.ReflectiveMethodInvocation.proceed(ReflectiveMethodInvocation.java:122)
      at org.jahia.spring.aop.interceptor.SilentJamonPerformanceMonitorInterceptor.invokeUnderTrace(SilentJamonPerformanceMonitorInterceptor.java:43)

      TestRail: Results

        Attachments

          Activity

            People

              tdraier_old Thomas Draier (Inactive)
              scroisier Stephane Croisier (Inactive)
              Votes:
              0 Vote for this issue
              Watchers:
              1 Start watching this issue

              Dates

                Created:
                Updated:
                Resolved:

                TestRail: Runs

                  TestRail: Cases

                    Packages

                      Version Package
                      WCM 5.0