pb récoltes harvester

  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: SELECT data, created, headers, expire, serialized FROM cache_filter WHERE cid = '4:33b450a835c011c4586690225e064b58' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 27.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: UPDATE cache_filter SET data = '<div class=\"emailFilter\">Bonjour,</p>\n<p>j\'ai une question à propos du module de moissonnage.</p>\n<p>D\'abord j\'expose mon problème :</p>\n<p>Quand je moissonne l\'entrepôt de l\'INSA de Lyon à la fin de la récolte<br />\nsi je regarde le nombre de documents moissonnée j\'obtiens un total de 687.<br />\nPourtant quand je regarde le rapport de moisson il m\'indique avoir<br />\nmoissonné 688 documents.</p>\n<p>J\'ai donc regardé à la source pour savoir ce qu\'il\n</div>\n', created = 1507745900, expire = 1507832300, headers = '', serialized = 0 WHERE cid = '4:33b450a835c011c4586690225e064b58' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 112.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: SELECT data, created, headers, expire, serialized FROM cache_filter WHERE cid = '4:33b450a835c011c4586690225e064b58' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 27.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: UPDATE cache_filter SET data = '<div class=\"emailFilter\">Bonjour,</p>\n<p>j\'ai une question à propos du module de moissonnage.</p>\n<p>D\'abord j\'expose mon problème :</p>\n<p>Quand je moissonne l\'entrepôt de l\'INSA de Lyon à la fin de la récolte<br />\nsi je regarde le nombre de documents moissonnée j\'obtiens un total de 687.<br />\nPourtant quand je regarde le rapport de moisson il m\'indique avoir<br />\nmoissonné 688 documents.</p>\n<p>J\'ai donc regardé à la source pour savoir ce qu\'il\n</div>\n', created = 1507745900, expire = 1507832300, headers = '', serialized = 0 WHERE cid = '4:33b450a835c011c4586690225e064b58' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 112.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: SELECT data, created, headers, expire, serialized FROM cache_filter WHERE cid = '4:10589e29fb3cb4d6a404ff585937f15a' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 27.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: UPDATE cache_filter SET data = '<div class=\"emailFilter\">\nBonjour,</p>\n<p>je teste le module harvester en moissonnant l\'entrepot d\'unit.<br />\nJ\'ai donc choisi, dans la définition d\'une nouvelle moisson, l\'entrepot<br />\nd\'unit <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler\">http://www.unit.eu/ori-oai-repository/OAIHandler</a>, avec comme<br />\nidentifiant=lom_unit, le préfixe=lom, collection =lom/unit et je n\'ai<br />\npas restreint la moisson.<br />\nLorsque je lance la moisson, il semble que le module récupère des<br />\ndonnées de l\'entrepot unit (voici ci dessous les logs, sachant que j\'ai<br />\nd\'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n° processed avant<br />\nqui commencent vers les 600 environ</p>\n<p>...<br />\n 69330 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\nMakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9 processed<br />\noriharvester: 69333<br />\norg.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n- resumptionToken: 1207068502478<br />\n 69333 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\nresumptionToken: 1207068502478<br />\noriharvester: 70007<br />\norg.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7 processed<br />\n 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\nMakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7 processed<br />\noriharvester: 70007<br />\norg.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17 processed<br />\n 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\nMakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17 processed<br />\noriharvester: 70008<br />\norg.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13 processed<br />\n 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\nMakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13 processed<br />\noriharvester: 70008<br />\norg.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11 processed<br />\n 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\nMakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11 processed<br />\noriharvester: 70008<br />\norg.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5 processed<br />\n 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\nMakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5 processed<br />\noriharvester: 70010<br />\norg.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3 processed<br />\n 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\nMakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3 processed<br />\noriharvester: 70010<br />\norg.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1 processed<br />\n 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\nMakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1 processed<br />\noriharvester: 70012<br />\norg.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n- resumptionToken:<br />\n 70012 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\nresumptionToken:<br />\n70015 [Thread-33] DEBUG<br />\nuk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n- making connection object with uri:<br />\nxmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports<br />\n70019 [Thread-33] DEBUG<br />\nuk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n- validating for :org.exist.xmldb.RemoteCollection@b125bd : true<br />\n70037 [Thread-33] DEBUG<br />\nuk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n- making connection object with uri:<br />\nxmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info<br />\n70042 [Thread-33] DEBUG<br />\nuk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n- validating for :org.exist.xmldb.RemoteCollection@2219b4 : true</p>\n<p>le problème est qu\'au niveau des récoltes, je n\'obtiens aucun document<br />\n(nb de doc = 0).<br />\nPour info, j\'ai configuré le proxy et j\'ai bien xfire-all-1.2.5.jar .</p>\n<p>Quelqu\'un a-t-il rencontré ce problème? comment le résoudre ?</p>\n<p>merci pour vos réponses,</p>\n<p>Lucie Dengreville</p>\n<p>--<br />\n----------------------------------<br />\nLucie Dengreville<br />\nCentre de Ressources Informatiques<br />\nUniversité Rennes 2 Haute Bretagne<br />\n02.99.14.13.66<br />\n-----------------------------------</p>\n<p>--<br />\nCe message a été vérifié par MailScanner<br />\npour des virus ou des polluriels et rien de<br />\nsuspect n\'a été trouvé.</p>\n</div>\n', created = 1507745901, expire = 1507832301, headers = '', serialized = 0 WHERE cid = '4:10589e29fb3cb4d6a404ff585937f15a' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 112.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: SELECT data, created, headers, expire, serialized FROM cache_filter WHERE cid = '4:a5af2fc516984f429fd85101bdc68561' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 27.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: UPDATE cache_filter SET data = '<div class=\"emailFilter\">Lucie Dengreville a écrit :<br />\n<div class=\"emailFilter_Toggle\">\n<blockquote class=\"emailFilter_Author_0\"><p>><br />\n> Bonjour,<br />\n></div>\n</blockquote>\n<p>Bonjour,</p>\n<div class=\"emailFilter_Toggle\">\n<blockquote class=\"emailFilter_Author_0\"><p>> je teste le module harvester en moissonnant l\'entrepot d\'unit.<br />\n> J\'ai donc choisi, dans la définition d\'une nouvelle moisson,<br />\n> l\'entrepot d\'unit <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler\">http://www.unit.eu/ori-oai-repository/OAIHandler</a>,<br />\n> avec comme identifiant=lom_unit, le préfixe=lom, collection =lom/unit<br />\n> et je n\'ai pas restreint la moisson.<br />\n> Lorsque je lance la moisson, il semble que le module récupère des<br />\n> données de l\'entrepot unit (voici ci dessous les logs, sachant que<br />\n> j\'ai d\'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n° processed<br />\n> avant qui commencent vers les 600 environ</div>\n</blockquote>\n<p>Même constat chez moi alors que tout marchait bien il y a deux semaine ;-)</p>\n<p>Pas de soucis en moissonant avec le préfixe oai_dc ; seul le lom pose<br />\nproblème.</p>\n<p>En creusant un peu plus le problème j\'ai fait une requête via mon<br />\nnavigateur pour compérer les résultats d\'un ListRecords :</p>\n<p><a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=oai_dc\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=oai_dc\">http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metada...</a><br />\nme renvoi un xml valide d\'après le navigateur.</p>\n<p>Alors que<br />\n<a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=lom\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=lom\">http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metada...</a><br />\nme renvoi une erreur.<br />\nEn allant à la ligne incriminée d\'après mon navigateur je vois qu\'à la<br />\nsuite de chaque balise \"<metadata>\" il y a un bloc xml : \'<?xml<br />\nversion=\"1.0\" encoding=\"UTF-8\"?>\'.<br />\nCela me semble anormal (il y a eu de modifications réçentes sur le<br />\nrepository d\'UNIT?) et que c\'est donc ça qui pose problème pour ton<br />\nmoissonage je pense.</p>\n<p>À+<br />\n<div class=\"emailFilter_Toggle\">\n<blockquote class=\"emailFilter_Author_0\"><p>><br />\n> ...<br />\n> 69330 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\n> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9 processed<br />\n> oriharvester: 69333<br />\n> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n> - resumptionToken: 1207068502478<br />\n> 69333 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\n> resumptionToken: 1207068502478<br />\n> oriharvester: 70007<br />\n> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7<br />\n> processed<br />\n> 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\n> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7 processed<br />\n> oriharvester: 70007<br />\n> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17<br />\n> processed<br />\n> 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\n> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17 processed<br />\n> oriharvester: 70008<br />\n> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13<br />\n> processed<br />\n> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\n> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13 processed<br />\n> oriharvester: 70008<br />\n> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11<br />\n> processed<br />\n> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\n> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11 processed<br />\n> oriharvester: 70008<br />\n> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5<br />\n> processed<br />\n> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\n> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5 processed<br />\n> oriharvester: 70010<br />\n> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3<br />\n> processed<br />\n> 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\n> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3 processed<br />\n> oriharvester: 70010<br />\n> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1<br />\n> processed<br />\n> 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\n> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1 processed<br />\n> oriharvester: 70012<br />\n> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n> - resumptionToken:<br />\n> 70012 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -<br />\n> resumptionToken:<br />\n> 70015 [Thread-33] DEBUG<br />\n> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n> - making connection object with uri:<br />\n> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports<br />\n> 70019 [Thread-33] DEBUG<br />\n> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n> - validating for :org.exist.xmldb.RemoteCollection@b125bd : true<br />\n> 70037 [Thread-33] DEBUG<br />\n> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n> - making connection object with uri:<br />\n> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info<br />\n> 70042 [Thread-33] DEBUG<br />\n> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n> - validating for :org.exist.xmldb.RemoteCollection@2219b4 : true<br />\n><br />\n> le problème est qu\'au niveau des récoltes, je n\'obtiens aucun document<br />\n> (nb de doc = 0).<br />\n> Pour info, j\'ai configuré le proxy et j\'ai bien xfire-all-1.2.5.jar .<br />\n><br />\n> Quelqu\'un a-t-il rencontré ce problème? comment le résoudre ?<br />\n><br />\n> merci pour vos réponses,<br />\n><br />\n> Lucie Dengreville<br />\n></div>\n</blockquote>\n<p>--<br />\nCe message a été vérifié par MailScanner<br />\npour des virus ou des polluriels et rien de<br />\nsuspect n\'a été trouvé.</p>\n</div>\n', created = 1507745903, expire = 1507832303, headers = '', serialized = 0 WHERE cid = '4:a5af2fc516984f429fd85101bdc68561' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 112.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: SELECT data, created, headers, expire, serialized FROM cache_filter WHERE cid = '4:c907267b6093d76e004ed4dbc368911d' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 27.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: UPDATE cache_filter SET data = '<div class=\"emailFilter\">Bonjour,<br />\nMerci à vous deux.<br />\nJe n\'avais pas fait attention à cela et l\'explication directe de Mikael<br />\nnous met plus que sur la voie, Merci !<br />\nSur UNIT, la Future version du module ori-oai-workflow 1.1.0 est \"en<br />\ntest\", dans le sens où on est en production sur cette version pas encore<br />\nannoncée [on n\'avait pas constaté de problèmes jusque là].<br />\nUn des gros changements est la façon dont on stocke les fichiers XML :<br />\non n\'utilise plus eXist, on met les fiches XML directement dans le MySql.<br />\nDonc la récupération des fiches se fait maintenant différemment et<br />\neffectivement il est plus que probable que le XML envoyé à<br />\nl\'ori-oai-indexing (puis renvoyé lui-même à ori-oai-repository)<br />\ncontienne un \'<?xml version=\"1.0\" encoding=\"UTF-8\"?>\' comme l\'indique<br />\nMikael.<br />\nJe vais changer au niveau de ori-oai-workflow, mais à terme il faudra<br />\npeut-être (à voir ...) que le repository soit capable d\'accepter un XML<br />\navec ou sans l\'entête \'<?xml version=\"1.0\" encoding=\"UTF-8\"?>\'.<br />\nMerci à nouveau, je vous tiens au courant ici même pour l\'entrepôt d\'UNIT.<br />\nVincent.</p>\n<p>Mikael Le Bohec wrote:<br />\n<div class=\"emailFilter_Toggle\">\n<blockquote class=\"emailFilter_Author_0\"><p>> Lucie Dengreville a écrit :</p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>><br />\n>> Bonjour,<br />\n>></p></blockquote>\n<blockquote class=\"emailFilter_Author_0\"><p>> Bonjour,<br />\n></p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>> je teste le module harvester en moissonnant l\'entrepot d\'unit.<br />\n>> J\'ai donc choisi, dans la définition d\'une nouvelle moisson,<br />\n>> l\'entrepot d\'unit <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler\">http://www.unit.eu/ori-oai-repository/OAIHandler</a>,<br />\n>> avec comme identifiant=lom_unit, le préfixe=lom, collection =lom/unit<br />\n>> et je n\'ai pas restreint la moisson.<br />\n>> Lorsque je lance la moisson, il semble que le module récupère des<br />\n>> données de l\'entrepot unit (voici ci dessous les logs, sachant que<br />\n>> j\'ai d\'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n° processed<br />\n>> avant qui commencent vers les 600 environ</p></blockquote>\n<blockquote class=\"emailFilter_Author_0\"><p>> Même constat chez moi alors que tout marchait bien il y a deux semaine<br />\n> ;-)<br />\n><br />\n> Pas de soucis en moissonant avec le préfixe oai_dc ; seul le lom pose<br />\n> problème.<br />\n><br />\n> En creusant un peu plus le problème j\'ai fait une requête via mon<br />\n> navigateur pour compérer les résultats d\'un ListRecords :<br />\n><br />\n> <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=oai_dc\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=oai_dc\">http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metada...</a><br />\n><br />\n> me renvoi un xml valide d\'après le navigateur.<br />\n><br />\n> Alors que<br />\n> <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=lom\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=lom\">http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metada...</a><br />\n> me renvoi une erreur.<br />\n> En allant à la ligne incriminée d\'après mon navigateur je vois qu\'à la<br />\n> suite de chaque balise \"<metadata>\" il y a un bloc xml : \'<?xml<br />\n> version=\"1.0\" encoding=\"UTF-8\"?>\'.<br />\n> Cela me semble anormal (il y a eu de modifications réçentes sur le<br />\n> repository d\'UNIT?) et que c\'est donc ça qui pose problème pour ton<br />\n> moissonage je pense.<br />\n><br />\n> À+</p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>><br />\n>> ...<br />\n>> 69330 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9<br />\n>> processed<br />\n>> oriharvester: 69333<br />\n>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n>> - resumptionToken: 1207068502478<br />\n>> 69333 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>> - resumptionToken: 1207068502478<br />\n>> oriharvester: 70007<br />\n>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7<br />\n>> processed<br />\n>> 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7<br />\n>> processed<br />\n>> oriharvester: 70007<br />\n>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17<br />\n>> processed<br />\n>> 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17<br />\n>> processed<br />\n>> oriharvester: 70008<br />\n>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13<br />\n>> processed<br />\n>> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13<br />\n>> processed<br />\n>> oriharvester: 70008<br />\n>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11<br />\n>> processed<br />\n>> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11<br />\n>> processed<br />\n>> oriharvester: 70008<br />\n>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5<br />\n>> processed<br />\n>> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5<br />\n>> processed<br />\n>> oriharvester: 70010<br />\n>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3<br />\n>> processed<br />\n>> 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3<br />\n>> processed<br />\n>> oriharvester: 70010<br />\n>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1<br />\n>> processed<br />\n>> 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1<br />\n>> processed<br />\n>> oriharvester: 70012<br />\n>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n>> - resumptionToken:<br />\n>> 70012 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>> - resumptionToken:<br />\n>> 70015 [Thread-33] DEBUG<br />\n>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>> - making connection object with uri:<br />\n>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports<br />\n>> 70019 [Thread-33] DEBUG<br />\n>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>> - validating for :org.exist.xmldb.RemoteCollection@b125bd : true<br />\n>> 70037 [Thread-33] DEBUG<br />\n>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>> - making connection object with uri:<br />\n>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info<br />\n>> 70042 [Thread-33] DEBUG<br />\n>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>> - validating for :org.exist.xmldb.RemoteCollection@2219b4 : true<br />\n>><br />\n>> le problème est qu\'au niveau des récoltes, je n\'obtiens aucun<br />\n>> document (nb de doc = 0).<br />\n>> Pour info, j\'ai configuré le proxy et j\'ai bien xfire-all-1.2.5.jar .<br />\n>><br />\n>> Quelqu\'un a-t-il rencontré ce problème? comment le résoudre ?<br />\n>><br />\n>> merci pour vos réponses,<br />\n>><br />\n>> Lucie Dengreville<br />\n>></p></blockquote>\n<blockquote class=\"emailFilter_Author_0\"><p>></div>\n</blockquote>\n<p>--<br />\nCe message a été vérifié par MailScanner<br />\npour des virus ou des polluriels et rien de<br />\nsuspect n\'a été trouvé.</p>\n</div>\n', created = 1507745903, expire = 1507832303, headers = '', serialized = 0 WHERE cid = '4:c907267b6093d76e004ed4dbc368911d' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 112.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: SELECT data, created, headers, expire, serialized FROM cache_filter WHERE cid = '4:71ba53d6180fef19dddba4689fc44db1' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 27.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: UPDATE cache_filter SET data = '<div class=\"emailFilter\">Tout est normalement rentré dans l\'ordre du côté de l\'entrepôt OAI d\'UNIT.<br />\nBonne soirée,<br />\nVincent.</p>\n<p>Vincent Bonamy wrote:<br />\n<div class=\"emailFilter_Toggle\">\n<blockquote class=\"emailFilter_Author_0\"><p>> Bonjour,<br />\n> Merci à vous deux.<br />\n> Je n\'avais pas fait attention à cela et l\'explication directe de<br />\n> Mikael nous met plus que sur la voie, Merci !<br />\n> Sur UNIT, la Future version du module ori-oai-workflow 1.1.0 est \"en<br />\n> test\", dans le sens où on est en production sur cette version pas<br />\n> encore annoncée [on n\'avait pas constaté de problèmes jusque là].<br />\n> Un des gros changements est la façon dont on stocke les fichiers XML :<br />\n> on n\'utilise plus eXist, on met les fiches XML directement dans le MySql.<br />\n> Donc la récupération des fiches se fait maintenant différemment et<br />\n> effectivement il est plus que probable que le XML envoyé à<br />\n> l\'ori-oai-indexing (puis renvoyé lui-même à ori-oai-repository)<br />\n> contienne un \'<?xml version=\"1.0\" encoding=\"UTF-8\"?>\' comme l\'indique<br />\n> Mikael.<br />\n> Je vais changer au niveau de ori-oai-workflow, mais à terme il faudra<br />\n> peut-être (à voir ...) que le repository soit capable d\'accepter un<br />\n> XML avec ou sans l\'entête \'<?xml version=\"1.0\" encoding=\"UTF-8\"?>\'.<br />\n> Merci à nouveau, je vous tiens au courant ici même pour l\'entrepôt<br />\n> d\'UNIT.<br />\n> Vincent.<br />\n><br />\n><br />\n><br />\n> Mikael Le Bohec wrote:</p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>> Lucie Dengreville a écrit :</p></blockquote>\n<blockquote class=\"emailFilter_Author_2\"><p>>>><br />\n>>> Bonjour,<br />\n>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>> Bonjour,<br />\n>></p></blockquote>\n<blockquote class=\"emailFilter_Author_2\"><p>>>> je teste le module harvester en moissonnant l\'entrepot d\'unit.<br />\n>>> J\'ai donc choisi, dans la définition d\'une nouvelle moisson,<br />\n>>> l\'entrepot d\'unit <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler\">http://www.unit.eu/ori-oai-repository/OAIHandler</a>,<br />\n>>> avec comme identifiant=lom_unit, le préfixe=lom, collection<br />\n>>> =lom/unit et je n\'ai pas restreint la moisson.<br />\n>>> Lorsque je lance la moisson, il semble que le module récupère des<br />\n>>> données de l\'entrepot unit (voici ci dessous les logs, sachant que<br />\n>>> j\'ai d\'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n° processed<br />\n>>> avant qui commencent vers les 600 environ</p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>> Même constat chez moi alors que tout marchait bien il y a deux<br />\n>> semaine ;-)<br />\n>><br />\n>> Pas de soucis en moissonant avec le préfixe oai_dc ; seul le lom pose<br />\n>> problème.<br />\n>><br />\n>> En creusant un peu plus le problème j\'ai fait une requête via mon<br />\n>> navigateur pour compérer les résultats d\'un ListRecords :<br />\n>><br />\n>> <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=oai_dc\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=oai_dc\">http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metada...</a><br />\n>><br />\n>> me renvoi un xml valide d\'après le navigateur.<br />\n>><br />\n>> Alors que<br />\n>> <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=lom\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=lom\">http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metada...</a><br />\n>> me renvoi une erreur.<br />\n>> En allant à la ligne incriminée d\'après mon navigateur je vois qu\'à<br />\n>> la suite de chaque balise \"<metadata>\" il y a un bloc xml : \'<?xml<br />\n>> version=\"1.0\" encoding=\"UTF-8\"?>\'.<br />\n>> Cela me semble anormal (il y a eu de modifications réçentes sur le<br />\n>> repository d\'UNIT?) et que c\'est donc ça qui pose problème pour ton<br />\n>> moissonage je pense.<br />\n>><br />\n>> À+</p></blockquote>\n<blockquote class=\"emailFilter_Author_2\"><p>>>><br />\n>>> ...<br />\n>>> 69330 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9<br />\n>>> processed<br />\n>>> oriharvester: 69333<br />\n>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n>>> - resumptionToken: 1207068502478<br />\n>>> 69333 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>>> - resumptionToken: 1207068502478<br />\n>>> oriharvester: 70007<br />\n>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7<br />\n>>> processed<br />\n>>> 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7<br />\n>>> processed<br />\n>>> oriharvester: 70007<br />\n>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17<br />\n>>> processed<br />\n>>> 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17<br />\n>>> processed<br />\n>>> oriharvester: 70008<br />\n>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13<br />\n>>> processed<br />\n>>> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13<br />\n>>> processed<br />\n>>> oriharvester: 70008<br />\n>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11<br />\n>>> processed<br />\n>>> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11<br />\n>>> processed<br />\n>>> oriharvester: 70008<br />\n>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5<br />\n>>> processed<br />\n>>> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5<br />\n>>> processed<br />\n>>> oriharvester: 70010<br />\n>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3<br />\n>>> processed<br />\n>>> 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3<br />\n>>> processed<br />\n>>> oriharvester: 70010<br />\n>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1<br />\n>>> processed<br />\n>>> 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1<br />\n>>> processed<br />\n>>> oriharvester: 70012<br />\n>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n>>> - resumptionToken:<br />\n>>> 70012 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore<br />\n>>> - resumptionToken:<br />\n>>> 70015 [Thread-33] DEBUG<br />\n>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>> - making connection object with uri:<br />\n>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports<br />\n>>><br />\n>>> 70019 [Thread-33] DEBUG<br />\n>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>> - validating for :org.exist.xmldb.RemoteCollection@b125bd : true<br />\n>>> 70037 [Thread-33] DEBUG<br />\n>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>> - making connection object with uri:<br />\n>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info<br />\n>>> 70042 [Thread-33] DEBUG<br />\n>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>> - validating for :org.exist.xmldb.RemoteCollection@2219b4 : true<br />\n>>><br />\n>>> le problème est qu\'au niveau des récoltes, je n\'obtiens aucun<br />\n>>> document (nb de doc = 0).<br />\n>>> Pour info, j\'ai configuré le proxy et j\'ai bien xfire-all-1.2.5.jar .<br />\n>>><br />\n>>> Quelqu\'un a-t-il rencontré ce problème? comment le résoudre ?<br />\n>>><br />\n>>> merci pour vos réponses,<br />\n>>><br />\n>>> Lucie Dengreville<br />\n>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_0\"><p>></div>\n</blockquote>\n<p>--<br />\nCe message a été vérifié par MailScanner<br />\npour des virus ou des polluriels et rien de<br />\nsuspect n\'a été trouvé.</p>\n</div>\n', created = 1507745903, expire = 1507832303, headers = '', serialized = 0 WHERE cid = '4:71ba53d6180fef19dddba4689fc44db1' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 112.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: SELECT data, created, headers, expire, serialized FROM cache_filter WHERE cid = '4:758c7cc78bd3b48197d6b13e10352be5' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 27.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: UPDATE cache_filter SET data = '<div class=\"emailFilter\">Vincent Bonamy a écrit :<br />\n<div class=\"emailFilter_Toggle\">\n<blockquote class=\"emailFilter_Author_0\"><p>> Tout est normalement rentré dans l\'ordre du côté de l\'entrepôt OAI<br />\n> d\'UNIT.<br />\n> Bonne soirée,<br />\n> Vincent.<br />\n></div>\n</blockquote>\n<p>Je confirme ; ça moissonne bien en lom maintenant.</p>\n<p>À+<br />\n<div class=\"emailFilter_Toggle\">\n<blockquote class=\"emailFilter_Author_0\"><p>><br />\n> Vincent Bonamy wrote:</p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>> Bonjour,<br />\n>> Merci à vous deux.<br />\n>> Je n\'avais pas fait attention à cela et l\'explication directe de<br />\n>> Mikael nous met plus que sur la voie, Merci !<br />\n>> Sur UNIT, la Future version du module ori-oai-workflow 1.1.0 est \"en<br />\n>> test\", dans le sens où on est en production sur cette version pas<br />\n>> encore annoncée [on n\'avait pas constaté de problèmes jusque là].<br />\n>> Un des gros changements est la façon dont on stocke les fichiers XML<br />\n>> : on n\'utilise plus eXist, on met les fiches XML directement dans le<br />\n>> MySql.<br />\n>> Donc la récupération des fiches se fait maintenant différemment et<br />\n>> effectivement il est plus que probable que le XML envoyé à<br />\n>> l\'ori-oai-indexing (puis renvoyé lui-même à ori-oai-repository)<br />\n>> contienne un \'<?xml version=\"1.0\" encoding=\"UTF-8\"?>\' comme l\'indique<br />\n>> Mikael.<br />\n>> Je vais changer au niveau de ori-oai-workflow, mais à terme il faudra<br />\n>> peut-être (à voir ...) que le repository soit capable d\'accepter un<br />\n>> XML avec ou sans l\'entête \'<?xml version=\"1.0\" encoding=\"UTF-8\"?>\'.<br />\n>> Merci à nouveau, je vous tiens au courant ici même pour l\'entrepôt<br />\n>> d\'UNIT.<br />\n>> Vincent.<br />\n>><br />\n>><br />\n>><br />\n>> Mikael Le Bohec wrote:</p></blockquote>\n<blockquote class=\"emailFilter_Author_2\"><p>>>> Lucie Dengreville a écrit :</p></blockquote>\n<blockquote class=\"emailFilter_Author_3\"><p>>>>><br />\n>>>> Bonjour,<br />\n>>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_2\"><p>>>> Bonjour,<br />\n>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_3\"><p>>>>> je teste le module harvester en moissonnant l\'entrepot d\'unit.<br />\n>>>> J\'ai donc choisi, dans la définition d\'une nouvelle moisson,<br />\n>>>> l\'entrepot d\'unit <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler\">http://www.unit.eu/ori-oai-repository/OAIHandler</a>,<br />\n>>>> avec comme identifiant=lom_unit, le préfixe=lom, collection<br />\n>>>> =lom/unit et je n\'ai pas restreint la moisson.<br />\n>>>> Lorsque je lance la moisson, il semble que le module récupère des<br />\n>>>> données de l\'entrepot unit (voici ci dessous les logs, sachant que<br />\n>>>> j\'ai d\'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n°<br />\n>>>> processed avant qui commencent vers les 600 environ</p></blockquote>\n<blockquote class=\"emailFilter_Author_2\"><p>>>> Même constat chez moi alors que tout marchait bien il y a deux<br />\n>>> semaine ;-)<br />\n>>><br />\n>>> Pas de soucis en moissonant avec le préfixe oai_dc ; seul le lom<br />\n>>> pose problème.<br />\n>>><br />\n>>> En creusant un peu plus le problème j\'ai fait une requête via mon<br />\n>>> navigateur pour compérer les résultats d\'un ListRecords :<br />\n>>><br />\n>>> <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=oai_dc\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=oai_dc\">http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metada...</a><br />\n>>><br />\n>>> me renvoi un xml valide d\'après le navigateur.<br />\n>>><br />\n>>> Alors que<br />\n>>> <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=lom\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=lom\">http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metada...</a><br />\n>>> me renvoi une erreur.<br />\n>>> En allant à la ligne incriminée d\'après mon navigateur je vois qu\'à<br />\n>>> la suite de chaque balise \"<metadata>\" il y a un bloc xml : \'<?xml<br />\n>>> version=\"1.0\" encoding=\"UTF-8\"?>\'.<br />\n>>> Cela me semble anormal (il y a eu de modifications réçentes sur le<br />\n>>> repository d\'UNIT?) et que c\'est donc ça qui pose problème pour ton<br />\n>>> moissonage je pense.<br />\n>>><br />\n>>> À+</p></blockquote>\n<blockquote class=\"emailFilter_Author_3\"><p>>>>><br />\n>>>> ...<br />\n>>>> 69330 [Thread-33] DEBUG<br />\n>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9<br />\n>>>> processed<br />\n>>>> oriharvester: 69333<br />\n>>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n>>>> - resumptionToken: 1207068502478<br />\n>>>> 69333 [Thread-33] DEBUG<br />\n>>>> org.orioai.harvesting.domain.logic.OAIStore - resumptionToken:<br />\n>>>> 1207068502478<br />\n>>>> oriharvester: 70007<br />\n>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7<br />\n>>>> processed<br />\n>>>> 70007 [Thread-33] DEBUG<br />\n>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7<br />\n>>>> processed<br />\n>>>> oriharvester: 70007<br />\n>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17<br />\n>>>> processed<br />\n>>>> 70007 [Thread-33] DEBUG<br />\n>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17<br />\n>>>> processed<br />\n>>>> oriharvester: 70008<br />\n>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13<br />\n>>>> processed<br />\n>>>> 70008 [Thread-33] DEBUG<br />\n>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13<br />\n>>>> processed<br />\n>>>> oriharvester: 70008<br />\n>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11<br />\n>>>> processed<br />\n>>>> 70008 [Thread-33] DEBUG<br />\n>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11<br />\n>>>> processed<br />\n>>>> oriharvester: 70008<br />\n>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5<br />\n>>>> processed<br />\n>>>> 70008 [Thread-33] DEBUG<br />\n>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5<br />\n>>>> processed<br />\n>>>> oriharvester: 70010<br />\n>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3<br />\n>>>> processed<br />\n>>>> 70010 [Thread-33] DEBUG<br />\n>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3<br />\n>>>> processed<br />\n>>>> oriharvester: 70010<br />\n>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1<br />\n>>>> processed<br />\n>>>> 70010 [Thread-33] DEBUG<br />\n>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1<br />\n>>>> processed<br />\n>>>> oriharvester: 70012<br />\n>>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n>>>> - resumptionToken:<br />\n>>>> 70012 [Thread-33] DEBUG<br />\n>>>> org.orioai.harvesting.domain.logic.OAIStore - resumptionToken:<br />\n>>>> 70015 [Thread-33] DEBUG<br />\n>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>>> - making connection object with uri:<br />\n>>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports<br />\n>>>><br />\n>>>> 70019 [Thread-33] DEBUG<br />\n>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>>> - validating for :org.exist.xmldb.RemoteCollection@b125bd : true<br />\n>>>> 70037 [Thread-33] DEBUG<br />\n>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>>> - making connection object with uri:<br />\n>>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info<br />\n>>>> 70042 [Thread-33] DEBUG<br />\n>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>>> - validating for :org.exist.xmldb.RemoteCollection@2219b4 : true<br />\n>>>><br />\n>>>> le problème est qu\'au niveau des récoltes, je n\'obtiens aucun<br />\n>>>> document (nb de doc = 0).<br />\n>>>> Pour info, j\'ai configuré le proxy et j\'ai bien xfire-all-1.2.5.jar .<br />\n>>>><br />\n>>>> Quelqu\'un a-t-il rencontré ce problème? comment le résoudre ?<br />\n>>>><br />\n>>>> merci pour vos réponses,<br />\n>>>><br />\n>>>> Lucie Dengreville<br />\n>>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_2\"><p>>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_0\"><p>><br />\n></div>\n</blockquote>\n<p>--<br />\nCe message a été vérifié par MailScanner<br />\npour des virus ou des polluriels et rien de<br />\nsuspect n\'a été trouvé.</p>\n</div>\n', created = 1507745903, expire = 1507832303, headers = '', serialized = 0 WHERE cid = '4:758c7cc78bd3b48197d6b13e10352be5' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 112.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: SELECT data, created, headers, expire, serialized FROM cache_filter WHERE cid = '4:604571dc3a707d278254f90ffa3607c4' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 27.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: UPDATE cache_filter SET data = '<div class=\"emailFilter\">Mikael Le Bohec a écrit :<br />\n<div class=\"emailFilter_Toggle\">\n<blockquote class=\"emailFilter_Author_0\"><p>> Vincent Bonamy a écrit :</p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>> Tout est normalement rentré dans l\'ordre du côté de l\'entrepôt OAI<br />\n>> d\'UNIT.<br />\n>> Bonne soirée,<br />\n>> Vincent.<br />\n>></p></blockquote>\n<blockquote class=\"emailFilter_Author_0\"><p>> Je confirme ; ça moissonne bien en lom maintenant.<br />\n><br />\n> À+</div>\n</blockquote>\n<p>Effectivement le moissonnage des fiches lom de l\'entrepot d\'unit semble<br />\nfonctionner maintenant.<br />\nEn relançant la récolte, ça ne marchait toujours pas, peut-être était-ce<br />\ndû au fait d\'avoir défini la moisson avant que le problème soit résolu.<br />\nEn supprimant la définition de la moisson, et en effaçant les<br />\nrépertoires lom/unit dans harvest et dans harvest-report au niveau<br />\nd\'exist avant de rédéfinir la moisson et de procéder à la récolte, j\'ai<br />\nbien pu moissonner les fiches lom de l\'entrepot d\'unit.<br />\nNéanmois j\'ai remarqué que le nombre de fiches moissonnées était le même<br />\npour les deux types de fiches (lom et dc), à savoir 447 fiches. En<br />\nfaisant une recherche avec le module ori-oai-search, on remarque que<br />\nchaque fiche apparait 2 fois, une fois avec le format Documentaire (DC)<br />\net une avec le format Pédagogique (LOM).</p>\n<p>Est-ce normal ?</p>\n<div class=\"emailFilter_Toggle\">\n<blockquote class=\"emailFilter_Author_1\"><p>>><br />\n>> Vincent Bonamy wrote:</p></blockquote>\n<blockquote class=\"emailFilter_Author_2\"><p>>>> Bonjour,<br />\n>>> Merci à vous deux.<br />\n>>> Je n\'avais pas fait attention à cela et l\'explication directe de<br />\n>>> Mikael nous met plus que sur la voie, Merci !<br />\n>>> Sur UNIT, la Future version du module ori-oai-workflow 1.1.0 est \"en<br />\n>>> test\", dans le sens où on est en production sur cette version pas<br />\n>>> encore annoncée [on n\'avait pas constaté de problèmes jusque là].<br />\n>>> Un des gros changements est la façon dont on stocke les fichiers XML<br />\n>>> : on n\'utilise plus eXist, on met les fiches XML directement dans le<br />\n>>> MySql.<br />\n>>> Donc la récupération des fiches se fait maintenant différemment et<br />\n>>> effectivement il est plus que probable que le XML envoyé à<br />\n>>> l\'ori-oai-indexing (puis renvoyé lui-même à ori-oai-repository)<br />\n>>> contienne un \'<?xml version=\"1.0\" encoding=\"UTF-8\"?>\' comme<br />\n>>> l\'indique Mikael.<br />\n>>> Je vais changer au niveau de ori-oai-workflow, mais à terme il<br />\n>>> faudra peut-être (à voir ...) que le repository soit capable<br />\n>>> d\'accepter un XML avec ou sans l\'entête \'<?xml version=\"1.0\"<br />\n>>> encoding=\"UTF-8\"?>\'.<br />\n>>> Merci à nouveau, je vous tiens au courant ici même pour l\'entrepôt<br />\n>>> d\'UNIT.<br />\n>>> Vincent.<br />\n>>><br />\n>>><br />\n>>><br />\n>>> Mikael Le Bohec wrote:</p></blockquote>\n<blockquote class=\"emailFilter_Author_3\"><p>>>>> Lucie Dengreville a écrit :</p></blockquote>\n<blockquote class=\"emailFilter_Author_4\"><p>>>>>><br />\n>>>>> Bonjour,<br />\n>>>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_3\"><p>>>>> Bonjour,<br />\n>>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_4\"><p>>>>>> je teste le module harvester en moissonnant l\'entrepot d\'unit.<br />\n>>>>> J\'ai donc choisi, dans la définition d\'une nouvelle moisson,<br />\n>>>>> l\'entrepot d\'unit<br />\n>>>>> <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler\">http://www.unit.eu/ori-oai-repository/OAIHandler</a>, avec comme<br />\n>>>>> identifiant=lom_unit, le préfixe=lom, collection =lom/unit et je<br />\n>>>>> n\'ai pas restreint la moisson.<br />\n>>>>> Lorsque je lance la moisson, il semble que le module récupère des<br />\n>>>>> données de l\'entrepot unit (voici ci dessous les logs, sachant que<br />\n>>>>> j\'ai d\'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n°<br />\n>>>>> processed avant qui commencent vers les 600 environ</p></blockquote>\n<blockquote class=\"emailFilter_Author_3\"><p>>>>> Même constat chez moi alors que tout marchait bien il y a deux<br />\n>>>> semaine ;-)<br />\n>>>><br />\n>>>> Pas de soucis en moissonant avec le préfixe oai_dc ; seul le lom<br />\n>>>> pose problème.<br />\n>>>><br />\n>>>> En creusant un peu plus le problème j\'ai fait une requête via mon<br />\n>>>> navigateur pour compérer les résultats d\'un ListRecords :<br />\n>>>><br />\n>>>> <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=oai_dc\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=oai_dc\">http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metada...</a><br />\n>>>><br />\n>>>> me renvoi un xml valide d\'après le navigateur.<br />\n>>>><br />\n>>>> Alors que<br />\n>>>> <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=lom\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=lom\">http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metada...</a><br />\n>>>> me renvoi une erreur.<br />\n>>>> En allant à la ligne incriminée d\'après mon navigateur je vois qu\'à<br />\n>>>> la suite de chaque balise \"<metadata>\" il y a un bloc xml : \'<?xml<br />\n>>>> version=\"1.0\" encoding=\"UTF-8\"?>\'.<br />\n>>>> Cela me semble anormal (il y a eu de modifications réçentes sur le<br />\n>>>> repository d\'UNIT?) et que c\'est donc ça qui pose problème pour ton<br />\n>>>> moissonage je pense.<br />\n>>>><br />\n>>>> À+</p></blockquote>\n<blockquote class=\"emailFilter_Author_4\"><p>>>>>><br />\n>>>>> ...<br />\n>>>>> 69330 [Thread-33] DEBUG<br />\n>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9<br />\n>>>>> processed<br />\n>>>>> oriharvester: 69333<br />\n>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n>>>>> - resumptionToken: 1207068502478<br />\n>>>>> 69333 [Thread-33] DEBUG<br />\n>>>>> org.orioai.harvesting.domain.logic.OAIStore - resumptionToken:<br />\n>>>>> 1207068502478<br />\n>>>>> oriharvester: 70007<br />\n>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7<br />\n>>>>> processed<br />\n>>>>> 70007 [Thread-33] DEBUG<br />\n>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7<br />\n>>>>> processed<br />\n>>>>> oriharvester: 70007<br />\n>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17<br />\n>>>>> processed<br />\n>>>>> 70007 [Thread-33] DEBUG<br />\n>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17<br />\n>>>>> processed<br />\n>>>>> oriharvester: 70008<br />\n>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13<br />\n>>>>> processed<br />\n>>>>> 70008 [Thread-33] DEBUG<br />\n>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13<br />\n>>>>> processed<br />\n>>>>> oriharvester: 70008<br />\n>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11<br />\n>>>>> processed<br />\n>>>>> 70008 [Thread-33] DEBUG<br />\n>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11<br />\n>>>>> processed<br />\n>>>>> oriharvester: 70008<br />\n>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5<br />\n>>>>> processed<br />\n>>>>> 70008 [Thread-33] DEBUG<br />\n>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5<br />\n>>>>> processed<br />\n>>>>> oriharvester: 70010<br />\n>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3<br />\n>>>>> processed<br />\n>>>>> 70010 [Thread-33] DEBUG<br />\n>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3<br />\n>>>>> processed<br />\n>>>>> oriharvester: 70010<br />\n>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1<br />\n>>>>> processed<br />\n>>>>> 70010 [Thread-33] DEBUG<br />\n>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1<br />\n>>>>> processed<br />\n>>>>> oriharvester: 70012<br />\n>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n>>>>> - resumptionToken:<br />\n>>>>> 70012 [Thread-33] DEBUG<br />\n>>>>> org.orioai.harvesting.domain.logic.OAIStore - resumptionToken:<br />\n>>>>> 70015 [Thread-33] DEBUG<br />\n>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>>>> - making connection object with uri:<br />\n>>>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports<br />\n>>>>><br />\n>>>>> 70019 [Thread-33] DEBUG<br />\n>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>>>> - validating for :org.exist.xmldb.RemoteCollection@b125bd : true<br />\n>>>>> 70037 [Thread-33] DEBUG<br />\n>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>>>> - making connection object with uri:<br />\n>>>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info<br />\n>>>>> 70042 [Thread-33] DEBUG<br />\n>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>>>> - validating for :org.exist.xmldb.RemoteCollection@2219b4 : true<br />\n>>>>><br />\n>>>>> le problème est qu\'au niveau des récoltes, je n\'obtiens aucun<br />\n>>>>> document (nb de doc = 0).<br />\n>>>>> Pour info, j\'ai configuré le proxy et j\'ai bien xfire-all-1.2.5.jar .<br />\n>>>>><br />\n>>>>> Quelqu\'un a-t-il rencontré ce problème? comment le résoudre ?<br />\n>>>>><br />\n>>>>> merci pour vos réponses,<br />\n>>>>><br />\n>>>>> Lucie Dengreville<br />\n>>>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_3\"><p>>>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_2\"><p>>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>><br />\n>></p></blockquote>\n<blockquote class=\"emailFilter_Author_0\"><p>><br />\n></div>\n</blockquote>\n<p>--<br />\n----------------------------------<br />\nLucie Dengreville<br />\nCentre de Ressources Informatiques<br />\nUniversité Rennes 2 Haute Bretagne<br />\n02.99.14.13.66<br />\n-----------------------------------</p>\n<p>--<br />\nCe message a été vérifié par MailScanner<br />\npour des virus ou des polluriels et rien de<br />\nsuspect n\'a été trouvé.</p>\n</div>\n', created = 1507745903, expire = 1507832303, headers = '', serialized = 0 WHERE cid = '4:604571dc3a707d278254f90ffa3607c4' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 112.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: SELECT data, created, headers, expire, serialized FROM cache_filter WHERE cid = '4:734d00e81c88368d2ab8d4b75b2d0573' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 27.
  • user warning: Table './drupal_www_ori_oai_org/cache_filter' is marked as crashed and last (automatic?) repair failed query: UPDATE cache_filter SET data = '<div class=\"emailFilter\">Lucie Dengreville wrote:<br />\n<div class=\"emailFilter_Toggle\">\n<blockquote class=\"emailFilter_Author_0\"><p>> Mikael Le Bohec a écrit :</p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>> Vincent Bonamy a écrit :</p></blockquote>\n<blockquote class=\"emailFilter_Author_2\"><p>>>> Tout est normalement rentré dans l\'ordre du côté de l\'entrepôt OAI<br />\n>>> d\'UNIT.<br />\n>>> Bonne soirée,<br />\n>>> Vincent.<br />\n>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>> Je confirme ; ça moissonne bien en lom maintenant.<br />\n>><br />\n>> À+</p></blockquote>\n<blockquote class=\"emailFilter_Author_0\"><p>> Effectivement le moissonnage des fiches lom de l\'entrepot d\'unit<br />\n> semble fonctionner maintenant.<br />\n> En relançant la récolte, ça ne marchait toujours pas, peut-être<br />\n> était-ce dû au fait d\'avoir défini la moisson avant que le problème<br />\n> soit résolu.<br />\n> En supprimant la définition de la moisson, et en effaçant les<br />\n> répertoires lom/unit dans harvest et dans harvest-report au niveau<br />\n> d\'exist avant de rédéfinir la moisson et de procéder à la récolte,<br />\n> j\'ai bien pu moissonner les fiches lom de l\'entrepot d\'unit.<br />\n> Néanmois j\'ai remarqué que le nombre de fiches moissonnées était le<br />\n> même pour les deux types de fiches (lom et dc), à savoir 447 fiches.<br />\n> En faisant une recherche avec le module ori-oai-search, on remarque<br />\n> que chaque fiche apparait 2 fois, une fois avec le format Documentaire<br />\n> (DC) et une avec le format Pédagogique (LOM).<br />\n><br />\n> Est-ce normal ?</div>\n</blockquote>\n<p>C\'est \"normal\" en l\'état actuel des modules ORI-OAI.<br />\nEn OAI-PMH, le format Dublin Core est requis, cela veut dire que tout ce<br />\nqui est exposé en LOM (par exemple) doit aussi être disponible sous le<br />\nformat OAI_DC (Schéma Dublin Core OAI).<br />\nD\'où le fait que tu retrouves le même nombre de ressources en LOM et<br />\nOAI_DC : sur UNIT, on ne fait \"en entrée\" que du LOM.<br />\nOn imagine cependant facilement les limites de l\'ensemble dans cette<br />\nfaçon de fonctionner (cf ton expérimentation par exemple).<br />\nAussi il faudra que ORI-OAI (au travers du moteur d\'indexation, du<br />\nmoteur de recherche ... ) soit (et assez rapidement) capable de<br />\nfusionner les informations des différents formats disponibles. L\'idée<br />\nétant que lorsqu\'on moissonne les métadonnées d\'une même entité sous les<br />\ndifférents formats disponibles , le moteur de recherche voit cela comme<br />\nune seule entité.<br />\nCela permettrait de ne pas voir les fiches DC et LOM comme 2 réponses<br />\ndistinctes [comme tu le décris], cela permettrait finalement de faire<br />\njouer aux différentes fiches XML d\'une même entité (de format différent<br />\ndonc) leur rôle, c\'est à dire qualifier l\'entité au mieux selon un cas<br />\nd\'usage particulier (cas d\'usage qui correspond au schéma donné) ...</p>\n<p>Tout commentaire complémentaire sur cela est le bienvenue.</p>\n<p>Vincent.</p>\n<div class=\"emailFilter_Toggle\">\n<blockquote class=\"emailFilter_Author_0\"><p>><br />\n></p></blockquote>\n<blockquote class=\"emailFilter_Author_2\"><p>>>><br />\n>>> Vincent Bonamy wrote:</p></blockquote>\n<blockquote class=\"emailFilter_Author_3\"><p>>>>> Bonjour,<br />\n>>>> Merci à vous deux.<br />\n>>>> Je n\'avais pas fait attention à cela et l\'explication directe de<br />\n>>>> Mikael nous met plus que sur la voie, Merci !<br />\n>>>> Sur UNIT, la Future version du module ori-oai-workflow 1.1.0 est<br />\n>>>> \"en test\", dans le sens où on est en production sur cette version<br />\n>>>> pas encore annoncée [on n\'avait pas constaté de problèmes jusque là].<br />\n>>>> Un des gros changements est la façon dont on stocke les fichiers<br />\n>>>> XML : on n\'utilise plus eXist, on met les fiches XML directement<br />\n>>>> dans le MySql.<br />\n>>>> Donc la récupération des fiches se fait maintenant différemment et<br />\n>>>> effectivement il est plus que probable que le XML envoyé à<br />\n>>>> l\'ori-oai-indexing (puis renvoyé lui-même à ori-oai-repository)<br />\n>>>> contienne un \'<?xml version=\"1.0\" encoding=\"UTF-8\"?>\' comme<br />\n>>>> l\'indique Mikael.<br />\n>>>> Je vais changer au niveau de ori-oai-workflow, mais à terme il<br />\n>>>> faudra peut-être (à voir ...) que le repository soit capable<br />\n>>>> d\'accepter un XML avec ou sans l\'entête \'<?xml version=\"1.0\"<br />\n>>>> encoding=\"UTF-8\"?>\'.<br />\n>>>> Merci à nouveau, je vous tiens au courant ici même pour l\'entrepôt<br />\n>>>> d\'UNIT.<br />\n>>>> Vincent.<br />\n>>>><br />\n>>>><br />\n>>>><br />\n>>>> Mikael Le Bohec wrote:</p></blockquote>\n<blockquote class=\"emailFilter_Author_4\"><p>>>>>> Lucie Dengreville a écrit :</p></blockquote>\n<blockquote class=\"emailFilter_Author_5\"><p>>>>>>><br />\n>>>>>> Bonjour,<br />\n>>>>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_4\"><p>>>>>> Bonjour,<br />\n>>>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_5\"><p>>>>>>> je teste le module harvester en moissonnant l\'entrepot d\'unit.<br />\n>>>>>> J\'ai donc choisi, dans la définition d\'une nouvelle moisson,<br />\n>>>>>> l\'entrepot d\'unit<br />\n>>>>>> <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler\">http://www.unit.eu/ori-oai-repository/OAIHandler</a>, avec comme<br />\n>>>>>> identifiant=lom_unit, le préfixe=lom, collection =lom/unit et je<br />\n>>>>>> n\'ai pas restreint la moisson.<br />\n>>>>>> Lorsque je lance la moisson, il semble que le module récupère des<br />\n>>>>>> données de l\'entrepot unit (voici ci dessous les logs, sachant<br />\n>>>>>> que j\'ai d\'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n°<br />\n>>>>>> processed avant qui commencent vers les 600 environ</p></blockquote>\n<blockquote class=\"emailFilter_Author_4\"><p>>>>>> Même constat chez moi alors que tout marchait bien il y a deux<br />\n>>>>> semaine ;-)<br />\n>>>>><br />\n>>>>> Pas de soucis en moissonant avec le préfixe oai_dc ; seul le lom<br />\n>>>>> pose problème.<br />\n>>>>><br />\n>>>>> En creusant un peu plus le problème j\'ai fait une requête via mon<br />\n>>>>> navigateur pour compérer les résultats d\'un ListRecords :<br />\n>>>>><br />\n>>>>> <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=oai_dc\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=oai_dc\">http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metada...</a><br />\n>>>>><br />\n>>>>> me renvoi un xml valide d\'après le navigateur.<br />\n>>>>><br />\n>>>>> Alors que<br />\n>>>>> <a href=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=lom\" title=\"http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metadataPrefix=lom\">http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&amp;metada...</a><br />\n>>>>> me renvoi une erreur.<br />\n>>>>> En allant à la ligne incriminée d\'après mon navigateur je vois<br />\n>>>>> qu\'à la suite de chaque balise \"<metadata>\" il y a un bloc xml :<br />\n>>>>> \'<?xml version=\"1.0\" encoding=\"UTF-8\"?>\'.<br />\n>>>>> Cela me semble anormal (il y a eu de modifications réçentes sur le<br />\n>>>>> repository d\'UNIT?) et que c\'est donc ça qui pose problème pour<br />\n>>>>> ton moissonage je pense.<br />\n>>>>><br />\n>>>>> À+</p></blockquote>\n<blockquote class=\"emailFilter_Author_5\"><p>>>>>>><br />\n>>>>>> ...<br />\n>>>>>> 69330 [Thread-33] DEBUG<br />\n>>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9<br />\n>>>>>> processed<br />\n>>>>>> oriharvester: 69333<br />\n>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n>>>>>> - resumptionToken: 1207068502478<br />\n>>>>>> 69333 [Thread-33] DEBUG<br />\n>>>>>> org.orioai.harvesting.domain.logic.OAIStore - resumptionToken:<br />\n>>>>>> 1207068502478<br />\n>>>>>> oriharvester: 70007<br />\n>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7<br />\n>>>>>> processed<br />\n>>>>>> 70007 [Thread-33] DEBUG<br />\n>>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7<br />\n>>>>>> processed<br />\n>>>>>> oriharvester: 70007<br />\n>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17<br />\n>>>>>> processed<br />\n>>>>>> 70007 [Thread-33] DEBUG<br />\n>>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17<br />\n>>>>>> processed<br />\n>>>>>> oriharvester: 70008<br />\n>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13<br />\n>>>>>> processed<br />\n>>>>>> 70008 [Thread-33] DEBUG<br />\n>>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13<br />\n>>>>>> processed<br />\n>>>>>> oriharvester: 70008<br />\n>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11<br />\n>>>>>> processed<br />\n>>>>>> 70008 [Thread-33] DEBUG<br />\n>>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11<br />\n>>>>>> processed<br />\n>>>>>> oriharvester: 70008<br />\n>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5<br />\n>>>>>> processed<br />\n>>>>>> 70008 [Thread-33] DEBUG<br />\n>>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5<br />\n>>>>>> processed<br />\n>>>>>> oriharvester: 70010<br />\n>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3<br />\n>>>>>> processed<br />\n>>>>>> 70010 [Thread-33] DEBUG<br />\n>>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3<br />\n>>>>>> processed<br />\n>>>>>> oriharvester: 70010<br />\n>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)<br />\n>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1<br />\n>>>>>> processed<br />\n>>>>>> 70010 [Thread-33] DEBUG<br />\n>>>>>> org.orioai.harvesting.domain.logic.OAIStore -<br />\n>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1<br />\n>>>>>> processed<br />\n>>>>>> oriharvester: 70012<br />\n>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)<br />\n>>>>>> - resumptionToken:<br />\n>>>>>> 70012 [Thread-33] DEBUG<br />\n>>>>>> org.orioai.harvesting.domain.logic.OAIStore - resumptionToken:<br />\n>>>>>> 70015 [Thread-33] DEBUG<br />\n>>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>>>>> - making connection object with uri:<br />\n>>>>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports<br />\n>>>>>><br />\n>>>>>> 70019 [Thread-33] DEBUG<br />\n>>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>>>>> - validating for :org.exist.xmldb.RemoteCollection@b125bd : true<br />\n>>>>>> 70037 [Thread-33] DEBUG<br />\n>>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>>>>> - making connection object with uri:<br />\n>>>>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info<br />\n>>>>>> 70042 [Thread-33] DEBUG<br />\n>>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory<br />\n>>>>>> - validating for :org.exist.xmldb.RemoteCollection@2219b4 : true<br />\n>>>>>><br />\n>>>>>> le problème est qu\'au niveau des récoltes, je n\'obtiens aucun<br />\n>>>>>> document (nb de doc = 0).<br />\n>>>>>> Pour info, j\'ai configuré le proxy et j\'ai bien<br />\n>>>>>> xfire-all-1.2.5.jar .<br />\n>>>>>><br />\n>>>>>> Quelqu\'un a-t-il rencontré ce problème? comment le résoudre ?<br />\n>>>>>><br />\n>>>>>> merci pour vos réponses,<br />\n>>>>>><br />\n>>>>>> Lucie Dengreville<br />\n>>>>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_4\"><p>>>>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_3\"><p>>>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_2\"><p>>>><br />\n>>></p></blockquote>\n<blockquote class=\"emailFilter_Author_1\"><p>>><br />\n>></p></blockquote>\n<blockquote class=\"emailFilter_Author_0\"><p>><br />\n></div>\n</blockquote>\n<p>--<br />\nCe message a été vérifié par MailScanner<br />\npour des virus ou des polluriels et rien de<br />\nsuspect n\'a été trouvé.</p>\n</div>\n', created = 1507745903, expire = 1507832303, headers = '', serialized = 0 WHERE cid = '4:734d00e81c88368d2ab8d4b75b2d0573' in /home/ori-oai/drupal/drupal-6.34/includes/cache.inc on line 112.
7 messages / 0 nouveaux
Sujet clos
Dernière contribution
1 avril 2008 - 4:58pm
#1
luciedengreville
pb récoltes harvester
Bonjour,

je teste le module harvester en moissonnant l'entrepot d'unit.
J'ai donc choisi, dans la définition d'une nouvelle moisson, l'entrepot
d'unit http://www.unit.eu/ori-oai-repository/OAIHandler, avec comme
identifiant=lom_unit, le préfixe=lom, collection =lom/unit et je n'ai
pas restreint la moisson.
Lorsque je lance la moisson, il semble que le module récupère des
données de l'entrepot unit (voici ci dessous les logs, sachant que j'ai
d'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n° processed avant
qui commencent vers les 600 environ

...
69330 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9 processed
oriharvester: 69333
org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
- resumptionToken: 1207068502478
69333 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
resumptionToken: 1207068502478
oriharvester: 70007
org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7 processed
70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7 processed
oriharvester: 70007
org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17 processed
70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17 processed
oriharvester: 70008
org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13 processed
70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13 processed
oriharvester: 70008
org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11 processed
70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11 processed
oriharvester: 70008
org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5 processed
70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5 processed
oriharvester: 70010
org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3 processed
70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3 processed
oriharvester: 70010
org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
- MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1 processed
70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1 processed
oriharvester: 70012
org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
- resumptionToken:
70012 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
resumptionToken:
70015 [Thread-33] DEBUG
uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
- making connection object with uri:
xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports
70019 [Thread-33] DEBUG
uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
- validating for :org.exist.xmldb.RemoteCollection@b125bd : true
70037 [Thread-33] DEBUG
uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
- making connection object with uri:
xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info
70042 [Thread-33] DEBUG
uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
- validating for :org.exist.xmldb.RemoteCollection@2219b4 : true

le problème est qu'au niveau des récoltes, je n'obtiens aucun document
(nb de doc = 0).
Pour info, j'ai configuré le proxy et j'ai bien xfire-all-1.2.5.jar .

Quelqu'un a-t-il rencontré ce problème? comment le résoudre ?

merci pour vos réponses,

Lucie Dengreville

--
----------------------------------
Lucie Dengreville
Centre de Ressources Informatiques
Université Rennes 2 Haute Bretagne
02.99.14.13.66
-----------------------------------

--
Ce message a été vérifié par MailScanner
pour des virus ou des polluriels et rien de
suspect n'a été trouvé.

Haut
Étiquettes:
1 avril 2008 - 6:22pm
#2
mikaellebohec
Lucie Dengreville a écrit :

>
> Bonjour,
>

Bonjour,

> je teste le module harvester en moissonnant l'entrepot d'unit.
> J'ai donc choisi, dans la définition d'une nouvelle moisson,
> l'entrepot d'unit http://www.unit.eu/ori-oai-repository/OAIHandler,
> avec comme identifiant=lom_unit, le préfixe=lom, collection =lom/unit
> et je n'ai pas restreint la moisson.
> Lorsque je lance la moisson, il semble que le module récupère des
> données de l'entrepot unit (voici ci dessous les logs, sachant que
> j'ai d'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n° processed
> avant qui commencent vers les 600 environ

Même constat chez moi alors que tout marchait bien il y a deux semaine ;-)

Pas de soucis en moissonant avec le préfixe oai_dc ; seul le lom pose
problème.

En creusant un peu plus le problème j'ai fait une requête via mon
navigateur pour compérer les résultats d'un ListRecords :

http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&metada...
me renvoi un xml valide d'après le navigateur.

Alors que
http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&metada...
me renvoi une erreur.
En allant à la ligne incriminée d'après mon navigateur je vois qu'à la
suite de chaque balise "" il y a un bloc xml : ' version="1.0" encoding="UTF-8"?>'.
Cela me semble anormal (il y a eu de modifications réçentes sur le
repository d'UNIT?) et que c'est donc ça qui pose problème pour ton
moissonage je pense.

À+

>
> ...
> 69330 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9 processed
> oriharvester: 69333
> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
> - resumptionToken: 1207068502478
> 69333 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
> resumptionToken: 1207068502478
> oriharvester: 70007
> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7
> processed
> 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7 processed
> oriharvester: 70007
> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17
> processed
> 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17 processed
> oriharvester: 70008
> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13
> processed
> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13 processed
> oriharvester: 70008
> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11
> processed
> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11 processed
> oriharvester: 70008
> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5
> processed
> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5 processed
> oriharvester: 70010
> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3
> processed
> 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3 processed
> oriharvester: 70010
> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1
> processed
> 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1 processed
> oriharvester: 70012
> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
> - resumptionToken:
> 70012 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore -
> resumptionToken:
> 70015 [Thread-33] DEBUG
> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
> - making connection object with uri:
> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports
> 70019 [Thread-33] DEBUG
> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
> - validating for :org.exist.xmldb.RemoteCollection@b125bd : true
> 70037 [Thread-33] DEBUG
> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
> - making connection object with uri:
> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info
> 70042 [Thread-33] DEBUG
> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
> - validating for :org.exist.xmldb.RemoteCollection@2219b4 : true
>
> le problème est qu'au niveau des récoltes, je n'obtiens aucun document
> (nb de doc = 0).
> Pour info, j'ai configuré le proxy et j'ai bien xfire-all-1.2.5.jar .
>
> Quelqu'un a-t-il rencontré ce problème? comment le résoudre ?
>
> merci pour vos réponses,
>
> Lucie Dengreville
>

--
Ce message a été vérifié par MailScanner
pour des virus ou des polluriels et rien de
suspect n'a été trouvé.

Haut
1 avril 2008 - 7:11pm
(Répondre à #2) #3
vincentbonamy
Bonjour,
Merci à vous deux.
Je n'avais pas fait attention à cela et l'explication directe de Mikael
nous met plus que sur la voie, Merci !
Sur UNIT, la Future version du module ori-oai-workflow 1.1.0 est "en
test", dans le sens où on est en production sur cette version pas encore
annoncée [on n'avait pas constaté de problèmes jusque là].
Un des gros changements est la façon dont on stocke les fichiers XML :
on n'utilise plus eXist, on met les fiches XML directement dans le MySql.
Donc la récupération des fiches se fait maintenant différemment et
effectivement il est plus que probable que le XML envoyé à
l'ori-oai-indexing (puis renvoyé lui-même à ori-oai-repository)
contienne un '' comme l'indique
Mikael.
Je vais changer au niveau de ori-oai-workflow, mais à terme il faudra
peut-être (à voir ...) que le repository soit capable d'accepter un XML
avec ou sans l'entête ''.
Merci à nouveau, je vous tiens au courant ici même pour l'entrepôt d'UNIT.
Vincent.

Mikael Le Bohec wrote:

> Lucie Dengreville a écrit :

>>
>> Bonjour,
>>

> Bonjour,
>

>> je teste le module harvester en moissonnant l'entrepot d'unit.
>> J'ai donc choisi, dans la définition d'une nouvelle moisson,
>> l'entrepot d'unit http://www.unit.eu/ori-oai-repository/OAIHandler,
>> avec comme identifiant=lom_unit, le préfixe=lom, collection =lom/unit
>> et je n'ai pas restreint la moisson.
>> Lorsque je lance la moisson, il semble que le module récupère des
>> données de l'entrepot unit (voici ci dessous les logs, sachant que
>> j'ai d'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n° processed
>> avant qui commencent vers les 600 environ

> Même constat chez moi alors que tout marchait bien il y a deux semaine
> ;-)
>
> Pas de soucis en moissonant avec le préfixe oai_dc ; seul le lom pose
> problème.
>
> En creusant un peu plus le problème j'ai fait une requête via mon
> navigateur pour compérer les résultats d'un ListRecords :
>
> http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&metada...
>
> me renvoi un xml valide d'après le navigateur.
>
> Alors que
> http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&metada...
> me renvoi une erreur.
> En allant à la ligne incriminée d'après mon navigateur je vois qu'à la
> suite de chaque balise "" il y a un bloc xml : ' > version="1.0" encoding="UTF-8"?>'.
> Cela me semble anormal (il y a eu de modifications réçentes sur le
> repository d'UNIT?) et que c'est donc ça qui pose problème pour ton
> moissonage je pense.
>
> À+

>>
>> ...
>> 69330 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9
>> processed
>> oriharvester: 69333
>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
>> - resumptionToken: 1207068502478
>> 69333 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>> - resumptionToken: 1207068502478
>> oriharvester: 70007
>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7
>> processed
>> 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7
>> processed
>> oriharvester: 70007
>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17
>> processed
>> 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17
>> processed
>> oriharvester: 70008
>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13
>> processed
>> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13
>> processed
>> oriharvester: 70008
>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11
>> processed
>> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11
>> processed
>> oriharvester: 70008
>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5
>> processed
>> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5
>> processed
>> oriharvester: 70010
>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3
>> processed
>> 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3
>> processed
>> oriharvester: 70010
>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1
>> processed
>> 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1
>> processed
>> oriharvester: 70012
>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
>> - resumptionToken:
>> 70012 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>> - resumptionToken:
>> 70015 [Thread-33] DEBUG
>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>> - making connection object with uri:
>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports
>> 70019 [Thread-33] DEBUG
>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>> - validating for :org.exist.xmldb.RemoteCollection@b125bd : true
>> 70037 [Thread-33] DEBUG
>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>> - making connection object with uri:
>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info
>> 70042 [Thread-33] DEBUG
>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>> - validating for :org.exist.xmldb.RemoteCollection@2219b4 : true
>>
>> le problème est qu'au niveau des récoltes, je n'obtiens aucun
>> document (nb de doc = 0).
>> Pour info, j'ai configuré le proxy et j'ai bien xfire-all-1.2.5.jar .
>>
>> Quelqu'un a-t-il rencontré ce problème? comment le résoudre ?
>>
>> merci pour vos réponses,
>>
>> Lucie Dengreville
>>

>

--
Ce message a été vérifié par MailScanner
pour des virus ou des polluriels et rien de
suspect n'a été trouvé.

Haut
1 avril 2008 - 9:29pm
(Répondre à #3) #4
vincentbonamy
Tout est normalement rentré dans l'ordre du côté de l'entrepôt OAI d'UNIT.
Bonne soirée,
Vincent.

Vincent Bonamy wrote:

> Bonjour,
> Merci à vous deux.
> Je n'avais pas fait attention à cela et l'explication directe de
> Mikael nous met plus que sur la voie, Merci !
> Sur UNIT, la Future version du module ori-oai-workflow 1.1.0 est "en
> test", dans le sens où on est en production sur cette version pas
> encore annoncée [on n'avait pas constaté de problèmes jusque là].
> Un des gros changements est la façon dont on stocke les fichiers XML :
> on n'utilise plus eXist, on met les fiches XML directement dans le MySql.
> Donc la récupération des fiches se fait maintenant différemment et
> effectivement il est plus que probable que le XML envoyé à
> l'ori-oai-indexing (puis renvoyé lui-même à ori-oai-repository)
> contienne un '' comme l'indique
> Mikael.
> Je vais changer au niveau de ori-oai-workflow, mais à terme il faudra
> peut-être (à voir ...) que le repository soit capable d'accepter un
> XML avec ou sans l'entête ''.
> Merci à nouveau, je vous tiens au courant ici même pour l'entrepôt
> d'UNIT.
> Vincent.
>
>
>
> Mikael Le Bohec wrote:

>> Lucie Dengreville a écrit :

>>>
>>> Bonjour,
>>>

>> Bonjour,
>>

>>> je teste le module harvester en moissonnant l'entrepot d'unit.
>>> J'ai donc choisi, dans la définition d'une nouvelle moisson,
>>> l'entrepot d'unit http://www.unit.eu/ori-oai-repository/OAIHandler,
>>> avec comme identifiant=lom_unit, le préfixe=lom, collection
>>> =lom/unit et je n'ai pas restreint la moisson.
>>> Lorsque je lance la moisson, il semble que le module récupère des
>>> données de l'entrepot unit (voici ci dessous les logs, sachant que
>>> j'ai d'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n° processed
>>> avant qui commencent vers les 600 environ

>> Même constat chez moi alors que tout marchait bien il y a deux
>> semaine ;-)
>>
>> Pas de soucis en moissonant avec le préfixe oai_dc ; seul le lom pose
>> problème.
>>
>> En creusant un peu plus le problème j'ai fait une requête via mon
>> navigateur pour compérer les résultats d'un ListRecords :
>>
>> http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&metada...
>>
>> me renvoi un xml valide d'après le navigateur.
>>
>> Alors que
>> http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&metada...
>> me renvoi une erreur.
>> En allant à la ligne incriminée d'après mon navigateur je vois qu'à
>> la suite de chaque balise "" il y a un bloc xml : ' >> version="1.0" encoding="UTF-8"?>'.
>> Cela me semble anormal (il y a eu de modifications réçentes sur le
>> repository d'UNIT?) et que c'est donc ça qui pose problème pour ton
>> moissonage je pense.
>>
>> À+

>>>
>>> ...
>>> 69330 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9
>>> processed
>>> oriharvester: 69333
>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
>>> - resumptionToken: 1207068502478
>>> 69333 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>>> - resumptionToken: 1207068502478
>>> oriharvester: 70007
>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7
>>> processed
>>> 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7
>>> processed
>>> oriharvester: 70007
>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17
>>> processed
>>> 70007 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17
>>> processed
>>> oriharvester: 70008
>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13
>>> processed
>>> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13
>>> processed
>>> oriharvester: 70008
>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11
>>> processed
>>> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11
>>> processed
>>> oriharvester: 70008
>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5
>>> processed
>>> 70008 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5
>>> processed
>>> oriharvester: 70010
>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3
>>> processed
>>> 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3
>>> processed
>>> oriharvester: 70010
>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1
>>> processed
>>> 70010 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1
>>> processed
>>> oriharvester: 70012
>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
>>> - resumptionToken:
>>> 70012 [Thread-33] DEBUG org.orioai.harvesting.domain.logic.OAIStore
>>> - resumptionToken:
>>> 70015 [Thread-33] DEBUG
>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>> - making connection object with uri:
>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports
>>>
>>> 70019 [Thread-33] DEBUG
>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>> - validating for :org.exist.xmldb.RemoteCollection@b125bd : true
>>> 70037 [Thread-33] DEBUG
>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>> - making connection object with uri:
>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info
>>> 70042 [Thread-33] DEBUG
>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>> - validating for :org.exist.xmldb.RemoteCollection@2219b4 : true
>>>
>>> le problème est qu'au niveau des récoltes, je n'obtiens aucun
>>> document (nb de doc = 0).
>>> Pour info, j'ai configuré le proxy et j'ai bien xfire-all-1.2.5.jar .
>>>
>>> Quelqu'un a-t-il rencontré ce problème? comment le résoudre ?
>>>
>>> merci pour vos réponses,
>>>
>>> Lucie Dengreville
>>>

>>

>

--
Ce message a été vérifié par MailScanner
pour des virus ou des polluriels et rien de
suspect n'a été trouvé.

Haut
2 avril 2008 - 9:33am
(Répondre à #4) #5
mikaellebohec
Vincent Bonamy a écrit :

> Tout est normalement rentré dans l'ordre du côté de l'entrepôt OAI
> d'UNIT.
> Bonne soirée,
> Vincent.
>

Je confirme ; ça moissonne bien en lom maintenant.

À+

>
> Vincent Bonamy wrote:

>> Bonjour,
>> Merci à vous deux.
>> Je n'avais pas fait attention à cela et l'explication directe de
>> Mikael nous met plus que sur la voie, Merci !
>> Sur UNIT, la Future version du module ori-oai-workflow 1.1.0 est "en
>> test", dans le sens où on est en production sur cette version pas
>> encore annoncée [on n'avait pas constaté de problèmes jusque là].
>> Un des gros changements est la façon dont on stocke les fichiers XML
>> : on n'utilise plus eXist, on met les fiches XML directement dans le
>> MySql.
>> Donc la récupération des fiches se fait maintenant différemment et
>> effectivement il est plus que probable que le XML envoyé à
>> l'ori-oai-indexing (puis renvoyé lui-même à ori-oai-repository)
>> contienne un '' comme l'indique
>> Mikael.
>> Je vais changer au niveau de ori-oai-workflow, mais à terme il faudra
>> peut-être (à voir ...) que le repository soit capable d'accepter un
>> XML avec ou sans l'entête ''.
>> Merci à nouveau, je vous tiens au courant ici même pour l'entrepôt
>> d'UNIT.
>> Vincent.
>>
>>
>>
>> Mikael Le Bohec wrote:

>>> Lucie Dengreville a écrit :

>>>>
>>>> Bonjour,
>>>>

>>> Bonjour,
>>>

>>>> je teste le module harvester en moissonnant l'entrepot d'unit.
>>>> J'ai donc choisi, dans la définition d'une nouvelle moisson,
>>>> l'entrepot d'unit http://www.unit.eu/ori-oai-repository/OAIHandler,
>>>> avec comme identifiant=lom_unit, le préfixe=lom, collection
>>>> =lom/unit et je n'ai pas restreint la moisson.
>>>> Lorsque je lance la moisson, il semble que le module récupère des
>>>> données de l'entrepot unit (voici ci dessous les logs, sachant que
>>>> j'ai d'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n°
>>>> processed avant qui commencent vers les 600 environ

>>> Même constat chez moi alors que tout marchait bien il y a deux
>>> semaine ;-)
>>>
>>> Pas de soucis en moissonant avec le préfixe oai_dc ; seul le lom
>>> pose problème.
>>>
>>> En creusant un peu plus le problème j'ai fait une requête via mon
>>> navigateur pour compérer les résultats d'un ListRecords :
>>>
>>> http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&metada...
>>>
>>> me renvoi un xml valide d'après le navigateur.
>>>
>>> Alors que
>>> http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&metada...
>>> me renvoi une erreur.
>>> En allant à la ligne incriminée d'après mon navigateur je vois qu'à
>>> la suite de chaque balise "" il y a un bloc xml : ' >>> version="1.0" encoding="UTF-8"?>'.
>>> Cela me semble anormal (il y a eu de modifications réçentes sur le
>>> repository d'UNIT?) et que c'est donc ça qui pose problème pour ton
>>> moissonage je pense.
>>>
>>> À+

>>>>
>>>> ...
>>>> 69330 [Thread-33] DEBUG
>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9
>>>> processed
>>>> oriharvester: 69333
>>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
>>>> - resumptionToken: 1207068502478
>>>> 69333 [Thread-33] DEBUG
>>>> org.orioai.harvesting.domain.logic.OAIStore - resumptionToken:
>>>> 1207068502478
>>>> oriharvester: 70007
>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7
>>>> processed
>>>> 70007 [Thread-33] DEBUG
>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7
>>>> processed
>>>> oriharvester: 70007
>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17
>>>> processed
>>>> 70007 [Thread-33] DEBUG
>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17
>>>> processed
>>>> oriharvester: 70008
>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13
>>>> processed
>>>> 70008 [Thread-33] DEBUG
>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13
>>>> processed
>>>> oriharvester: 70008
>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11
>>>> processed
>>>> 70008 [Thread-33] DEBUG
>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11
>>>> processed
>>>> oriharvester: 70008
>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5
>>>> processed
>>>> 70008 [Thread-33] DEBUG
>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5
>>>> processed
>>>> oriharvester: 70010
>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3
>>>> processed
>>>> 70010 [Thread-33] DEBUG
>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3
>>>> processed
>>>> oriharvester: 70010
>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1
>>>> processed
>>>> 70010 [Thread-33] DEBUG
>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1
>>>> processed
>>>> oriharvester: 70012
>>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
>>>> - resumptionToken:
>>>> 70012 [Thread-33] DEBUG
>>>> org.orioai.harvesting.domain.logic.OAIStore - resumptionToken:
>>>> 70015 [Thread-33] DEBUG
>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>>> - making connection object with uri:
>>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports
>>>>
>>>> 70019 [Thread-33] DEBUG
>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>>> - validating for :org.exist.xmldb.RemoteCollection@b125bd : true
>>>> 70037 [Thread-33] DEBUG
>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>>> - making connection object with uri:
>>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info
>>>> 70042 [Thread-33] DEBUG
>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>>> - validating for :org.exist.xmldb.RemoteCollection@2219b4 : true
>>>>
>>>> le problème est qu'au niveau des récoltes, je n'obtiens aucun
>>>> document (nb de doc = 0).
>>>> Pour info, j'ai configuré le proxy et j'ai bien xfire-all-1.2.5.jar .
>>>>
>>>> Quelqu'un a-t-il rencontré ce problème? comment le résoudre ?
>>>>
>>>> merci pour vos réponses,
>>>>
>>>> Lucie Dengreville
>>>>

>>>

>>

>
>

--
Ce message a été vérifié par MailScanner
pour des virus ou des polluriels et rien de
suspect n'a été trouvé.

Haut
2 avril 2008 - 1:52pm
(Répondre à #5) #6
luciedengreville
Mikael Le Bohec a écrit :

> Vincent Bonamy a écrit :

>> Tout est normalement rentré dans l'ordre du côté de l'entrepôt OAI
>> d'UNIT.
>> Bonne soirée,
>> Vincent.
>>

> Je confirme ; ça moissonne bien en lom maintenant.
>
> À+

Effectivement le moissonnage des fiches lom de l'entrepot d'unit semble
fonctionner maintenant.
En relançant la récolte, ça ne marchait toujours pas, peut-être était-ce
dû au fait d'avoir défini la moisson avant que le problème soit résolu.
En supprimant la définition de la moisson, et en effaçant les
répertoires lom/unit dans harvest et dans harvest-report au niveau
d'exist avant de rédéfinir la moisson et de procéder à la récolte, j'ai
bien pu moissonner les fiches lom de l'entrepot d'unit.
Néanmois j'ai remarqué que le nombre de fiches moissonnées était le même
pour les deux types de fiches (lom et dc), à savoir 447 fiches. En
faisant une recherche avec le module ori-oai-search, on remarque que
chaque fiche apparait 2 fois, une fois avec le format Documentaire (DC)
et une avec le format Pédagogique (LOM).

Est-ce normal ?

>>
>> Vincent Bonamy wrote:

>>> Bonjour,
>>> Merci à vous deux.
>>> Je n'avais pas fait attention à cela et l'explication directe de
>>> Mikael nous met plus que sur la voie, Merci !
>>> Sur UNIT, la Future version du module ori-oai-workflow 1.1.0 est "en
>>> test", dans le sens où on est en production sur cette version pas
>>> encore annoncée [on n'avait pas constaté de problèmes jusque là].
>>> Un des gros changements est la façon dont on stocke les fichiers XML
>>> : on n'utilise plus eXist, on met les fiches XML directement dans le
>>> MySql.
>>> Donc la récupération des fiches se fait maintenant différemment et
>>> effectivement il est plus que probable que le XML envoyé à
>>> l'ori-oai-indexing (puis renvoyé lui-même à ori-oai-repository)
>>> contienne un '' comme
>>> l'indique Mikael.
>>> Je vais changer au niveau de ori-oai-workflow, mais à terme il
>>> faudra peut-être (à voir ...) que le repository soit capable
>>> d'accepter un XML avec ou sans l'entête ' >>> encoding="UTF-8"?>'.
>>> Merci à nouveau, je vous tiens au courant ici même pour l'entrepôt
>>> d'UNIT.
>>> Vincent.
>>>
>>>
>>>
>>> Mikael Le Bohec wrote:

>>>> Lucie Dengreville a écrit :

>>>>>
>>>>> Bonjour,
>>>>>

>>>> Bonjour,
>>>>

>>>>> je teste le module harvester en moissonnant l'entrepot d'unit.
>>>>> J'ai donc choisi, dans la définition d'une nouvelle moisson,
>>>>> l'entrepot d'unit
>>>>> http://www.unit.eu/ori-oai-repository/OAIHandler, avec comme
>>>>> identifiant=lom_unit, le préfixe=lom, collection =lom/unit et je
>>>>> n'ai pas restreint la moisson.
>>>>> Lorsque je lance la moisson, il semble que le module récupère des
>>>>> données de l'entrepot unit (voici ci dessous les logs, sachant que
>>>>> j'ai d'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n°
>>>>> processed avant qui commencent vers les 600 environ

>>>> Même constat chez moi alors que tout marchait bien il y a deux
>>>> semaine ;-)
>>>>
>>>> Pas de soucis en moissonant avec le préfixe oai_dc ; seul le lom
>>>> pose problème.
>>>>
>>>> En creusant un peu plus le problème j'ai fait une requête via mon
>>>> navigateur pour compérer les résultats d'un ListRecords :
>>>>
>>>> http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&metada...
>>>>
>>>> me renvoi un xml valide d'après le navigateur.
>>>>
>>>> Alors que
>>>> http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&metada...
>>>> me renvoi une erreur.
>>>> En allant à la ligne incriminée d'après mon navigateur je vois qu'à
>>>> la suite de chaque balise "" il y a un bloc xml : ' >>>> version="1.0" encoding="UTF-8"?>'.
>>>> Cela me semble anormal (il y a eu de modifications réçentes sur le
>>>> repository d'UNIT?) et que c'est donc ça qui pose problème pour ton
>>>> moissonage je pense.
>>>>
>>>> À+

>>>>>
>>>>> ...
>>>>> 69330 [Thread-33] DEBUG
>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9
>>>>> processed
>>>>> oriharvester: 69333
>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
>>>>> - resumptionToken: 1207068502478
>>>>> 69333 [Thread-33] DEBUG
>>>>> org.orioai.harvesting.domain.logic.OAIStore - resumptionToken:
>>>>> 1207068502478
>>>>> oriharvester: 70007
>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7
>>>>> processed
>>>>> 70007 [Thread-33] DEBUG
>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7
>>>>> processed
>>>>> oriharvester: 70007
>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17
>>>>> processed
>>>>> 70007 [Thread-33] DEBUG
>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17
>>>>> processed
>>>>> oriharvester: 70008
>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13
>>>>> processed
>>>>> 70008 [Thread-33] DEBUG
>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13
>>>>> processed
>>>>> oriharvester: 70008
>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11
>>>>> processed
>>>>> 70008 [Thread-33] DEBUG
>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11
>>>>> processed
>>>>> oriharvester: 70008
>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5
>>>>> processed
>>>>> 70008 [Thread-33] DEBUG
>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5
>>>>> processed
>>>>> oriharvester: 70010
>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3
>>>>> processed
>>>>> 70010 [Thread-33] DEBUG
>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3
>>>>> processed
>>>>> oriharvester: 70010
>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1
>>>>> processed
>>>>> 70010 [Thread-33] DEBUG
>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1
>>>>> processed
>>>>> oriharvester: 70012
>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
>>>>> - resumptionToken:
>>>>> 70012 [Thread-33] DEBUG
>>>>> org.orioai.harvesting.domain.logic.OAIStore - resumptionToken:
>>>>> 70015 [Thread-33] DEBUG
>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>>>> - making connection object with uri:
>>>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports
>>>>>
>>>>> 70019 [Thread-33] DEBUG
>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>>>> - validating for :org.exist.xmldb.RemoteCollection@b125bd : true
>>>>> 70037 [Thread-33] DEBUG
>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>>>> - making connection object with uri:
>>>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info
>>>>> 70042 [Thread-33] DEBUG
>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>>>> - validating for :org.exist.xmldb.RemoteCollection@2219b4 : true
>>>>>
>>>>> le problème est qu'au niveau des récoltes, je n'obtiens aucun
>>>>> document (nb de doc = 0).
>>>>> Pour info, j'ai configuré le proxy et j'ai bien xfire-all-1.2.5.jar .
>>>>>
>>>>> Quelqu'un a-t-il rencontré ce problème? comment le résoudre ?
>>>>>
>>>>> merci pour vos réponses,
>>>>>
>>>>> Lucie Dengreville
>>>>>

>>>>

>>>

>>
>>

>
>

--
----------------------------------
Lucie Dengreville
Centre de Ressources Informatiques
Université Rennes 2 Haute Bretagne
02.99.14.13.66
-----------------------------------

--
Ce message a été vérifié par MailScanner
pour des virus ou des polluriels et rien de
suspect n'a été trouvé.

Haut
2 avril 2008 - 2:25pm
(Répondre à #6) #7
vincentbonamy
Lucie Dengreville wrote:

> Mikael Le Bohec a écrit :

>> Vincent Bonamy a écrit :

>>> Tout est normalement rentré dans l'ordre du côté de l'entrepôt OAI
>>> d'UNIT.
>>> Bonne soirée,
>>> Vincent.
>>>

>> Je confirme ; ça moissonne bien en lom maintenant.
>>
>> À+

> Effectivement le moissonnage des fiches lom de l'entrepot d'unit
> semble fonctionner maintenant.
> En relançant la récolte, ça ne marchait toujours pas, peut-être
> était-ce dû au fait d'avoir défini la moisson avant que le problème
> soit résolu.
> En supprimant la définition de la moisson, et en effaçant les
> répertoires lom/unit dans harvest et dans harvest-report au niveau
> d'exist avant de rédéfinir la moisson et de procéder à la récolte,
> j'ai bien pu moissonner les fiches lom de l'entrepot d'unit.
> Néanmois j'ai remarqué que le nombre de fiches moissonnées était le
> même pour les deux types de fiches (lom et dc), à savoir 447 fiches.
> En faisant une recherche avec le module ori-oai-search, on remarque
> que chaque fiche apparait 2 fois, une fois avec le format Documentaire
> (DC) et une avec le format Pédagogique (LOM).
>
> Est-ce normal ?

C'est "normal" en l'état actuel des modules ORI-OAI.
En OAI-PMH, le format Dublin Core est requis, cela veut dire que tout ce
qui est exposé en LOM (par exemple) doit aussi être disponible sous le
format OAI_DC (Schéma Dublin Core OAI).
D'où le fait que tu retrouves le même nombre de ressources en LOM et
OAI_DC : sur UNIT, on ne fait "en entrée" que du LOM.
On imagine cependant facilement les limites de l'ensemble dans cette
façon de fonctionner (cf ton expérimentation par exemple).
Aussi il faudra que ORI-OAI (au travers du moteur d'indexation, du
moteur de recherche ... ) soit (et assez rapidement) capable de
fusionner les informations des différents formats disponibles. L'idée
étant que lorsqu'on moissonne les métadonnées d'une même entité sous les
différents formats disponibles , le moteur de recherche voit cela comme
une seule entité.
Cela permettrait de ne pas voir les fiches DC et LOM comme 2 réponses
distinctes [comme tu le décris], cela permettrait finalement de faire
jouer aux différentes fiches XML d'une même entité (de format différent
donc) leur rôle, c'est à dire qualifier l'entité au mieux selon un cas
d'usage particulier (cas d'usage qui correspond au schéma donné) ...

Tout commentaire complémentaire sur cela est le bienvenue.

Vincent.

>
>

>>>
>>> Vincent Bonamy wrote:

>>>> Bonjour,
>>>> Merci à vous deux.
>>>> Je n'avais pas fait attention à cela et l'explication directe de
>>>> Mikael nous met plus que sur la voie, Merci !
>>>> Sur UNIT, la Future version du module ori-oai-workflow 1.1.0 est
>>>> "en test", dans le sens où on est en production sur cette version
>>>> pas encore annoncée [on n'avait pas constaté de problèmes jusque là].
>>>> Un des gros changements est la façon dont on stocke les fichiers
>>>> XML : on n'utilise plus eXist, on met les fiches XML directement
>>>> dans le MySql.
>>>> Donc la récupération des fiches se fait maintenant différemment et
>>>> effectivement il est plus que probable que le XML envoyé à
>>>> l'ori-oai-indexing (puis renvoyé lui-même à ori-oai-repository)
>>>> contienne un '' comme
>>>> l'indique Mikael.
>>>> Je vais changer au niveau de ori-oai-workflow, mais à terme il
>>>> faudra peut-être (à voir ...) que le repository soit capable
>>>> d'accepter un XML avec ou sans l'entête ' >>>> encoding="UTF-8"?>'.
>>>> Merci à nouveau, je vous tiens au courant ici même pour l'entrepôt
>>>> d'UNIT.
>>>> Vincent.
>>>>
>>>>
>>>>
>>>> Mikael Le Bohec wrote:

>>>>> Lucie Dengreville a écrit :

>>>>>>
>>>>>> Bonjour,
>>>>>>

>>>>> Bonjour,
>>>>>

>>>>>> je teste le module harvester en moissonnant l'entrepot d'unit.
>>>>>> J'ai donc choisi, dans la définition d'une nouvelle moisson,
>>>>>> l'entrepot d'unit
>>>>>> http://www.unit.eu/ori-oai-repository/OAIHandler, avec comme
>>>>>> identifiant=lom_unit, le préfixe=lom, collection =lom/unit et je
>>>>>> n'ai pas restreint la moisson.
>>>>>> Lorsque je lance la moisson, il semble que le module récupère des
>>>>>> données de l'entrepot unit (voici ci dessous les logs, sachant
>>>>>> que j'ai d'autres lignes avec oai:www.unit.eu:unit-ori-wf-1-n°
>>>>>> processed avant qui commencent vers les 600 environ

>>>>> Même constat chez moi alors que tout marchait bien il y a deux
>>>>> semaine ;-)
>>>>>
>>>>> Pas de soucis en moissonant avec le préfixe oai_dc ; seul le lom
>>>>> pose problème.
>>>>>
>>>>> En creusant un peu plus le problème j'ai fait une requête via mon
>>>>> navigateur pour compérer les résultats d'un ListRecords :
>>>>>
>>>>> http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&metada...
>>>>>
>>>>> me renvoi un xml valide d'après le navigateur.
>>>>>
>>>>> Alors que
>>>>> http://www.unit.eu/ori-oai-repository/OAIHandler?verb=ListRecords&metada...
>>>>> me renvoi une erreur.
>>>>> En allant à la ligne incriminée d'après mon navigateur je vois
>>>>> qu'à la suite de chaque balise "" il y a un bloc xml :
>>>>> ''.
>>>>> Cela me semble anormal (il y a eu de modifications réçentes sur le
>>>>> repository d'UNIT?) et que c'est donc ça qui pose problème pour
>>>>> ton moissonage je pense.
>>>>>
>>>>> À+

>>>>>>
>>>>>> ...
>>>>>> 69330 [Thread-33] DEBUG
>>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-9
>>>>>> processed
>>>>>> oriharvester: 69333
>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
>>>>>> - resumptionToken: 1207068502478
>>>>>> 69333 [Thread-33] DEBUG
>>>>>> org.orioai.harvesting.domain.logic.OAIStore - resumptionToken:
>>>>>> 1207068502478
>>>>>> oriharvester: 70007
>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7
>>>>>> processed
>>>>>> 70007 [Thread-33] DEBUG
>>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-7
>>>>>> processed
>>>>>> oriharvester: 70007
>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17
>>>>>> processed
>>>>>> 70007 [Thread-33] DEBUG
>>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-17
>>>>>> processed
>>>>>> oriharvester: 70008
>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13
>>>>>> processed
>>>>>> 70008 [Thread-33] DEBUG
>>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-13
>>>>>> processed
>>>>>> oriharvester: 70008
>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11
>>>>>> processed
>>>>>> 70008 [Thread-33] DEBUG
>>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-11
>>>>>> processed
>>>>>> oriharvester: 70008
>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5
>>>>>> processed
>>>>>> 70008 [Thread-33] DEBUG
>>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-5
>>>>>> processed
>>>>>> oriharvester: 70010
>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3
>>>>>> processed
>>>>>> 70010 [Thread-33] DEBUG
>>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-3
>>>>>> processed
>>>>>> oriharvester: 70010
>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore$MakeListListIdentifiersAction.doRecordAction(NonPersistentStore.java:189)
>>>>>> - MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1
>>>>>> processed
>>>>>> 70010 [Thread-33] DEBUG
>>>>>> org.orioai.harvesting.domain.logic.OAIStore -
>>>>>> MakeListListIdentifiersAction :oai:www.unit.eu:unit-ori-wf-1-1
>>>>>> processed
>>>>>> oriharvester: 70012
>>>>>> org.orioai.harvesting.domain.logic.NonPersistentStore.processListIdentifiers(NonPersistentStore.java:122)
>>>>>> - resumptionToken:
>>>>>> 70012 [Thread-33] DEBUG
>>>>>> org.orioai.harvesting.domain.logic.OAIStore - resumptionToken:
>>>>>> 70015 [Thread-33] DEBUG
>>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>>>>> - making connection object with uri:
>>>>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info/reports
>>>>>>
>>>>>> 70019 [Thread-33] DEBUG
>>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>>>>> - validating for :org.exist.xmldb.RemoteCollection@b125bd : true
>>>>>> 70037 [Thread-33] DEBUG
>>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>>>>> - making connection object with uri:
>>>>>> xmldb:exist://dev-2.uhb.fr:8187/exist/xmlrpc/db/ori/harvest-info
>>>>>> 70042 [Thread-33] DEBUG
>>>>>> uk.co.lakesidetech.springxmldb.connectionpool.PoolableCollectionFactory
>>>>>> - validating for :org.exist.xmldb.RemoteCollection@2219b4 : true
>>>>>>
>>>>>> le problème est qu'au niveau des récoltes, je n'obtiens aucun
>>>>>> document (nb de doc = 0).
>>>>>> Pour info, j'ai configuré le proxy et j'ai bien
>>>>>> xfire-all-1.2.5.jar .
>>>>>>
>>>>>> Quelqu'un a-t-il rencontré ce problème? comment le résoudre ?
>>>>>>
>>>>>> merci pour vos réponses,
>>>>>>
>>>>>> Lucie Dengreville
>>>>>>

>>>>>

>>>>

>>>
>>>

>>
>>

>
>

--
Ce message a été vérifié par MailScanner
pour des virus ou des polluriels et rien de
suspect n'a été trouvé.

Haut

Options d'affichage des commentaires

Sélectionnez la méthode d'affichage des commentaires que vous préférez, puis cliquez sur « Enregistrer les paramètres » pour activer vos changements.
Sujet clos
‹ Sujet précédent : Problème avec le module vocabulaire et proxy Sujet suivant : question à propos de l'affichage du rapport de l'harvester ›