Recalbox Forum

    • Register
    • Login
    • Search
    • Recent
    • Tags
    • recalbox.com
    • Gitlab repository
    • Documentation
    • Discord

    [SOFT] Universal XML Scraper V2

    Community projects
    [soft] universal xml scraper
    112
    670
    633025
    Loading More Posts
    • Oldest to Newest
    • Newest to Oldest
    • Most Votes
    Reply
    • Reply as topic
    Log in to reply
    This topic has been deleted. Only users with topic management privileges can see it.
    • arubinu
      arubinu @screech last edited by

      @screech Bonjour,

      Je viens d'y repenser, donc je te pose la question.

      En faisant mon scrape, il m'est arrivé que ma connexion saute, et le sauf continuait à défiler les roms (le temps d'attente n'est pas mis à jour pendant ce temps), et du coup une partie n'est pas prise en compte.

      Serait-il possible d'ajouter dans une future version, une détection du statut de la connexion afin de mettre en pause le temps que la connexion revienne ?

      1 Reply Last reply Reply Quote 0
      • screech
        screech last edited by

        @arubinu Ce sera surement possible avec la V2 de l'API de screenscraper qui me permettra de tester les codes erreurs de retour 😉

        Clean your Romset with Universal ROM Cleaner
        Scrape your Romset with Universal XML Scraper

        1 Reply Last reply Reply Quote 1
        • johnDoe_1
          johnDoe_1 Banned last edited by

          Salut @screech, toujours pas de fix pour ce foutu bug lors du scrape ?

          Quand je scrape juste les images, il me remplace mes 4img en une photo de jaquette, j'ai essayé en 3img pareil et le reste ça doit être la même chose.

          Du coup j'ai tout supprimé, je scrape en nouveau fichier xml, ça scrape en 4img mais j'ai genre 1/4 voir 2/4 des images est remplacé par une image Windows (La visionneuse de photos Windows ne peut ouvrir cette image car le fichier semble endommagé ou corrompu, ou il est trop grand) J'ai beau relancer le scrape, c'est toujours les mêmes images (sauf quelques-unes) qui ont ce fameux problème

          Bonne soirée

          1 Reply Last reply Reply Quote 0
          • johnDoe_1
            johnDoe_1 Banned last edited by johnDoe_1

            Deuxième commentaire (je ne peux éditer celui du dessus, bizarre)

            Je confirme, il me télécharge que des images endommagées


            EDIT : Les logs --> https://www.dropbox.com/sh/i18zcqmi5rn5k8m/AACmqKjTg-6485g8ROsepwVca?dl=0

            1 Reply Last reply Reply Quote 0
            • screech
              screech last edited by

              Bizarrement, c'est comme s'il ne trouvait rien, aucune de tes Roms :S

              [22:19:36] - /!\ Error File Line 1 : Erreur : Rom/Iso/Dossier non trouvée !
              [22:19:36] - /!\ Bytes read: 41

              Du coup, il fait des trucs bizarres avec les images...

              Pour info, tu es le seul à me remonter ce genre de truc "bizarre" ^^ du coup, je "suppose" qu'il y a un pb chez toi... mais alors lequel :S

              Si tu effaces complètement ton rep d'UXS, ton fichier gamelist.xml, le répertoire downloaded_images et que tu relance un scrape ? ça marche ?
              A mon avis y a un truc qui bloque, mais je vois pas quoi.. Peux tu essayer aussi de scraper un autre systeme plus 'simple' genre megadrive ou Nes ?

              Clean your Romset with Universal ROM Cleaner
              Scrape your Romset with Universal XML Scraper

              johnDoe_1 1 Reply Last reply Reply Quote 0
              • johnDoe_1
                johnDoe_1 Banned @screech last edited by

                @screech Salut, oui j'ai bien tout supprimé :X J'ai recommencé plusieurs fois, toujours la même chose. D'ailleurs j'ai même réinstallé Windows de zéro ! Je vais tenter autre chose mais j'avais déjà ce problème il y a quelques mois si tu t'en souviens

                1 Reply Last reply Reply Quote 0
                • johnDoe_1
                  johnDoe_1 Banned last edited by johnDoe_1

                  @screech Bon bah ça fonctionne après suppression et réinstallation du soft 😕

                  1 Reply Last reply Reply Quote 0
                  • ten007
                    ten007 last edited by

                    Bonjour a tous. Etant nouveau dans l'emulation et donc novice, je n'ai pu trouvé la reponse à mon probleme sur le forum. Désolé.

                    Donc mon souci est le suivant, je ne peux installer que la version 2.1.0.4 sur mon ordi car les versions ultérieures me créé un message d'erreur à l'instalation a savoir "erreor line quelque chose puis subscript used on non-accessible variable" et donc impossible d'executer le logiciel. Cependant il fonctionne en version 2.1.0.4. Je scrappe mes roms sans souci. Et au moment de revenir sur recalbox, j'ai quelque roms dont les descriptions sont en francais mais je n'ai aucunes images de meme que le repertoire "downloaded images" de chaque repertoire de machine qui est vide egalement.
                    Pouvez vous m'aider?
                    merci d'avance

                    PS : j'ai un rapsberry pi 2 avec recalbox 4.0.2

                    1 Reply Last reply Reply Quote 0
                    • Skylord
                      Skylord last edited by Skylord

                      Bonjour à tous,

                      J'ai un problème : j'ai utilisé Universal XML Scraper en config automatique sans changer les répertoires. Du coup il m'a reconnu ma clé USB, a reconnu les jeux, a créée les images et les fichiers gamelist.xml avec les bons chemins.

                      Le problème c'est que quand je vais charger ma clé usb dans ma recalbox y'a rien qui se produit. Pas de texte pour les jeux, pas d'images, pas d'écran scindé en deux quand je choisis un jeu... Y'a t-il quelque chose qui me manque ? J'ai pas mis ma recalbox en réseau mais normalement il n'y a pas besoin d 'après ce que je lis dans les forums...

                      J'ai besoin d'un peu d'aide 😕

                      Merci d'avance

                      PS: Pour exemple dans le fichier gamelist :

                      <gameList>
                      <game id="26" source="ScreenScraper">
                      <path>./Ecco The Dolphin.gen</path>
                      <name>ECCO THE DOLPHIN [USA] (TRAD)</name>
                      <desc>ECCO THE DOLPHIN SUR MEGADRIVE EST UN JEU D'ACTION QUI A L'ORIGINALITÉ DE METTRE LE JOUEUR AUX COMMANDES D'UN DAUPHIN. L'HISTOIRE DÉBUTE LORSQUE ECCO ASSISTE IMPUISSANT À LA DISPARITION DE TOUT L'ÉCOSYSTÈME, EMPORTÉ PAR UNE MYSTÉRIEUSE TEMPÊTE. 25 NIVEAUX DURANT, EXPLOREZ LES ABÎMES ET RÉSOLVEZ DE NOMBREUSES ÉNIGMES AFIN DE RAMENER LE CALME AU SEIN DE LA CRIQUE.</desc>
                      <image>./downloaded_images/Ecco The Dolphin-image.png</image>
                      <rating>0.75</rating>
                      <releasedate>19921201T000000</releasedate>
                      <developer>NOVOTRADE INTERNATIONAL</developer>
                      <publisher>SEGA</publisher>
                      <genre>AVENTURE</genre>
                      <players>1</players>
                      <region/>
                      </game>

                      J'ai un raspberry 3 b, recalbox 4.0.1

                      EDIT : je sais pas pourquoi mais maintenany ça fonctionne 😛

                      1 Reply Last reply Reply Quote 0
                      • Arthesis
                        Arthesis last edited by

                        Bonjour,

                        Je n'arrive plus du tout à utiliser UXML Scraper V2.
                        Il crash, et cafouille même à la fermeture de Win10 :

                        1_1499589627068_P1070980.JPG 0_1499589627068_ke 1.jpg

                        RasPI 3v2 - Recalbox 4.1.0

                        GRALLEC 1 Reply Last reply Reply Quote 0
                        • GRALLEC
                          GRALLEC @Arthesis last edited by

                          @Arthesis utilise la version 32 et pas la 64 bits.Avec la 64 j'ai eu ce problème sur W10.

                          -RPI3

                          • RECALBOX 4.1 stable (juillet 2018)
                            -Manettes 8Bitdo NES30 PRO et SFC30 xbox 360 sans fil/ stick arcade NES 30 sanwa /NES/SNES/N64 avec retro Adaptateurs
                            -SD Scandisk 128
                            -SuperPicase retroflag
                            -Windows 10
                          Arthesis 1 Reply Last reply Reply Quote 0
                          • Arthesis
                            Arthesis @GRALLEC last edited by Arthesis

                            @GRALLEC Rien à faire, j'ai essayé, ça plante à mort, trop buggé.
                            Je vais laisser tomber, ça fait plusieurs jours que je suis dessus, il fait n'importe quoi ce programme, même quand on reboot au propre tout (PC, RasPi), il m’agace avec son "pas de réponse" planté. :[

                            NB : j'ai essayé sur 2 autres PC que j'ai, idem. J'ai même fait mode administrateur, compatibilité 32 bits etc... Rien, même pour l'arrêter c'est une plaie.

                            RasPI 3v2 - Recalbox 4.1.0

                            1 Reply Last reply Reply Quote 0
                            • acris
                              acris last edited by acris

                              @Arthesis ça ressemble à un problème hardware notamment avec ta mémoire vive.
                              par contre si tu as la meme chose sur un meme pc je pense à un mauvais téléchargement de logiciel.

                              1 Reply Last reply Reply Quote 0
                              • screech
                                screech last edited by screech

                                Désolé, je suis en formation sans PC et je réponds depuis mon téléphone.

                                @Arthesis Aurais tu des logs ?
                                Ta copie d'écran qui dit que le chemin des roms n'est pas accessible, il a un sens...
                                Accèdes tu as tes roms depuis ton voisinage réseau dans explorer ?
                                Le pas de réponse ressemble plus pour moi à un problème de droits/antivirus/firewall...

                                sinon, supprime ton répertoire d'UXS, et re-télécharge le...

                                Et sinon, 80000 téléchargements et 3 PCs qui ne fonctionnent pas.. pas de bol, c'est les tiens 😉

                                "... puis j'ai été dans le voisinage réseau, montrer le chemin jusqu'au rep roms du Raspi.
                                /recalbox/share/roms
                                Si je ne me trompe pas.
                                Au passage Windows m'a demandé de me logger... "

                                ça pour moi c'est déjà un problème...
                                Depuis quand Windows te demande de te logger pour accéder au PI ?

                                Clean your Romset with Universal ROM Cleaner
                                Scrape your Romset with Universal XML Scraper

                                1 Reply Last reply Reply Quote 1
                                • Arthesis
                                  Arthesis last edited by Arthesis

                                  Merci pour vos réponses.

                                  Oui je peux accéder aux roms par le voisinage réseau par l'explorer.

                                  Dans les logs, il faut des grosses "pauses" :
                                  [10:04:33] - > End Of Elements
                                  [10:18:18] - > Read Message $aRomList :
                                  [...]
                                  [10:18:28] - > End Of Elements
                                  [10:24:50] - > Read Message $aRomList :

                                  NB : La demande de logging de Win a été faite une seule fois pour accéder au voisinage réseau, pas particulièrement au RasPI il me semble.

                                  Mon copain a le même problème (sur un autre PC et un autre réseau donc, lui a une RasPI3). Il m'a dit que le logiciel semblait planter, puis reprendre, puis planter (pas de réponse) puis reprendre, et parfois planter à fond. Du coup j'ai un peu mieux compris les logs.
                                  Il a réussi à scrapper mais il a laissé tourné très longtemps le PC (plusieurs heures, 6-7..), pour environ 100 roms... Moi je n'ai plus rien tenté depuis. J'ai désinstallé, puis installé en 32bits, puis re désinstallé vu que ça faisait pareil, j'ai réinstallé la 64 bits, idem = donc impasse sauf pour scrappe 1-2 roms.
                                  Il a laissé tombé, ça fait trop long, surtout que parfois ça ne va pas jusqu'au bout et sur le RasPI les images ne s'affichent pas.

                                  A noter que c'est le seul programme qui plante chez moi comme ça. Il reste sur "pas de réponse" sans fin. Et lorsque j’éteins le PC il m'indique l'autre message d'erreur (screen précédent Autolt v3).

                                  OK peut être problème de mémoire, mais pourquoi que lui, et surtout que faire? C'est de la Ram que vous parler ?
                                  OK peut être problème de droits etc... mais je ne vois pas quoi faire, j'ai essayé de le lancer directement en mode Admi, ça fait pareil. Sans Avast, idem.
                                  Peut être un truc à modifier sur ma box ? Ports ? Ou un truc que windows fait ?

                                  RasPI 3v2 - Recalbox 4.1.0

                                  1 Reply Last reply Reply Quote 0
                                  • Arthesis
                                    Arthesis last edited by

                                    Il semble que ça vient d'un problème au niveau réseau/wifi même si je n'y connais pas grand chose.
                                    En connexion RJ-45 ça ne plante pas.

                                    RasPI 3v2 - Recalbox 4.1.0

                                    1 Reply Last reply Reply Quote 0
                                    • noda
                                      noda last edited by

                                      Tout d'abord merci pour le soft!

                                      @screech Petite question, est-ce normal que le tag XML <région> ne soit pas rempli? (il reste toujours à <region/>) C'est dommage car j'aimerais omettre ces infos du nom de fichier, mais pouvoir les afficher dans les infos du jeu à coté (elle sont toujours coupés de toutes facons sur les jeux mame...).

                                      Sinon comment rajouter les hash des rom "missing" à la DB? (j'en ai un petit nombre!)

                                      1 Reply Last reply Reply Quote 0
                                      • Archangel54
                                        Archangel54 last edited by

                                        Bonjour à tous et merci à @screech pour ce soft formidable.

                                        Je rencontre un problème avec UXML Scraper que je n'avais pas avec les versions précédentes, certains jeu qui étaient reconnus ne le sont plus maintenant. Leur point commun est qu'ils contiennent tous un caractère spécial dans leur nom.

                                        Par exemple "B.O.B.", "Mr. Nutz", "Ms. Pac-Man", "U.N. Squadron" (pour la SNES) mais aussi "Ace Combat 3 : Electrosphere" ou " Capcom vs. SNK : Millennium Fight 2000 Pro" (pour la PS1).

                                        J'ai bien essayé de supprimer les "." ou de remplacer les ":" par "-" mais cela n'a eut aucun effet. Et comme sur screenscraper, ces caractères sont présents dans le "Nom du jeux (interne ScreenScraper)", je pense que le problème vient de là.

                                        Merci.

                                        1 Reply Last reply Reply Quote 0
                                        • Val59
                                          Val59 last edited by

                                          Bonjour tout le monde. Juste une question concernant XML SCRAPER.. peux t'on scraper juste une roms ou deux dans un full set sans devoir tout refaire ? J'utilise pour l'instant recalbox 4.0.2 et la version 64 d'XML. Merci

                                          Archangel54 1 Reply Last reply Reply Quote 0
                                          • gaian
                                            gaian last edited by

                                            Salut à tous, ca y est j'ai réussi à mettre tout les roms qu'il me fallait. Grave à vos conseils je vous remercie très bonne communauté. Il me reste juste un petit problème, j'ai scrapper tout mon système, avec Universal screescraper, pas mal il en a trouvé beaucoup. Mais il me reste quelques jeux à scraper manuellement )normal vu les noms de certains roms. Pour renommer pas de soucis sur recalbox j'ai juste à éditer. Par contre comment je pourrais faire pour scrapper, car screenqcraper est intégré seulement dans la 4.1,et moi je suis en 4.02. Et le scrap anglais j'aime pas trop. Sur le site ? Et aussi j'arrive à trouver les images de mes scraps dans le dossier roms, par contre ou se trouve le fichier des informations des jeux ? (Le desxriptif dessous l'image des jeux )

                                            1 Reply Last reply Reply Quote 0
                                            • First post
                                              Last post

                                            Want to support us ?

                                            63
                                            Online

                                            99.6k
                                            Users

                                            28.1k
                                            Topics

                                            187.1k
                                            Posts

                                            Copyright © 2021 recalbox.com