Recalbox Forum

    • Register
    • Login
    • Search
    • Recent
    • Tags
    • recalbox.com
    • Gitlab repository
    • Documentation
    • Discord

    [SOFT] Universal XML Scraper - Scrappez vos roms depuis Windows (Scrape your roms from Windows)

    Community projects
    [soft] universal xml scraper scrappez
    73
    656
    480856
    Loading More Posts
    • Oldest to Newest
    • Newest to Oldest
    • Most Votes
    Reply
    • Reply as topic
    Log in to reply
    This topic has been deleted. Only users with topic management privileges can see it.
    • screech
      screech last edited by

      Effectivement c'est une option que j'avais prévu. Mais pour le moment je l'avais forcé en MAJ parce que la recalbox affiche de toutes façons en MAJ. Je rajouterai l'option dans la prochaine version 😉

      Clean your Romset with Universal ROM Cleaner
      Scrape your Romset with Universal XML Scraper

      1 Reply Last reply Reply Quote 0
      • screech
        screech last edited by

        Voila 😉 La nouvelle version gère l'option Majuscule 😉 GitHub de Universal XML Scraper

        Clean your Romset with Universal ROM Cleaner
        Scrape your Romset with Universal XML Scraper

        1 Reply Last reply Reply Quote 0
        • figolu
          figolu last edited by

          Wow, ça c' est de la réponse rapide, et du travail bien fait ... Merci beaucoup pour ton travail et ta réactivité, je m' empresse de l' essayer de ce pas !!!

          1 Reply Last reply Reply Quote 0
          • angelfred
            angelfred last edited by

            Bonjour, petite question de nouveau 😉 j'ai vu au début du sujet qu'il fallait que les fichiers des roms soient en .zip Est-ce toujours le cas avec la dernière version du logiciel ou pas ? sinon avait vous une méthode rapide pour zipper en série toutes les roms sans le faire une à une ? d'avance merci de vos réponses Angelfred

            1 Reply Last reply Reply Quote 0
            • screech
              screech last edited by screech

              Oui, effectivement, le format zip est obligatoire pour fonctionner avec le site Screenscraper (qui contient les base de données en fr).
              Concernant le fait de "Re-zipper" tes roms, je ne t'y encourage pas, c'est long de tous rezipper, et sans garantie (si le réglage de ton zip n'est pas identique au zip d'origine, il y aura des différences de Hash et tes jeux ne seront pas trouvés.)
              Le plus simple, si tu as une connexion internet avec un débit suffisant, est de télécharger un romset tous fait (tu en trouves facilement sur internet, genre les set "no-intro" qui sont une référence... Google est ton ami 😉 )

              Tu pourras ensuite nettoyer facilement ton romset avec Universal ROM Cleaner 
              (pour retirer les roms qui ne te plaise pas, genre : les roms en japonais ou en Allemand, les roms de sample, les betas, les prototypes,...)
              Il ne te restera plus qu'à lancer le scraper sur ton set nettoyé pour avoir ton fichier XML 😉

              Pour information, hormis pour la N64, tu peux avoir toutes tes roms en zip. ça fonctionne très bien (même sur un PI1 pour ce que j'avais testé;). En plus, tu gagnes de la place 😉

              Clean your Romset with Universal ROM Cleaner
              Scrape your Romset with Universal XML Scraper

              1 Reply Last reply Reply Quote 0
              • angelfred
                angelfred last edited by

                Ok merci de ta réponse rapide et complète. pour les romset c'est pas un souci j'en ai déjà ; en revanche mes fichiers zip sont constitués de toutes les versions disponibles d'un même jeu (1 zip pour un jeu avec x versions dedans). Universal ROM Cleaner gère les zip comme ceux là ou faut il que je trouve des fichiers 1 zip pour 1 jeu pour 1 version Edit : j'ai trouvé ma réponse en téléchargeant un romset no-intro 😉 Je teste tt ça et reviendrai faire part de mon résultat ; en tout cas déjà un énorme merci pour tes ptis softs qui ont l'air bien sympa

                1 Reply Last reply Reply Quote 0
                • angelfred
                  angelfred last edited by

                  salut je reviens avec ma part d'échecs... j'ai réussi à scrapper mes jeux, récupérer les images et créer une gamelist qui reprend le tout ; le seul souci est que cette gamelist n'est pas reprise par recalbox pour la plupart de mes sets. Pour mon set game gear la gamelist liste est prise en compte, le descriptif des jeux y est mais je n'est pas la jaquette du jeux alors que les images sont bien récupérées. Je dois sûrement faire quelque chose de mal mais là je vois plus quoi... Je passe par Windows pour effectuer la tâche est-ce la bonne procédure ? ou faut il faire quelque chose depuis la recalbox ? D'avance merci de votre aide

                  1 Reply Last reply Reply Quote 0
                  • screech
                    screech last edited by screech

                    Non non, le logiciel est bien uniquement sous windows 😉 donc de ce coté la tout est correct.
                    Voici des pistes : as tu bien fait un "Kill Emulationstation" dans le menu "SSH" AVANT de faire le scrape (sinon, emulationstation ne prend pas en compte ton nouveau fichier xml et remet l'ancien).
                    Une fois le scrape terminé, tu peux faire un "Reboot", toujours depuis le menu SSH.

                    (Attention, si tu as changé les identifiants de connexion en SSH, on ne sait jamais, tu peux vérifier directement dans le fichier config)

                    Pour les images, il faut vérifier la concordance des chemins. Tu en as 2 dans le menu "configuration": Le chemin ou, depuis windows, les images vont être téléchargées. Normalement c'est quelque chose comme :

                    \RECALBOX\User data\roms\nes\downloaded-images\

                    Le chemin ou la recalbox (et emulationstation) vont aller chercher les images en local. Normalement c'est quelque chose comme ça :

                    ./downloaded-images/

                    Vérifie bien aussi que tes chemins se terminent par \ ou / en fonction 😉
                    Sinon, quand tu regardes dans le répertoire de tes Roms, tu as bien un répertoire avec à l’intérieur tes images ?
                    Peux tu me mettre la fin de ton fichier config ?
                    (celui qui s'appel [LAST_USE]) Histoire que je vérifie tes chemins 😉

                    Clean your Romset with Universal ROM Cleaner
                    Scrape your Romset with Universal XML Scraper

                    1 Reply Last reply Reply Quote 0
                    • angelfred
                      angelfred last edited by

                      merci de ton retour tu trouveras ci-dessous le log j'essaie de refaire un test en suivant à la lettre tes indications en parallèle Nouvel essai : tjrs pareil pour ma gamelist Game Gear ci dessous la fin du fichier config : [LAST_USE] $PathRom  =\RECALBOX\User data\roms\gamegear\ $PathRomSub  =\RECALBOX\User data\roms\gamegear\ $PathNew  =\RECALBOX\User data\roms\gamegear\gamelist.xml $PathImage  =\RECALBOX\User data\roms\gamegear\downloaded_images\ $PathImageSub  =./downloaded_images/ $No_Profil  =1 $user_lang  =040C $HauteurImage  = $LargeurImage  =

                      1 Reply Last reply Reply Quote 0
                      • screech
                        screech last edited by

                        Les "sub" sont incorrect.... dans chemin du fichier XML met : ./ Et dans chemin des images dans le fichier XML met : ./downloaded-images/ ça devrait mieux fonctionner 😉

                        Clean your Romset with Universal ROM Cleaner
                        Scrape your Romset with Universal XML Scraper

                        1 Reply Last reply Reply Quote 0
                        • angelfred
                          angelfred last edited by

                          coucou c'est le boulet 😞 je pense que mon problème vient du fait qu'Emulstation n'est pas kill lorsque j'active la fonction avant de lancer le scrap car ma gamelist.xml me semble correcte avec descriptif des jeux en français, chemin pour les roms, images etc... corrects. Le fait de killer doit il avoir un impact sur l'écran de la recalbox ; car moi après avoir activer le kill rien ne bouge sur l'écran de la recalbox je suis toujours sur l'écran de choix des systèmes. Les gamelists de ma recalbox ne correspondent pas aux gamelist que j'ai créé avec ton logiciel.

                          1 Reply Last reply Reply Quote 0
                          • screech
                            screech last edited by

                            Effectivement, la commande Kill All Emulationstation est censé t'afficher un écran noir sur la recalbox. En toute logique, le menu SSH de Universal  XML Scraper te propose la commande et la lance via un logiciel tier (plink) mais c'est aussi possible que ça ne fonctionne pas (la première fois, il peut aussi afficher un message te demandant si tu valide la clef SSH auquel il faut répondre "oui"). Pour être sur tu peux utiliser cette procédure "manuel" : Accès via WINSCP ou celle-ci : Accès via terminal Mais il y a de forte chance que ce soit ça qui bloque 😉

                            Clean your Romset with Universal ROM Cleaner
                            Scrape your Romset with Universal XML Scraper

                            1 Reply Last reply Reply Quote 0
                            • angelfred
                              angelfred last edited by

                              Screech bonjour, J'ai enfin réussi 🙂 j'avais deux problèmes majeurs : 1) le kill d'emulationstation ne marchait pas chez moi par le logiciel mais après l'avoir fait de façon manuelle tout est presque rentré dans l'ordre. les gamelists étaient ok mais pas d'images rattachées 2) le chemin d'accès du dossier images était erroné : par défaut celui qui est indiqué dans ton logiciel est downloaded-images (tiret 6) moi j'avais créé des dossiers downloaded_images (underscore 😎 comme celui que le scrappeur integré avait créé dans mon dossier neogeo Après plusieurs jours d'arrachage de cheveux tout est enfin ok. En tout cas pour ta patience et ton investissement, l'utilisateur lamba que je suis te remercie grandement le bon côté de mes galères c'est que j'aurais appris quelques petits trucs qui me servent à la compréhension générale de la chose

                              1 Reply Last reply Reply Quote 0
                              • angelfred
                                angelfred last edited by

                                bonjour, un nouveau petit problème 🙂 rien n'est trouvé au niveau de mes roms GBA Est-ce normal ou cela vient de mon romset ?

                                1 Reply Last reply Reply Quote 0
                                • screech
                                  screech last edited by

                                  C'est effectivement bizarre.. Surtout si ça a marché pour d'autre système. Pourrais tu me donner 1 ou 2 crc32 qui a quand même du se générer dans le fichier XML pour voir s'il existe ou non dans la base de données de screenscraper ? Si ce n'est pas le cas, effectivement, il y a peut être un pb avec ton romset. Sinon, faudrait voir la config (surtout au niveau des chemins :S )

                                  Clean your Romset with Universal ROM Cleaner
                                  Scrape your Romset with Universal XML Scraper

                                  1 Reply Last reply Reply Quote 0
                                  • cannasteve
                                    cannasteve last edited by

                                    Bonjour je comprend pas j'ai été sur le site screenscraper.fr et quand je navigue dessus dans les traductions tout est à 0% ???

                                    1 Reply Last reply Reply Quote 0
                                    • screech
                                      screech last edited by

                                      @Cannasteve Le site screenscraper est toujours en cours de population d'information. Il n'est aujourd'hui pas encore complet. De nombreux bénévoles travaillent dessus sans relâche pour le compléter le plus vite possible. Tu peux aussi participer, il te suffit de créer un compte pour toi aussi alimenter la base de données avec tes connaissances ou, comme moi utiliser le copier/coller pour augmenter la masse d'informations nécessaire au scraper. Pour info voici les stats "actuelles" de Screenscraper :

                                      • SYSTÈMES : 103
                                      • JEUX : 70067
                                      • ROMS : 85788
                                      • TRUCS & ASTUCES : 4986
                                      • WHEELS : 11230
                                      • WHEELS HD : 110
                                      • SCREENSHOTS : 22461
                                      • BOITIERS : 5957
                                      • SUPPORTS : 1460
                                      • VIDÉOS : 15255
                                      • THÈMES : 1587
                                      • MANUELS : 2708

                                      Plus on sera nombreux à participer, plus cette base sera vite complète 😉 Rejoignez nous... (Oui oui c'est de la pub à peine déguisé 😉 mais c'est aussi pour le bien de recalbox et de ses utilisateur 😉 ) (En plus, je viens de regarder ta copie d'écran et je pense qu'il y a un bug chez toi, ou sur le site, voila ce que j'ai moi pour la supernes par exemple) Heberger image

                                      Clean your Romset with Universal ROM Cleaner
                                      Scrape your Romset with Universal XML Scraper

                                      1 Reply Last reply Reply Quote 0
                                      • borninthe80s
                                        borninthe80s last edited by

                                        Bonjour, Chez moi rien ne se passe, juste le fichier qui se créé et reste à 0 ko. Une idée ? Merci

                                        www.facebook.com/assoborninthe80s/ www.borninthe80s.fr

                                        1 Reply Last reply Reply Quote 0
                                        • cannasteve
                                          cannasteve last edited by

                                          Merci j'ai testé et finalement le scrapping fonctionne en étant sous windows, par contre je voulais directement pointer les dossier de recalbox dans la configuration UXMLS mais moi je n'ai pas de dossier \RECALBOX\Userdata\roms j'ai que \RECALBOX\roms... de plus je vois des dossiers  gamelist et les downloaded images qui sont dans le dossier /root/.emulationstation  sous Winscp je sais pas si ça joue du coup? Désolé si mes questions peuvent paraitre bête maisje me sens paumé, je connais qu'Hypersin et Rocketlauncher 😛 Au final j'ai tout mis dans le dossier roms du système concerné et je test.

                                          1 Reply Last reply Reply Quote 0
                                          • daveheart
                                            daveheart last edited by

                                            Salut, Tout d'abord merci pour le soft, cela à l'air très bien. Malheureusement, il ne me télécharge aucunes images, quelque soit le dossier que je crée et que je lui indique. Il me crée seulement un gamelist, sans infos mais avec le nom des roms. Je possède des romsets connus et j'utilise un disque dur ntfs. Est-ce cela mon problème? Pour ceux, que ca fonctionne, ca vaut le coup? Combien d'émulateurs scrappe t'il complétement? Sachant que j'ai tout scrappé en Anglais. Et que ca ne me dérange pas forcément d'y rester. Merci d'avance.   PS: Cela à l'air simple à utiliser mais je me demande si ca vaut pas le coup d'avoir un tuto complet avec dépannage, infos etc. pour justement éviter ces questions 🙂

                                            Pi 0w caméra/motion
                                            Pi 0 2w
                                            Pi 2 b Recalbox v7 / bartop / test
                                            Pi 3 b+ PINN / RaspioOs32 / Recalbox v8
                                            Pi 4 b PINN / RaspioOs 32 / LineageOs 18 / Recalbox v8

                                            1 Reply Last reply Reply Quote 0
                                            • First post
                                              Last post

                                            Want to support us ?

                                            75
                                            Online

                                            99.6k
                                            Users

                                            28.1k
                                            Topics

                                            187.1k
                                            Posts

                                            Copyright © 2021 recalbox.com