Recalbox Forum

    • Register
    • Login
    • Search
    • Recent
    • Tags
    • recalbox.com
    • Gitlab repository
    • Documentation
    • Discord

    [SOFT] Universal XML Scraper - Scrappez vos roms depuis Windows (Scrape your roms from Windows)

    Community projects
    [soft] universal xml scraper scrappez
    73
    656
    404755
    Loading More Posts
    • Oldest to Newest
    • Newest to Oldest
    • Most Votes
    Reply
    • Reply as topic
    Log in to reply
    This topic has been deleted. Only users with topic management privileges can see it.
    • ralgamaziel
      ralgamaziel last edited by

      le scrap vient de partir, merci 😉

      1 Reply Last reply Reply Quote 0
      • screech
        screech last edited by

        Corrigé dans la derniÚre version : Universal XML Scraper

        Clean your Romset with Universal ROM Cleaner
        Scrape your Romset with Universal XML Scraper

        1 Reply Last reply Reply Quote 0
        • figolu
          figolu last edited by

          Salut Screech, je trouve ton soft vraiment trÚs bien fait, et trÚs trÚs pratique, mais je me posait une question : y a t-il un moyen de pouvoir scraper les info des roms en minuscules ? ou mieux encore avec une majuscule en début de phrase ? (comme sur le site de Screenscraper.fr en fait ...)

          1 Reply Last reply Reply Quote 0
          • screech
            screech last edited by

            Effectivement c'est une option que j'avais prĂ©vu. Mais pour le moment je l'avais forcĂ© en MAJ parce que la recalbox affiche de toutes façons en MAJ. Je rajouterai l'option dans la prochaine version 😉

            Clean your Romset with Universal ROM Cleaner
            Scrape your Romset with Universal XML Scraper

            1 Reply Last reply Reply Quote 0
            • screech
              screech last edited by

              Voila 😉 La nouvelle version gùre l'option Majuscule 😉 GitHub de Universal XML Scraper

              Clean your Romset with Universal ROM Cleaner
              Scrape your Romset with Universal XML Scraper

              1 Reply Last reply Reply Quote 0
              • figolu
                figolu last edited by

                Wow, ça c' est de la réponse rapide, et du travail bien fait ... Merci beaucoup pour ton travail et ta réactivité, je m' empresse de l' essayer de ce pas !!!

                1 Reply Last reply Reply Quote 0
                • angelfred
                  angelfred last edited by

                  Bonjour, petite question de nouveau 😉 j'ai vu au dĂ©but du sujet qu'il fallait que les fichiers des roms soient en .zip Est-ce toujours le cas avec la derniĂšre version du logiciel ou pas ? sinon avait vous une mĂ©thode rapide pour zipper en sĂ©rie toutes les roms sans le faire une Ă  une ? d'avance merci de vos rĂ©ponses Angelfred

                  1 Reply Last reply Reply Quote 0
                  • screech
                    screech last edited by screech

                    Oui, effectivement, le format zip est obligatoire pour fonctionner avec le site Screenscraper (qui contient les base de données en fr).
                    Concernant le fait de "Re-zipper" tes roms, je ne t'y encourage pas, c'est long de tous rezipper, et sans garantie (si le réglage de ton zip n'est pas identique au zip d'origine, il y aura des différences de Hash et tes jeux ne seront pas trouvés.)
                    Le plus simple, si tu as une connexion internet avec un dĂ©bit suffisant, est de tĂ©lĂ©charger un romset tous fait (tu en trouves facilement sur internet, genre les set "no-intro" qui sont une rĂ©fĂ©rence... Google est ton ami 😉 )

                    Tu pourras ensuite nettoyer facilement ton romset avec Universal ROM Cleaner 
                    (pour retirer les roms qui ne te plaise pas, genre : les roms en japonais ou en Allemand, les roms de sample, les betas, les prototypes,...)
                    Il ne te restera plus qu'Ă  lancer le scraper sur ton set nettoyĂ© pour avoir ton fichier XML 😉

                    Pour information, hormis pour la N64, tu peux avoir toutes tes roms en zip. ça fonctionne trĂšs bien (mĂȘme sur un PI1 pour ce que j'avais testĂ©;). En plus, tu gagnes de la place 😉

                    Clean your Romset with Universal ROM Cleaner
                    Scrape your Romset with Universal XML Scraper

                    1 Reply Last reply Reply Quote 0
                    • angelfred
                      angelfred last edited by

                      Ok merci de ta rĂ©ponse rapide et complĂšte. pour les romset c'est pas un souci j'en ai dĂ©jĂ  ; en revanche mes fichiers zip sont constituĂ©s de toutes les versions disponibles d'un mĂȘme jeu (1 zip pour un jeu avec x versions dedans). Universal ROM Cleaner gĂšre les zip comme ceux lĂ  ou faut il que je trouve des fichiers 1 zip pour 1 jeu pour 1 version Edit : j'ai trouvĂ© ma rĂ©ponse en tĂ©lĂ©chargeant un romset no-intro 😉 Je teste tt ça et reviendrai faire part de mon rĂ©sultat ; en tout cas dĂ©jĂ  un Ă©norme merci pour tes ptis softs qui ont l'air bien sympa

                      1 Reply Last reply Reply Quote 0
                      • angelfred
                        angelfred last edited by

                        salut je reviens avec ma part d'échecs... j'ai réussi à scrapper mes jeux, récupérer les images et créer une gamelist qui reprend le tout ; le seul souci est que cette gamelist n'est pas reprise par recalbox pour la plupart de mes sets. Pour mon set game gear la gamelist liste est prise en compte, le descriptif des jeux y est mais je n'est pas la jaquette du jeux alors que les images sont bien récupérées. Je dois sûrement faire quelque chose de mal mais là je vois plus quoi... Je passe par Windows pour effectuer la tùche est-ce la bonne procédure ? ou faut il faire quelque chose depuis la recalbox ? D'avance merci de votre aide

                        1 Reply Last reply Reply Quote 0
                        • screech
                          screech last edited by screech

                          Non non, le logiciel est bien uniquement sous windows 😉 donc de ce cotĂ© la tout est correct.
                          Voici des pistes : as tu bien fait un "Kill Emulationstation" dans le menu "SSH" AVANT de faire le scrape (sinon, emulationstation ne prend pas en compte ton nouveau fichier xml et remet l'ancien).
                          Une fois le scrape terminé, tu peux faire un "Reboot", toujours depuis le menu SSH.

                          (Attention, si tu as changé les identifiants de connexion en SSH, on ne sait jamais, tu peux vérifier directement dans le fichier config)

                          Pour les images, il faut vĂ©rifier la concordance des chemins. Tu en as 2 dans le menu "configuration": Le chemin ou, depuis windows, les images vont ĂȘtre tĂ©lĂ©chargĂ©es. Normalement c'est quelque chose comme :

                          \RECALBOX\User data\roms\nes\downloaded-images\

                          Le chemin ou la recalbox (et emulationstation) vont aller chercher les images en local. Normalement c'est quelque chose comme ça :

                          ./downloaded-images/

                          VĂ©rifie bien aussi que tes chemins se terminent par \ ou / en fonction 😉
                          Sinon, quand tu regardes dans le rĂ©pertoire de tes Roms, tu as bien un rĂ©pertoire avec Ă  l’intĂ©rieur tes images ?
                          Peux tu me mettre la fin de ton fichier config ?
                          (celui qui s'appel [LAST_USE]) Histoire que je vĂ©rifie tes chemins 😉

                          Clean your Romset with Universal ROM Cleaner
                          Scrape your Romset with Universal XML Scraper

                          1 Reply Last reply Reply Quote 0
                          • angelfred
                            angelfred last edited by

                            merci de ton retour tu trouveras ci-dessous le log j'essaie de refaire un test en suivant à la lettre tes indications en parallÚle Nouvel essai : tjrs pareil pour ma gamelist Game Gear ci dessous la fin du fichier config : [LAST_USE] $PathRom  =\RECALBOX\User data\roms\gamegear\ $PathRomSub  =\RECALBOX\User data\roms\gamegear\ $PathNew  =\RECALBOX\User data\roms\gamegear\gamelist.xml $PathImage  =\RECALBOX\User data\roms\gamegear\downloaded_images\ $PathImageSub  =./downloaded_images/ $No_Profil  =1 $user_lang  =040C $HauteurImage  = $LargeurImage  =

                            1 Reply Last reply Reply Quote 0
                            • screech
                              screech last edited by

                              Les "sub" sont incorrect.... dans chemin du fichier XML met : ./ Et dans chemin des images dans le fichier XML met : ./downloaded-images/ ça devrait mieux fonctionner 😉

                              Clean your Romset with Universal ROM Cleaner
                              Scrape your Romset with Universal XML Scraper

                              1 Reply Last reply Reply Quote 0
                              • angelfred
                                angelfred last edited by

                                coucou c'est le boulet 😞 je pense que mon problĂšme vient du fait qu'Emulstation n'est pas kill lorsque j'active la fonction avant de lancer le scrap car ma gamelist.xml me semble correcte avec descriptif des jeux en français, chemin pour les roms, images etc... corrects. Le fait de killer doit il avoir un impact sur l'Ă©cran de la recalbox ; car moi aprĂšs avoir activer le kill rien ne bouge sur l'Ă©cran de la recalbox je suis toujours sur l'Ă©cran de choix des systĂšmes. Les gamelists de ma recalbox ne correspondent pas aux gamelist que j'ai créé avec ton logiciel.

                                1 Reply Last reply Reply Quote 0
                                • screech
                                  screech last edited by

                                  Effectivement, la commande Kill All Emulationstation est censĂ© t'afficher un Ă©cran noir sur la recalbox. En toute logique, le menu SSH de Universal  XML Scraper te propose la commande et la lance via un logiciel tier (plink) mais c'est aussi possible que ça ne fonctionne pas (la premiĂšre fois, il peut aussi afficher un message te demandant si tu valide la clef SSH auquel il faut rĂ©pondre "oui"). Pour ĂȘtre sur tu peux utiliser cette procĂ©dure "manuel" : AccĂšs via WINSCP ou celle-ci : AccĂšs via terminal Mais il y a de forte chance que ce soit ça qui bloque 😉

                                  Clean your Romset with Universal ROM Cleaner
                                  Scrape your Romset with Universal XML Scraper

                                  1 Reply Last reply Reply Quote 0
                                  • angelfred
                                    angelfred last edited by

                                    Screech bonjour, J'ai enfin rĂ©ussi 🙂 j'avais deux problĂšmes majeurs : 1) le kill d'emulationstation ne marchait pas chez moi par le logiciel mais aprĂšs l'avoir fait de façon manuelle tout est presque rentrĂ© dans l'ordre. les gamelists Ă©taient ok mais pas d'images rattachĂ©es 2) le chemin d'accĂšs du dossier images Ă©tait erronĂ© : par dĂ©faut celui qui est indiquĂ© dans ton logiciel est downloaded-images (tiret 6) moi j'avais créé des dossiers downloaded_images (underscore 😎 comme celui que le scrappeur integrĂ© avait créé dans mon dossier neogeo AprĂšs plusieurs jours d'arrachage de cheveux tout est enfin ok. En tout cas pour ta patience et ton investissement, l'utilisateur lamba que je suis te remercie grandement le bon cĂŽtĂ© de mes galĂšres c'est que j'aurais appris quelques petits trucs qui me servent Ă  la comprĂ©hension gĂ©nĂ©rale de la chose

                                    1 Reply Last reply Reply Quote 0
                                    • angelfred
                                      angelfred last edited by

                                      bonjour, un nouveau petit problĂšme 🙂 rien n'est trouvĂ© au niveau de mes roms GBA Est-ce normal ou cela vient de mon romset ?

                                      1 Reply Last reply Reply Quote 0
                                      • screech
                                        screech last edited by

                                        C'est effectivement bizarre.. Surtout si ça a marchĂ© pour d'autre systĂšme. Pourrais tu me donner 1 ou 2 crc32 qui a quand mĂȘme du se gĂ©nĂ©rer dans le fichier XML pour voir s'il existe ou non dans la base de donnĂ©es de screenscraper ? Si ce n'est pas le cas, effectivement, il y a peut ĂȘtre un pb avec ton romset. Sinon, faudrait voir la config (surtout au niveau des chemins :S )

                                        Clean your Romset with Universal ROM Cleaner
                                        Scrape your Romset with Universal XML Scraper

                                        1 Reply Last reply Reply Quote 0
                                        • cannasteve
                                          cannasteve last edited by

                                          Bonjour je comprend pas j'ai été sur le site screenscraper.fr et quand je navigue dessus dans les traductions tout est à 0% ???

                                          1 Reply Last reply Reply Quote 0
                                          • screech
                                            screech last edited by

                                            @Cannasteve Le site screenscraper est toujours en cours de population d'information. Il n'est aujourd'hui pas encore complet. De nombreux bénévoles travaillent dessus sans relùche pour le compléter le plus vite possible. Tu peux aussi participer, il te suffit de créer un compte pour toi aussi alimenter la base de données avec tes connaissances ou, comme moi utiliser le copier/coller pour augmenter la masse d'informations nécessaire au scraper. Pour info voici les stats "actuelles" de Screenscraper :

                                            • SYSTÈMES : 103
                                            • JEUX : 70067
                                            • ROMS : 85788
                                            • TRUCS & ASTUCES : 4986
                                            • WHEELS : 11230
                                            • WHEELS HD : 110
                                            • SCREENSHOTS : 22461
                                            • BOITIERS : 5957
                                            • SUPPORTS : 1460
                                            • VIDÉOS : 15255
                                            • THÈMES : 1587
                                            • MANUELS : 2708

                                            Plus on sera nombreux Ă  participer, plus cette base sera vite complĂšte 😉 Rejoignez nous... (Oui oui c'est de la pub Ă  peine dĂ©guisĂ© 😉 mais c'est aussi pour le bien de recalbox et de ses utilisateur 😉 ) (En plus, je viens de regarder ta copie d'Ă©cran et je pense qu'il y a un bug chez toi, ou sur le site, voila ce que j'ai moi pour la supernes par exemple) Heberger image

                                            Clean your Romset with Universal ROM Cleaner
                                            Scrape your Romset with Universal XML Scraper

                                            1 Reply Last reply Reply Quote 0
                                            • First post
                                              Last post

                                            Want to support us ?

                                            104
                                            Online

                                            97.2k
                                            Users

                                            27.9k
                                            Topics

                                            186.6k
                                            Posts

                                            Copyright © 2021 recalbox.com