Recalbox Forum

    • Register
    • Login
    • Search
    • Recent
    • Tags
    • recalbox.com
    • Gitlab repository
    • Documentation
    • Discord

    [SOFT] Universal XML Scraper V2

    Community projects
    [soft] universal xml scraper
    112
    670
    633026
    Loading More Posts
    • Oldest to Newest
    • Newest to Oldest
    • Most Votes
    Reply
    • Reply as topic
    Log in to reply
    This topic has been deleted. Only users with topic management privileges can see it.
    • TeKo
      TeKo last edited by

      I hope Im right here.

      In the description it says that the scraper is using the filename as a backup but its not really working for me.

      Its not finding Metroid (filename: Metroid.nes). Im missing a lot of NES and SNES stuff where it should be able to find it by name.

      paradadf 1 Reply Last reply Reply Quote 0
      • paradadf
        paradadf Staff @TeKo last edited by

        @TeKo there is no filename called "Metroid.nes"

        http://www.screenscraper.fr/gameinfos.php?plateforme=3&gameid=1256

        The names usually belong to some data source and has standards. If you have roms with self-edited names (not necessarly by you), you won't get too many roms scraped.

        If your question was answered, please mark it as solved: Topic Tools -> Ask a question + Topic Tools -> Mark as Solved

        TeKo 1 Reply Last reply Reply Quote 0
        • TeKo
          TeKo @paradadf last edited by

          @paradadf Ok, so I have to match the names of the website? "Metroid (Europe)" for example?

          kevinnash 1 Reply Last reply Reply Quote 0
          • paradadf
            paradadf Staff last edited by

            Like John Lennon said " It's easy if you try".
            But yes, you could either rename your roms or get no-intro romset and have a happy life 😉

            If your question was answered, please mark it as solved: Topic Tools -> Ask a question + Topic Tools -> Mark as Solved

            1 Reply Last reply Reply Quote 0
            • kevinnash
              kevinnash @TeKo last edited by

              @TeKo said in [SOFT] Universal XML Scraper V2:

              @paradadf Ok, so I have to match the names of the website? "Metroid (Europe)" for example?

              The best and easy way is to rename your roms in a couple of seconds with goodtools :

              http://cowering.blogspot.com/2016/04/new-good7800.html

              Personnally I use it with that GUI http://www.snes-projects.de/filebase/index.php?page=Entry&entryID=543

              1 Reply Last reply Reply Quote 0
              • screech
                screech last edited by

                Hello, as you can see, there is some problem to connect to the DB this morning. Pottentially because of the digimirror..

                So this is a 2.0.0.3 version with a fallback without the mirror... (just in case)

                Bonjour, comme vous avez pu le voir, il y a eu quelques problemes de connection à la BDD ce matin. Pottentiellement du au Digimirror.

                Donc voici la version 2.0.0.3 avec un fallback sans le mirroir... (juste au cas ou 😉 )

                Last Release

                Clean your Romset with Universal ROM Cleaner
                Scrape your Romset with Universal XML Scraper

                1 Reply Last reply Reply Quote 0
                • johnDoe_1
                  johnDoe_1 Banned last edited by johnDoe_1

                  @screech ça fonctionne ah ah ! Merci pour la progression dans l'icone, c'est mieux comme ça 🙂 Par contre avec les threads j'ai des problèmes, j'en avais 4, je suis passé à 3, j'ai pas mal participé et je suis toujours à 3, je ne comprends pas 😕

                  1 Reply Last reply Reply Quote 0
                  • Askorn
                    Askorn last edited by

                    Wouuuaaow ! Merci @screech et toute ton équipe, ainsi qu'aux admins et contributeurs de la BD Screenscraper, les rendus MIX sont notamment vraiment chouettes, et UXS 2 vraiment simple et user-friendly, BRAVO !

                    Une petite question : est-il prévu, dans un avenir plus ou moins lointain, que l'on puisse également disposer des notices / manuels des jeux ?

                    Je ne pense pas qu'il existe pour le moment de reader PDF dans recalbox, mais sait-on jamais, avec le temps et les futures versions... éventuellement permettre à l'utilisateur de switcher entre l'émulateur et la notice du jeu... mais là je m'emballe et certainement cela n'intéressera qu'1% des users... Bref, encore merci

                    Je poste en même temps dans le forum idées d'évolution pour le scrapper.

                    1 Reply Last reply Reply Quote 0
                    • screech
                      screech last edited by

                      @askorn Télécharger les Manuels de Screenscraper, ça peut être ajouté en 30 secondes dans UXS V2 😉

                      La problématique aujourd'hui est, comme tu le dis : la possibilité de les lire depuis la Recalbox...
                      Mais promis 😉 dès que ce sera possible, j'ajoute l'option 😉

                      Clean your Romset with Universal ROM Cleaner
                      Scrape your Romset with Universal XML Scraper

                      1 Reply Last reply Reply Quote 0
                      • Askorn
                        Askorn last edited by

                        Good news, je croise les doigts pour que le reader pointe son nez dans RECAL alors 🙂
                        Thx

                        1 Reply Last reply Reply Quote 0
                        • LucasDLK
                          LucasDLK last edited by

                          Salut, excellent ton taff la dessus. le seul soucis que j'ai c'est de devoir couper emulastation, mais la je chipote..
                          J'ai une question, tu conseil quoi comme theme pour vraiment mettre en valeur toute ces illus ?

                          1 Reply Last reply Reply Quote 0
                          • screech
                            screech last edited by

                            couper emulationstation est obligatoire avant le scrape sous peine de devoir recommencer 😉 (ES ne conserve pas ce que tu lui donne lorsqu'il tourne :S)

                            Comme thème, tout dépend de ce que tu veux 😉

                            Perso, j'utilise : https://github.com/Universal-Rom-Tools/Universal-XML-Scraper/wiki/[TUTO]-Using-the-"Background-(Modified-DarKade-Theme-by-Nachtgarm)"-Mix-Template-and-the-corresponding-Theme

                            (Le tuto n'est pas à jour 😉 mais je vais m'en occuper ^^, il y a peu de différence avec la V2 😉 )

                            Clean your Romset with Universal ROM Cleaner
                            Scrape your Romset with Universal XML Scraper

                            1 Reply Last reply Reply Quote 0
                            • LucasDLK
                              LucasDLK last edited by

                              J'ai quand meme un souci. Des que je veut scrape des jeux PSX, il plante. Et quand il plante pas, il met un temps fou. J'ai 15 rom, il a mit 45 min pour en faire 7 hier.. 😞

                              1 Reply Last reply Reply Quote 0
                              • screech
                                screech last edited by

                                laisse moi deviner 😉 tu n'as que des .bin ou .iso (voir pbp) dans tes roms PSX ?

                                Explications : Pour faire le lien avec la base de données, UXS à besoin du Hash. Ce hash est un calcul fait sur le fichier. Plus le fichier est gros, plus ce calcul mets du temps.

                                Le plus simple ? avoir des cue+bin (sachant que créer un .cue est très facile ^^)

                                Surtout que UXS détecte les cue+bin, il va scraper le fichier .cue et mettre automatiquement en caché (hidden) le ou les .bin correspondant pour ne pas qu'ils apparaissent dans la RB 😉

                                sinon, bein faut etre patient 😞 calculer un CRC32 et un MD5 c'est long sur un fichier de 700Mo... Et encore quand c'est superrieur à 300Mo, je ne calcul pas le SHA1 😉 )

                                Clean your Romset with Universal ROM Cleaner
                                Scrape your Romset with Universal XML Scraper

                                1 Reply Last reply Reply Quote 0
                                • sassa
                                  sassa last edited by sassa

                                  pour la psx, j'ai fais le gamelist moi même car il m'en trouvait aucun j'ai que des isos

                                  et puis y'a tellement de bin cue isos ou autres différents c'est très complexe, donc j'ai choisi la solution de le créer moi même pour cette console en m'aider de screenscrapper pour les différentes infos

                                  1 Reply Last reply Reply Quote 0
                                  • screech
                                    screech last edited by screech

                                    Je vais voir si je trouve un moyen pour accélérer la chose pour les "gros" fichiers... mais c'est pas gagné 😉

                                    Clean your Romset with Universal ROM Cleaner
                                    Scrape your Romset with Universal XML Scraper

                                    1 Reply Last reply Reply Quote 0
                                    • loopingstar
                                      loopingstar last edited by

                                      Moi, j'ai un problème pour utiliser ton super soft sous Linux Mint 18.
                                      Au premier lancement il décompresse tous ses fichiers, demande la langue et ensuite, il affiche un "err_SystemList" et ferme...
                                      Je le lance avec Wine.
                                      Universal Rom Cleaner fonctionne sans problèmes.

                                      Merci pour tes softs !

                                      1 Reply Last reply Reply Quote 0
                                      • screech
                                        screech last edited by

                                        Alors, malheureusement, UXS utilise des fonctions un peu plus avancée que URC 😉
                                        Et le probleme, c'est que je n'y connais rien sous linux (et encore moins WINE ^^)

                                        Par contre, si tu veux essayer de le faire marcher, voici des éléments dont tu pourrais avoir besoin :

                                        • MSXML surement la dernière version ( Attention, à prendre la version correspondant à l'exe que tu utilise : 32 ou 64)
                                        • Une dll du nom de "zipfldr.dll" (standard windows)
                                        • Le GDI+ (une dll du nom de "GDIPlus.dll")
                                        • Le cryptage (une dll du nom de "Advapi32.dll")

                                        Pour ton message d'erreur, je pense que de base, ça bloque sur le MSXML 😉

                                        Si tu y arrives 😉 tiens nous au courant 😄 (je pense que plusieurs serait intéressé pour le faire tourner sous linux ^^)

                                        Clean your Romset with Universal ROM Cleaner
                                        Scrape your Romset with Universal XML Scraper

                                        johnDoe_1 1 Reply Last reply Reply Quote 0
                                        • johnDoe_1
                                          johnDoe_1 Banned @screech last edited by johnDoe_1

                                          @screech Rien de plus simple : http://www.commentcamarche.net/faq/9182-faire-fonctionner-une-application-windows-sous-linux-avec-wine

                                          PS : Si tu galères https://www.youtube.com/watch?v=VnC--laUO7k ou https://www.youtube.com/watch?v=m9t_EnswUzY

                                          1 Reply Last reply Reply Quote 0
                                          • sassa
                                            sassa last edited by sassa

                                            je viens signaler un bug (ou peut être pas), dans mes gamelists, j'ai donc l'ajout des roms manquants surtout les roms traduites ou patchés, or, malgré qu'elle s'ajoute bien aux gamelists, elles n'ont pas de noms

                                            Déjà pour mieux comprendre, j'utilise la méthode romname+bracket pour les noms des jeux, voici un exemple de ce qu'obtiens avec un jeu patché :

                                            <path>./Ranma Nibunnoichi - Akanekodan Teki Hihou (J) (F) [!].smc</path>
                                            <name> (J) (F) [!]</name>
                                            <image>./downloaded_images/Ranma Nibunnoichi - Akanekodan Teki Hihou (J) (F) [!]-image.png</image>
                                            

                                            je précise qu'il s'agit de la rom Jap patché en Fr et renommé par moi même

                                            j'ai essayé avec le nom du jeu tout simple, et ça reste vide, en gros il crée bien les images, mais ne mets aucun nom pour le jeu du coup dans recalbox, je me retrouve avec des (J) (F) etc pour tous les jeux patchés ou traduits et je sais pas lequel c'est comme l'image est le fond de la console. Sinon seule la méthode du filename a l'air de fonctionné mais je me vois pas scrappé chaque dossier avec juste ces jeux dans le cas là mdrrr

                                            avec la v1, il mettait le nom du fichier + le pays ou bracket selon mes choix, donc est-ce un bug ou ça ne fonctionne qu'avec la méthode du filename ?

                                            1 Reply Last reply Reply Quote 0
                                            • First post
                                              Last post

                                            Want to support us ?

                                            63
                                            Online

                                            99.6k
                                            Users

                                            28.1k
                                            Topics

                                            187.1k
                                            Posts

                                            Copyright © 2021 recalbox.com