Recalbox Forum

    • Register
    • Login
    • Search
    • Recent
    • Tags
    • recalbox.com
    • Gitlab repository
    • Documentation
    • Discord

    [SOFT] Universal XML Scraper V2

    Community projects
    [soft] universal xml scraper
    112
    670
    633148
    Loading More Posts
    • Oldest to Newest
    • Newest to Oldest
    • Most Votes
    Reply
    • Reply as topic
    Log in to reply
    This topic has been deleted. Only users with topic management privileges can see it.
    • screech
      screech last edited by

      @Ramstatlon effectivement, il faut bien penser à mettre sa résolution d’écran avant le scrape. Les images étant "construite" pour cette résolution elle s'adapterons parfaitement dans le thème.

      Si malheureusement tu change de résolution, effectivement, il faudra refaire le scrape avec la nouvelle... pas trop le choix 😞

      Pour les musiques, ça doit être possible 😉 mais concrètement, j'ai simplement adapté le thème de @Nachtgarm pour mettre les images en plein écran au fond ^^

      Quand au Slovaque, je ne sais pas du tout s'il y a une communauté retrogaming à Bratislava (il y a au moins toi 😉 ) mais si tu veux t'amuser à faire la traduction, je l'ajouterais ^^
      (Et je demanderais à MarbleMad, le développeur de la base de données d'ajouter le slovaque comme langue prise en charge pour les synopsis ^^ je suis sur qu'il sera contant^^)

      Clean your Romset with Universal ROM Cleaner
      Scrape your Romset with Universal XML Scraper

      1 Reply Last reply Reply Quote 0
      • supernature2k
        supernature2k last edited by

        Hi @screech , j'ai lancé cette v2 (pas encore full scrappé) mais en tout cas l'interface est sympa et il y a plein de bonnes options 🙂

        Je vais tenter un full scrap demain!

        Merci pour l'énorme taf pour la communauté 🙂

        Pi powered NES | Gameboy HD | RecalStation | RecalDrive
        Upvote messages if it has been useful ;)

        1 Reply Last reply Reply Quote 0
        • sassa
          sassa last edited by

          @screech effectivement avec la 2.0.0.3 je n'ai plus le soucis de devoir refaire la configuration au lancement

          Et j'ajouterais problème résolu pour l'antivirus car il me détectait l'application scraper64.exe en malveillante quand je cliquais dessus sinon il restait tranquille mais comme y'avait pas besoin de cliquer dessus tout est bon alors comme le pare feu m'autorise automatiquement le universal scraper 64 depuis que je l'ai passé sur autoriser au lieu de refuser

          1 Reply Last reply Reply Quote 0
          • screech
            screech last edited by

            New Beta 2.0.0.4 :

            Corrected :
            Include/Exclude Label Size to small in generale config
            PngQuant in MIX profil don't work
            Size and quality for MaxResize MIX profil doesn't work very well
            Added :
            Help, Thanks, and support Menu
            Cache function (by default) It use the DigiMirror
            Uppercase option for some text info (in Option Menu)
            Hide Scraper.exe and Scraper64.exe to not confuse...

            Clean your Romset with Universal ROM Cleaner
            Scrape your Romset with Universal XML Scraper

            1 Reply Last reply Reply Quote 0
            • Yoakin
              Yoakin last edited by

              Hi.
              I am getting exeptions with the new version. (previous version worked fine)
              Whenever I try to do a scrap, it runs into this error:

              Line 443 - If StringLower($vCompression) = "yes" Then _Compression($aMi ...

              Module: Main/

              (File "H:\EmulationStation\Games_scraper\Scraper443 - If StringLower($vCompression) = "yes" Then _Compression($aMi ...•

              .exe"):

              Error: Array variable has incorrect number of subscripts or subscript dimension range exceeded.

              Environment( AutoIt:3.3.14.2 - Language:0407 - Keyboard:00000407 - OS:WIN_10 / CPU:X64 - OS:X64 )

              1 Reply Last reply Reply Quote 0
              • screech
                screech last edited by

                arg ... need to check :S

                with wich profil ?

                Clean your Romset with Universal ROM Cleaner
                Scrape your Romset with Universal XML Scraper

                1 Reply Last reply Reply Quote 0
                • Yoakin
                  Yoakin last edited by

                  It was "ScreenScraper(Mix) - Recalbox v4". I was using the Standard (3img) Mix Image.

                  1 Reply Last reply Reply Quote 0
                  • sassa
                    sassa last edited by

                    ah ben voilà avec cette 2.0.0.4 mes png sont cette fois bien petit en taille cool merci screech !!!!!!

                    1 Reply Last reply Reply Quote 0
                    • screech
                      screech last edited by

                      @Yoakin I just found the error...

                      I just push a 2.0.0.5 correcting that 😉

                      @Sassa cool ^^ (et la différence est vraiment énorme non ?)

                      Clean your Romset with Universal ROM Cleaner
                      Scrape your Romset with Universal XML Scraper

                      1 Reply Last reply Reply Quote 0
                      • sassa
                        sassa last edited by

                        @screech oh oui !!!! Ça va faire un gros gain de place

                        1 Reply Last reply Reply Quote 1
                        • Ramstatlon
                          Ramstatlon last edited by

                          Je ne sais pas si ca vous la fait aussi, mais UXML confond 2 jeux sur NES: 3-D WorldRunner et Lode Runner.
                          Il remonte systematiquement les donnees de 3-D WorldRunner de http://www.screenscraper.fr/
                          J ai teste avec differetnes roms de Load runner pris de sources differentes.

                          Lode Runner
                          http://www.screenscraper.fr/gameinfos.php?gameid=1544
                          3-D WorldRunner
                          http://www.screenscraper.fr/gameinfos.php?gameid=18548

                          Qulequ un sait comment le signaler sur le site? J ai laisser un commentaire avec un #ERREUR en esperant que ca suffise

                          recalboxOS 4.0.0-beta6
                          Raspberry pi 3
                          manettes 8Bitdo SCF30 & NES30 Pro

                          1 Reply Last reply Reply Quote 0
                          • screech
                            screech last edited by

                            @Ramstatlon
                            C'est bizarre, je viens de regarder et les roms semblent correcte...

                            Tu dois avoir une rom Lode Runner qui possède un hash de 3D WorldRunner.

                            Pourrais tu me donner le CRC (ou MD5) de la rom Lode Runner qui remonte en 3D WorldRunner ?

                            Pour que je check. Sinon regarde dans les 2 liens que tu as mis, tu as les roms liés... Si tu as une inversion, c'est qu'il y a un pb de hash quelque part...

                            Clean your Romset with Universal ROM Cleaner
                            Scrape your Romset with Universal XML Scraper

                            Ramstatlon 1 Reply Last reply Reply Quote 0
                            • Ramstatlon
                              Ramstatlon @screech last edited by Ramstatlon

                              @screech
                              comment je peux connaitre ce CRC (ou MD5) ?

                              ooops, edit:
                              j ai teste plusieurs versions, je reviens avec les CRC

                              recalboxOS 4.0.0-beta6
                              Raspberry pi 3
                              manettes 8Bitdo SCF30 & NES30 Pro

                              1 Reply Last reply Reply Quote 0
                              • screech
                                screech last edited by

                                supprime vite ces liens avant qu'un modo ne passe ^^ (pas de liens sur des roms s'il te plais 😉 )

                                Sinon, tu peux trouver le CRC dans les logs 😉

                                Clean your Romset with Universal ROM Cleaner
                                Scrape your Romset with Universal XML Scraper

                                1 Reply Last reply Reply Quote 0
                                • Ramstatlon
                                  Ramstatlon last edited by

                                  Pardon d etre un boulet..
                                  Le log c est celui de /recalbox/share/system/logs/recalbox.log?

                                  J ai bien les lignes ci-dessous qui apparaissent mais je ne vois de numero CRC ou MD5

                                  ['retroarch', '-L', '/usr/lib/libretro/fceunext_libretro.so', '--config', '/recalbox/share/system/configs/retroarch/retroarchcustom.cfg', '/recalbox/share/roms/nes/Lode Runner (U) [!].nes']
                                  Powering on HDMI with explicit settings (CEA mode 4)
                                  Powering on HDMI with preferred settings
                                  ['retroarch', '-L', '/usr/lib/libretro/fceunext_libretro.so', '--config', '/recalbox/share/system/configs/retroarch/retroarchcustom.cfg', '/recalbox/share/roms/nes/Lode Runner (U).nes']

                                  recalboxOS 4.0.0-beta6
                                  Raspberry pi 3
                                  manettes 8Bitdo SCF30 & NES30 Pro

                                  1 Reply Last reply Reply Quote 0
                                  • screech
                                    screech last edited by

                                    oulah ^^ pas du tout ^^
                                    c'est dans le répertoire d'UXS, tu as un repertoire logs ^^ et dedans un log.txt 😉

                                    Clean your Romset with Universal ROM Cleaner
                                    Scrape your Romset with Universal XML Scraper

                                    1 Reply Last reply Reply Quote 0
                                    • Ramstatlon
                                      Ramstatlon last edited by

                                      Bon ben la ref est CD4BF911 qui correspond a 3-D WorldRunner pourtant c est bien un rom qui lance Lode Runner..

                                      [21:12:42] - Rom Info (Lode Runner (U).nes) Hash in 0.03s
                                      [21:12:42] - > Size : 24592
                                      [21:12:42] - > CRC32 : CD4BF911
                                      [21:12:42] - > MD5 : 8E074813A094594C29C1D4C43E4BDBC5
                                      [21:12:42] - > SHA1 : EA09AEC11EFC4B42EBC644EA243C2284001FE34F

                                      [21:12:42] - Rom Info (Lode Runner (U) [!].nes) Hash in 0.03s
                                      [21:12:42] - > Size : 24592
                                      [21:12:42] - > CRC32 : CD4BF911
                                      [21:12:42] - > MD5 : 8E074813A094594C29C1D4C43E4BDBC5
                                      [21:12:42] - > SHA1 : EA09AEC11EFC4B42EBC644EA243C2284001FE34F

                                      Je precise que ce sont 2 roms de Lode Runner qui viennent de sources differentes

                                      Lode Runner
                                      http://www.screenscraper.fr/gameinfos.php?gameid=1544
                                      3-D WorldRunner
                                      http://www.screenscraper.fr/gameinfos.php?gameid=18548

                                      recalboxOS 4.0.0-beta6
                                      Raspberry pi 3
                                      manettes 8Bitdo SCF30 & NES30 Pro

                                      1 Reply Last reply Reply Quote 0
                                      • kevinnash
                                        kevinnash last edited by

                                        hello screech,

                                        Je viens d'essayer la V2, j'ai quelques interrogations :

                                        => J'ai mis l'ID de mon compte Screenscraper mais cela me dit que mon compte ne me donne accès que à 1 thread, est-ce normal ?

                                        => le clic pour s'inscrire sur Screenscraper donne une 404

                                        => Le son de démarrage, est-ce vraiment utile ? Peut-être une option de désactivation de ce son serait possible ?

                                        => Ne peut-il pas y avoir moins de 5 menus de configuration ? Personnellement je préfèrerais le all-in-one de la V1;)

                                        Ramstatlon 1 Reply Last reply Reply Quote 0
                                        • Ramstatlon
                                          Ramstatlon @kevinnash last edited by

                                          @kevinnash ah ben tiens, je viens juste de poser la question.. Ca viens juste de changer mais apparemment les nouvelles conditions sont plus interessantes:

                                          pour les thread, effectivement, il y a eu quelques modificiations en accord avec le grand chef de Screenscraper.
                                          Il faut au moins 1 participation validé pour avoir 2 threads... mais en contre partie tu peux en gagner d'autre beaucoup plus vite 😉
                                          Votre nombre de Thread dépend de votre participation :
                                          (ssuser/uploadsysteme + ssuser/uploadinfos + ssuser/romasso + ssuser/uploadmedia)

                                          • 1 participations validées : 2 Threads maximum ouvert simultanément
                                          • 2 à 49 participations validées : 3 Threads maximum ouvert simultanément
                                          • 50 à 199 participations validées : 4 Threads maximum ouvert simultanément
                                          • 200 à 499 participations validées : 5 Threads maximum ouvert simultanément
                                          • 500 à 749 participations validées : 6 Threads maximum ouvert simultanément
                                          • 750 à 999 participations validées : 7 Threads maximum ouvert simultanément
                                            • de 999 participations validées : 8 Threads maximum ouvert simultanément
                                              Et si vous faite une participation financière vous gagnez des « Threads Bonus »
                                              (ssuser/contribution) : 2 = 1 Thread Supplémentaire / 3 et + = 5 Threads Supplémentaires
                                          • De 5 à 9 euros : 1 Thread bonus
                                          • Au-delà de 10 euros : 5 Threads bonus

                                          recalboxOS 4.0.0-beta6
                                          Raspberry pi 3
                                          manettes 8Bitdo SCF30 & NES30 Pro

                                          1 Reply Last reply Reply Quote 0
                                          • botte
                                            botte last edited by

                                            Hi Screech thanks a lot for your dev!

                                            I'm new Recalbox user and it allowed me to make things nice!

                                            But i'm wondering if you could (or if there already is) add a manual search to find the rom which do not end up with any information ?

                                            I could use scrapper in recalbox but I'd like to use same db (and have only french description 😉 ).
                                            It mostly happens on translated roms for instance, which cannot be hashed.

                                            Thanks and cheers!

                                            1 Reply Last reply Reply Quote 0
                                            • First post
                                              Last post

                                            Want to support us ?

                                            82
                                            Online

                                            99.6k
                                            Users

                                            28.1k
                                            Topics

                                            187.1k
                                            Posts

                                            Copyright © 2021 recalbox.com