Recalbox Forum

    • Register
    • Login
    • Search
    • Recent
    • Tags
    • recalbox.com
    • Gitlab repository
    • Documentation
    • Discord

    [SOFT] Universal XML Scraper V2

    Community projects
    [soft] universal xml scraper
    112
    670
    632988
    Loading More Posts
    • Oldest to Newest
    • Newest to Oldest
    • Most Votes
    Reply
    • Reply as topic
    Log in to reply
    This topic has been deleted. Only users with topic management privileges can see it.
    • Pepe
      Pepe @ian57 last edited by

      @ian57 If we knew sdk used and dlls on which it is based something could be done. I'm close to getting it but I'm missing information.

      ian57 1 Reply Last reply Reply Quote 0
      • jackalpret
        jackalpret Translator @ian57 last edited by

        @ian57 said in [SOFT] Universal XML Scraper V2:

        @jackalpret Nop, after multiple tests.. it does not run under wine, you need a real Windows. I use it thanks to a VM.

        thanks !!!

        1 Reply Last reply Reply Quote 0
        • ian57
          ian57 Staff @Pepe last edited by

          @Pepe The SDK is autotit, there are lots of M$ dependencies... and mono uses too old releases of some of them. This make UXS unusable with wine.

          Its works like a charm in a Windows WM with virtualbox

          "UNIX is basically a simple operating system, but you have to be a genius to understand the simplicity." Dennis Ritchie

          1 Reply Last reply Reply Quote 0
          • Larlouch
            Larlouch last edited by

            Bonjour,

            Je rencontre un soucis de taille d'image que quelques emulateurs (32X, pc engine, scummvm) l'image est toute petite alors que la configuration et la taille dans UXS est identique aux autres emulateurs.
            Jai également essayé en modifiant la taille des images mais rien y fais.

            Quelqu'un a déjà eu ce problème?

            1 Reply Last reply Reply Quote 0
            • screech
              screech last edited by

              @Larlouch Jamais eu ce probleme...
              Tu aurais un log1.txt à me filer que je check ?

              @Pepe
              Sorry I wasn't there too much these last time :S

              This is a "list" of "things" I use in UXS :
              External exe (they are IN the UXS executable) :

              • 7za.exe
              • plink.exe
              • pngquant.exe

              Dll used (I hope I don't forget some ^^) :

              • Kernel32.dll
              • User32.dll
              • gdi32.dll
              • GDIPlus.dll
              • ntdll.dll
              • winhttp.dll
              • dwmapi.dll
              • uxtheme.dll
              • imageres.dll
              • advapi32.dll
              • msxmlX.dll (normally X is tested from 8 to 0... But I think the last one will be the best : so msxml8.dll )

              The problem is on the last dll (I think).
              When I try (with my poor competence) to run UXS on WINE, I try to install MSXML6 with winetricks (not sure if it was with success ^^) but if it was, I think v6 isn't enough...

              They're certainly something to do with the arch config (32 or 64) but I'm really to "light" on Linux to work fluently with it :S

              Don't hesitate to ask if you need someting more 😉

              Clean your Romset with Universal ROM Cleaner
              Scrape your Romset with Universal XML Scraper

              Pepe 2 Replies Last reply Reply Quote 0
              • Pepe
                Pepe @screech last edited by

                @screech Thanks for the information, @jackalpret is probably interested, he who wants to run uxs in wine, I'm just curious. Anyway I resume my attempts to make it run, at its time I stayed very close to get it.

                jackalpret 1 Reply Last reply Reply Quote 0
                • jackalpret
                  jackalpret Translator @Pepe last edited by

                  @Pepe said in [SOFT] Universal XML Scraper V2:

                  @screech Thanks for the information, @jackalpret is probably interested, he who wants to run uxs in wine, I'm just curious. Anyway I resume my attempts to make it run, at its time I stayed very close to get it.

                  I just abort triying in wine ... I will install in virtual machine in a few days

                  1 Reply Last reply Reply Quote 0
                  • Djscop62
                    Djscop62 @screech last edited by

                    @screech Bonjour,

                    J'ai décidé de me lancer pour réaliser une recalbox, je rencontre un problème au niveau du scrappe des jeux, j'ai commencé par les jeux SNES en utilisant UNIVERSAL XML SCRAPPER, dans mon dossier image j'ai toute mes images correspondant à mes jeux mais le soucis c'est que lorsque je reboot la raspberry toute les images ne s'affiche pas quelqu'un aurait-il une idée? j'ai une image sur 10 qui s'affiche alors que dans mon dossier toute mes images sont présentes..
                    Désolé si le post est déja en doublon mais je ne trouve rien pour résoudre mon problème..
                    Merci d'avance

                    GRALLEC 1 Reply Last reply Reply Quote 0
                    • GRALLEC
                      GRALLEC @Djscop62 last edited by

                      @Djscop62 regardes en ouvrant le fichier gamelist.xml s'il est édité correctement.
                      sinon relances un scrape en veillant a supprimer les images du fichiers "download image" et en plaçant un fichier gamlist vierge dans le répertoire.
                      Tu choppes dans un dossier rom vide le gamlist que tu copie colle dans ton répertoire snes.

                      -RPI3

                      • RECALBOX 4.1 stable (juillet 2018)
                        -Manettes 8Bitdo NES30 PRO et SFC30 xbox 360 sans fil/ stick arcade NES 30 sanwa /NES/SNES/N64 avec retro Adaptateurs
                        -SD Scandisk 128
                        -SuperPicase retroflag
                        -Windows 10
                      Djscop62 1 Reply Last reply Reply Quote 0
                      • Djscop62
                        Djscop62 @GRALLEC last edited by

                        @GRALLEC je pense qu'il y a un soucis avec le fichier gamelist... j'ai relancé avec ta méthode mais sans succès toujours le même problème à peu près 1 images / 10 alors que dans le dossier images j'ai toutes mes images... Par contre il ne scrappe pas en FR non plus.. Je suis sous windows en 64 Bits pense-tu que je devrais utiliser la version qui n'est pas en 64 Bits? Je vais faire le test

                        GRALLEC 1 Reply Last reply Reply Quote 0
                        • GRALLEC
                          GRALLEC @Djscop62 last edited by

                          @Djscop62 oui et désactive l'antivirus ! je fais comme ça

                          -RPI3

                          • RECALBOX 4.1 stable (juillet 2018)
                            -Manettes 8Bitdo NES30 PRO et SFC30 xbox 360 sans fil/ stick arcade NES 30 sanwa /NES/SNES/N64 avec retro Adaptateurs
                            -SD Scandisk 128
                            -SuperPicase retroflag
                            -Windows 10
                          1 Reply Last reply Reply Quote 0
                          • screech
                            screech last edited by

                            @GRALLEC Hello,

                            Es tu sur que Emulationstation est bien "killé" ?
                            Normalement, avant un scrape il te le propose, sinon tu peux le faire depuis le menu SSH.
                            Il faut que l’écran de ta recalbox soit "noir" (en tout cas plus dans un menu)
                            Sinon au redémarrage il te remet tes anciens gamelist.xml chargé en mémoire :S

                            Clean your Romset with Universal ROM Cleaner
                            Scrape your Romset with Universal XML Scraper

                            Djscop62 1 Reply Last reply Reply Quote 0
                            • Djscop62
                              Djscop62 @screech last edited by

                              @screech ça fonctionne avec la version normal via le pc !! :). Par contre j'ai les titres avec (Usa) Europe etc est ce qu'il y a une option à décocher ?
                              Merci en tout cas 😊

                              GRALLEC 1 Reply Last reply Reply Quote 0
                              • GRALLEC
                                GRALLEC @Djscop62 last edited by

                                @Djscop62 non. Il faut renommer tes ROMs .via windows.
                                exemple:
                                Castelvania(USA).nes en Castelvania.nes 😉
                                Le hic c'est que tu va devoir re-scraper car le gamlist a pris en compte le chemin de fichier comme il est écrit.
                                Les seuls qu'il ne faut pas toucher se sont les ROMs MAME et FBA.

                                -RPI3

                                • RECALBOX 4.1 stable (juillet 2018)
                                  -Manettes 8Bitdo NES30 PRO et SFC30 xbox 360 sans fil/ stick arcade NES 30 sanwa /NES/SNES/N64 avec retro Adaptateurs
                                  -SD Scandisk 128
                                  -SuperPicase retroflag
                                  -Windows 10
                                GRALLEC Djscop62 2 Replies Last reply Reply Quote 0
                                • GRALLEC
                                  GRALLEC @GRALLEC last edited by

                                  Autre solution que je ne connaissais pas (Maintenant si):
                                  https://forum.recalbox.com/topic/7346/show-game-region-after-scraping

                                  -RPI3

                                  • RECALBOX 4.1 stable (juillet 2018)
                                    -Manettes 8Bitdo NES30 PRO et SFC30 xbox 360 sans fil/ stick arcade NES 30 sanwa /NES/SNES/N64 avec retro Adaptateurs
                                    -SD Scandisk 128
                                    -SuperPicase retroflag
                                    -Windows 10
                                  1 Reply Last reply Reply Quote 0
                                  • Djscop62
                                    Djscop62 @GRALLEC last edited by Djscop62

                                    @GRALLEC said in [SOFT] Universal XML Scraper V2:

                                    @Djscop62 non. Il faut renommer tes ROMs .via windows.
                                    exemple:
                                    Castelvania(USA).nes en Castelvania.nes 😉
                                    Le hic c'est que tu va devoir re-scraper car le gamlist a pris en compte le chemin de fichier comme il est écrit.
                                    Les seuls qu'il ne faut pas toucher se sont les ROMs MAME et FBA.

                                    Non mes roms n'ont pas l'extension (USa) mais elle s'affiche sur la raspberry (etrange), hier j'ai testé les options par rapport au tuto ci dessous et tout fonctionne niquel!
                                    Merci beaucoup

                                    1 Reply Last reply Reply Quote 0
                                    • Ramstatlon
                                      Ramstatlon last edited by Ramstatlon

                                      En principe c est comme dans le lien mentionne par Grallec, dans options - Nom - format du nom - (la tu choisi entre les choix proposes)
                                      Ca marchait sur la version 2.2.0.0 si je ne me trompe pas mais ca bug sur la 2.2.0.1.

                                      Ca fera probablement corrige dans la prochaine maj de Screech.

                                      Edit: autant pour moi, comme mentionne Djscop ca marche nickel egalement dans la version 2.2.0.1

                                      recalboxOS 4.0.0-beta6
                                      Raspberry pi 3
                                      manettes 8Bitdo SCF30 & NES30 Pro

                                      1 Reply Last reply Reply Quote 0
                                      • DarthVad3r
                                        DarthVad3r last edited by

                                        Bonjour à tous
                                        Tout d'abord un grand merci a @screech pour son soft qui est terrible 😉

                                        Cependant j'ai un petit souci avec le scrap de certains jeux. Si le nom des jeux contient le caractère ' UXS ne trouve jamais les infos.

                                        J'ai également deux idées d'amélioration pour le soft. Reste a voir si c'est faisable ou non.

                                        • Avoir dans les options un paramètre qui permet de lancer la recherche SS sur le nom du jeu plutôt que sur le nom de la rom.

                                        • Avoir une nouvelle fenêtre qui permet de récupérer les informations d'un ou plusieurs jeux au format gamelist.xml et l'image en fonction de l'id du jeu sur ScreenScraper. Par exemple on mettrait dans un champ texte, une ou plusieurs urls des différents jeux (ou uniquement les ids SS) que l'on souhaite scrapper, on sélectionne une plateforme avec une combobox par exemple et on appui sur un bouton qui lance le scrap des infos et des images.
                                          Cela permettrait de scraper manuellement les jeux qui n'ont pas été trouvés par le moteur de scrap auto et qui sont pourtant présents sur ScreenScraper.
                                          Une fois les infos récupérées 2 solutions :
                                          Soit les infos sont fusionnées avec le gamelist de la plateforme sélectionnée et les images mises dans le dossier downloaded_images de la plateforme.
                                          Soit au moment ou on appui sur le bouton, UXS demande un chemin ou stocker le fichier gamelist généré plus les images dans un dossier downloaded_images. Cette solution serait plus simple a mettre en place je pense.

                                        En tout cas, c'est un super boulot que tu as fait avec ce soft
                                        Merci

                                        1 Reply Last reply Reply Quote 0
                                        • Chris Johnson
                                          Chris Johnson last edited by

                                          @screech

                                          hi, i tipped 10 Euros on that tipeee website, and i still havent received my 5 threads from it....

                                          my username on screenscraper.fr is red2blue and my username on tipeee is also red2blue.

                                          1 Reply Last reply Reply Quote 0
                                          • Honorbrachios
                                            Honorbrachios last edited by Honorbrachios

                                            Merci pour le taf, je teste ça sur WINE de suite. Edit : sur 1.9.24 ça marche pas, après il faut tester sur d'autres engines.

                                            En passant j'ai vu qu'il ne fallait pas renommer ses romsets, malheureusement ayant déjà mes propres romsets triés et detag depuis un bail et cela marche t il quand même en sachant que les noms des jeux sont restés identiques ?

                                            https://github.com/recalbox/recalbox-os/wiki/Mini-How-To-(FR)
                                            https://forum.recalbox.com/topic/7341/tutoriel-se-connecter-en-ssh-pour-les-nuls-avec-cyberduck-pour-config-txt-osx-et-win

                                            1 Reply Last reply Reply Quote 0
                                            • First post
                                              Last post

                                            Want to support us ?

                                            90
                                            Online

                                            99.6k
                                            Users

                                            28.1k
                                            Topics

                                            187.1k
                                            Posts

                                            Copyright © 2021 recalbox.com