Recalbox Forum

    • Register
    • Login
    • Search
    • Recent
    • Tags
    • recalbox.com
    • Gitlab repository
    • Documentation
    • Discord

    [SOFT] Universal XML Scraper V2

    Community projects
    [soft] universal xml scraper
    112
    670
    633037
    Loading More Posts
    • Oldest to Newest
    • Newest to Oldest
    • Most Votes
    Reply
    • Reply as topic
    Log in to reply
    This topic has been deleted. Only users with topic management privileges can see it.
    • screech
      screech last edited by

      @cotedeporc

      Le conditionnel comme ça, ça doit pouvoir se faire, mais ça va vite tourner en usine à gaz :S

      Par contre, du coup, je vois ce que tu veux faire 😉 et c'est prévu pour bientot 😉 au passage à la V2 de Screenscraper on pourra dl les picto (monochrome ou couleur) des genres, langues, régions, nb joueurs, classifications, compagnies,....

      @Ramstatlon

      oups désolé ^^

      Clean your Romset with Universal ROM Cleaner
      Scrape your Romset with Universal XML Scraper

      1 Reply Last reply Reply Quote 0
      • DarkMatter
        DarkMatter last edited by DarkMatter

        I posted on the old V1 forum, and recently found this V2 one, which is the version of the scraper I'm using so Ill post again with some added info.

        First of all thanks for the tutorial.

        I'm able to run the scraper, and it finds most of the roms 🙂 I went and checked \RECALBOX\share\roms\lynx and I see the downloaded_images folder with the game images, and there is a gameslist.xml file. However when I checked the system the images do not show by any of the games. I tried a restart, and still no luck.

        I'm at a loss at how to proceed. I believe when it says "kill emulation station" before scraping that isn't working b/c the frontend is still loaded and showing on the TV screen in the other room while scraping occurs? I'm not familiar with using SecureShell, but I simply connect via network share.

        Edit: I deleted the downloaded_images folder, and gameslist.xml. Ran XML Scraper V2 selected RecalBox v4 (MIX) this time instead of reg so I could use boxart with image. Scraped 82/84 Lynx roms and downloaded_images folder had the right images with box art this time. However, once again no box art is shown in emulation station.

        1 Reply Last reply Reply Quote 0
        • stamstamstam
          stamstamstam last edited by

          This post is deleted!
          1 Reply Last reply Reply Quote 0
          • stamstamstam
            stamstamstam last edited by

            Bonjour,
            J'ai un problème avec le scrape de roms psx. J'utilise les .pbp d'emu^paradize, lorsque je lance le scrap, le soft me propose de killer emulstation puis plus rien, 30 mn plus tard toujours rien.

            Plus tôt je n'étais capable d'ouvrir le soft a cause de "fatal error, problem connecting to database", est-ce lié?
            En tout cas il n'a pas l'air de voir les roms ou le dossier, qui est pourtant tout a fait accessible à l'endroit standard.
            Le soft plante car je suis obligé de le fermer avec le gestionnaire des taches.
            J'utilise windows 7 64 pro.
            Merci d'avance pour ton aide.

            1 Reply Last reply Reply Quote 0
            • screech
              screech last edited by

              Hello Everyone.

              Sorry for the problem you can have with UXS and Screenscraper.
              For the new year we are migrating server to a new big one.
              In the main time, we are migrating screenscraper database to V2. So lot's of new things are coming.
              Thank you to be patient, it's a matter of day (hour ?)...

              Bonjour tous le monde,

              Désolé pour les problèmes que vous pouvez rencontrer actuellement avec UXS et Screenscraper.
              Pour la nouvelle année nous migrons de serveur et passant sur un nouveau Dédié beaucoup plus performant.
              En même temps, nous faisons évoluer le site et la BDD de Screenscraper en V2.
              Donc plein de nouvelles choses qui arrivent.

              Merci d’être patient, il ne s'agit que d'une question de jours (heures ?).

              Again we want to thanks all of you who help us participating to the BDD and with some tipee or patreon donation. Have an happy christmas and an happy new year.

              Encore une fois, nous remercions tous ceux qui nous aide en participant à la BDD et financièrement avec Tipee et Patreon. Joyeux noël et bonne année..

              Clean your Romset with Universal ROM Cleaner
              Scrape your Romset with Universal XML Scraper

              stamstamstam 1 Reply Last reply Reply Quote 0
              • stamstamstam
                stamstamstam @screech last edited by

                @screech Ceci explique cela, merci d'avoir pris le temps d'expliquer!

                1 Reply Last reply Reply Quote 0
                • stamstamstam
                  stamstamstam last edited by

                  Est-ce moi ou est-ce que cela n'est toujours pas fonctionnel?
                  Merci.

                  1 Reply Last reply Reply Quote 0
                  • rockaddicted
                    rockaddicted last edited by

                    Pas si simple ce genre de migration & upgrade ... ça prend du temps 😉
                    Soyez patient et laissez la team screenscraper bosser tranquillement.

                    Recalbox V4.1.0 - RPI3 OC - Xbox360 wireless
                    Wiki ENG : https://github.com/recalbox/recalbox-os/wiki/Mini-How-To-(EN)
                    Wiki FR : https://github.com/recalbox/recalbox-os/wiki/Mini-How-To-(FR)

                    Don't forget to upvote messages if it has been useful ;)

                    1 Reply Last reply Reply Quote 0
                    • Med27
                      Med27 last edited by

                      Bonsoir depuis ce matin je scrape avec XML scraper j ai une carte 64go avec 8000 jeux environ et sa fait 9h que j ai lancé le scrape avec le tuto mais j ai la barre de avancement qui reste grise et en dessous c'est écrit hashing avec plein de chiffres et de lettres qui défile pouvait vous me dire si sa scrape bien ou pas

                      1 Reply Last reply Reply Quote 0
                      • Med27
                        Med27 last edited by

                        Bonjour mon ordinateur est toujours en train de lancer sceen scraper et j ai toujours pas la barre de progression verte elle reste grise juste le hashing qui défile et quelques fois une fenêtre qui s affiche en me disant qu elle n a pas pu vérifier le programme et me demande d exécuter merci de votre aide car je sais pas si il faut que j annule ou pas

                        1 Reply Last reply Reply Quote 0
                        • Kenshin57
                          Kenshin57 last edited by

                          Je pense que tu peux annuler, télécharger la dernière version et faire des test sur un seul émulateur ou tu n'a pas beaucoup de roms pour voir si cela fonctionne bien. Si c'est le cas tu peux scraper tout tes roms d'un coup 🙂

                          1 Reply Last reply Reply Quote 0
                          • paradadf
                            paradadf Staff last edited by

                            I just can't believe people are complaining about not being able to scrape after it has been explained in english and french that they are migrating the servers and this might take a while! Nobody is going to die because of not having scraped games for a couple of days, for God's sake! Just wait and stop complaining!
                            I'd love to see you so desperate when a game doesn't have any metadata so you run as fast as you can to add it to the database!

                            If your question was answered, please mark it as solved: Topic Tools -> Ask a question + Topic Tools -> Mark as Solved

                            1 Reply Last reply Reply Quote 0
                            • jofamilly13
                              jofamilly13 last edited by

                              salut est ce normal aujourd'hui avec la nouvelle version j'ai un message au demarrage de xml scraper v2 comme quoi j'ai un probleme de
                              connections a BDD.

                              1 Reply Last reply Reply Quote 0
                              • Kenshin57
                                Kenshin57 last edited by

                                J'ai toujours quelques roms que XLM scraper ne trouve pas alors que les données sont présente sur screenscraper.fr
                                Par exemple mes 6 jeux megaman sur nes ne sont pas trouvé. Je me demande si le problème vient du fait qu'il soit patché en fr ? Est-ce que ça modifie le CRC de la rom et c'est pour cela qu'ils sont introuvable ?

                                1 Reply Last reply Reply Quote 0
                                • acris
                                  acris last edited by

                                  @Kenshin57 oui ça modifie.
                                  Tu as surement un fichier missing.txt des jeux av leur crc non trouvé si oui le fournir.

                                  1 Reply Last reply Reply Quote 0
                                  • Kenshin57
                                    Kenshin57 last edited by Kenshin57

                                    Effectivement !

                                    Voilà le fichier .txt
                                    Castlevania 3 (Patch FR).nes 12C7DC93 393 232 17:28.00 2005-08-19 9070298405E31C74CED98723ECF81093
                                    Dragon Warrior (F).NES 560F98C9 82 064 23:11.00 2011-04-06 6486F6B3714A723EEBFEB25AB9A6CBF4
                                    Dragon Warrior 3 (F).nes 029C4C40 524 304 23:11.00 2011-04-06 DACD6987D59A3F08AC8DEF81AD1B6572
                                    FamicomWarsFr.nes FACC5661 196 624 23:55.00 2016-10-05 2F3B5979FA709E86CE1B177FFF0BF48D
                                    Final Fantasy 1.nes C0D54AD6 262 288 22:25.00 2010-11-06 5026E422664A02D1AEBAF4E03217971F
                                    Final Fantasy 3 FR .nes 833B3697 524 304 11:24.00 2011-08-30 A8C9CFFE5083374DAEDA63AE653D5A32
                                    Final Fantasy II.nes 6470828A 262 160 08:51.00 2011-10-27 69E431853AF7696D0FDADDE67C545CBA
                                    Fire Emblem (English).nes 6EA742F1 393 232 17:56.00 2013-05-12 88103BE3835EF95FF7B69A2D970243D8
                                    Mega Man (U) [T+Fre_Terminus].nes 2DE7FC3B 131 088 12:33.00 2003-10-11 1233E25B2507A151FCF726DC75336390
                                    Mega Man 2 (U) [T+Fre1.0].nes 85BA447C 262 160 17:01.00 2000-06-20 50561E75C0933BBD15C2BE189B2689D2
                                    Megaman 3 (Patch FR).nes A2C216B7 393 232 12:17.00 2014-01-14 F0F7152ADF47D951C489A6F0713244F2
                                    Megaman 4 (Patch FR).nes B13020CF 524 304 12:21.00 2014-01-14 F7AFF7D36D67CD332159B53C6E51B86F
                                    Megaman 5 (Patch FR).nes 8C9FA4E3 524 304 12:25.00 2014-01-14 8542A74FA60F11B817314192FE460B5E
                                    Megaman VI (Patch FR).nes 94BB044E 524 304 12:30.00 2014-01-14 572D0B798F0B5B116A2C8E1719BCA913
                                    Metroid.nes 29BA882B 131 088 22:25.00 2010-11-09 6BF97A32C42F07D3BB23A5FB3F82DEA7
                                    Mother.nes 60B22741 524 304 11:30.00 2010-11-06 9D5612866CE29734FC31F9511FD609AB
                                    Tecmo Bowl.nes B609E318 262 160 19:57.00 2000-06-23 CAE67CA584AB77A95404358461794AC6
                                    Tetris.nes 6C538829 262 160 17:10.00 2013-06-25 E4139CEC621F7E40468A29B18F28C532

                                    Du coup il y a moyen de contourner le problème pour qu'il scrape quand même les roms patché ?

                                    1 Reply Last reply Reply Quote 0
                                    • courte
                                      courte last edited by

                                      A mon avis le probleme de rom patché c'est juste parce que la region de la rom de ne doit pas etre renseigner sur Screenscraper du moins je pense. Screech repondra mieux que moi mais ça me semble plausible.

                                      1 Reply Last reply Reply Quote 0
                                      • spriggan59
                                        spriggan59 last edited by

                                        il faut renommer tes roms comme sur le site screenscrapper exemple pour final fantasy 1 en Final Fantasy (USA).nes ou Final Fantasy.nes les nom sont en fin de liste

                                        Avalokitesvara 1 Reply Last reply Reply Quote 0
                                        • kevinnash
                                          kevinnash last edited by

                                          Non, il ne faut pas renommer les roms c'est inutile.

                                          Screenscraper utilise le hash de la rom pour la correspondance, ce qui est bien mieux, quelque soit le nom, la hash sera identique.

                                          Les hash des roms de Kenshin57 ne sont pas présents sur Screenscraper ( j'ai vérifié pour Metroid par exemple ), comme c'est souvent le cas avec les roms patchés, le patch modifiant le hash.

                                          Dans ce cas, envoie ton missing.txt à screech afin qu'il ajoute tes roms à la BDD Screenscraper, tu devras peut-être ensuite les associer au bon jeu nes sur Screenscraper.

                                          Ensuite le scrap avec UXMLS fonctionnera 😉

                                          1 Reply Last reply Reply Quote 0
                                          • Avalokitesvara
                                            Avalokitesvara @spriggan59 last edited by Avalokitesvara

                                            @spriggan59

                                            Bonjour à vous !

                                            Je me permet de poster ici car je rencontre un problème équivalent. J'ai posté sur le forum mon problème :
                                            https://forum.recalbox.com/topic/5548/problème-de-scraping/3
                                            Pour la faire courte, j'ai mes trois Castlevania sur NES en version traduite. Au début je ne parvenait pas les scraper, je les aient donc renommées. Du coup le premier marche mais le II et le III refusent de se scraper. J'ai renommer en d'autres noms, j'ai vérifier le poids, tout correspond à ce qui est indiqué sur ScreenScraper. J'ai du mal à comprendre où j'aurais pu commettre une erreur. De plus, j'ai constater le même problème pour des jeux N64, pour des roms non-traduites, donc originales. idem, j'ai renommer en fonction de la liste indiqué dans la fiche des jeux ScreenScraper mais rien n'y fait.

                                            Mon fichier missing :

                                            Castlevania II - Simon's Quest (USA).nes CBD047F6 262 160 07:46.00 2016-12-21 7F23C568B18CFFF967662C69FE395A91
                                            Castlevania III - Dracula's Curse (USA).nes 12C7DC93 393 232 07:46.00 2016-12-21 9070298405E31C74CED98723ECF81093

                                            Merci d'avance de votre aide, et bonnes fêtes à tous et à toutes 🙂 !

                                            EDIT : Je viens de lire le message de @kevinnash, posté trois minutes avant le mien ! Comment fait-on pour envoyer le hash à Screech ? Je ne connais pas ce monsieur, et je suis nouveau dans la communauté RecalBox.

                                            Merci à vous.

                                            1 Reply Last reply Reply Quote 0
                                            • First post
                                              Last post

                                            Want to support us ?

                                            64
                                            Online

                                            99.6k
                                            Users

                                            28.1k
                                            Topics

                                            187.1k
                                            Posts

                                            Copyright © 2021 recalbox.com