[SOFT] Universal XML Scraper V2

[stamstamstam]

Bonjour,
J'ai un problème avec le scrape de roms psx. J'utilise les .pbp d'emu^paradize, lorsque je lance le scrap, le soft me propose de killer emulstation puis plus rien, 30 mn plus tard toujours rien.

Plus tôt je n'étais capable d'ouvrir le soft a cause de "fatal error, problem connecting to database", est-ce lié?
En tout cas il n'a pas l'air de voir les roms ou le dossier, qui est pourtant tout a fait accessible à l'endroit standard.
Le soft plante car je suis obligé de le fermer avec le gestionnaire des taches.
J'utilise windows 7 64 pro.
Merci d'avance pour ton aide.

[screech]

Hello Everyone.

Sorry for the problem you can have with UXS and Screenscraper.
For the new year we are migrating server to a new big one.
In the main time, we are migrating screenscraper database to V2. So lot's of new things are coming.
Thank you to be patient, it's a matter of day (hour ?)...

Bonjour tous le monde,

Désolé pour les problèmes que vous pouvez rencontrer actuellement avec UXS et Screenscraper.
Pour la nouvelle année nous migrons de serveur et passant sur un nouveau Dédié beaucoup plus performant.
En même temps, nous faisons évoluer le site et la BDD de Screenscraper en V2.
Donc plein de nouvelles choses qui arrivent.

Merci d’être patient, il ne s'agit que d'une question de jours (heures ?).

Again we want to thanks all of you who help us participating to the BDD and with some tipee or patreon donation. Have an happy christmas and an happy new year.

Encore une fois, nous remercions tous ceux qui nous aide en participant à la BDD et financièrement avec Tipee et Patreon. Joyeux noël et bonne année..

[stamstamstam]

@screech Ceci explique cela, merci d'avoir pris le temps d'expliquer!

[stamstamstam]

Est-ce moi ou est-ce que cela n'est toujours pas fonctionnel?
Merci.

[rockaddicted]

Pas si simple ce genre de migration & upgrade ... ça prend du temps
Soyez patient et laissez la team screenscraper bosser tranquillement.

[Med27]

Bonsoir depuis ce matin je scrape avec XML scraper j ai une carte 64go avec 8000 jeux environ et sa fait 9h que j ai lancé le scrape avec le tuto mais j ai la barre de avancement qui reste grise et en dessous c'est écrit hashing avec plein de chiffres et de lettres qui défile pouvait vous me dire si sa scrape bien ou pas

[Med27]

Bonjour mon ordinateur est toujours en train de lancer sceen scraper et j ai toujours pas la barre de progression verte elle reste grise juste le hashing qui défile et quelques fois une fenêtre qui s affiche en me disant qu elle n a pas pu vérifier le programme et me demande d exécuter merci de votre aide car je sais pas si il faut que j annule ou pas

[Kenshin57]

Je pense que tu peux annuler, télécharger la dernière version et faire des test sur un seul émulateur ou tu n'a pas beaucoup de roms pour voir si cela fonctionne bien. Si c'est le cas tu peux scraper tout tes roms d'un coup

[paradadf]

I just can't believe people are complaining about not being able to scrape after it has been explained in english and french that they are migrating the servers and this might take a while! Nobody is going to die because of not having scraped games for a couple of days, for God's sake! Just wait and stop complaining!
I'd love to see you so desperate when a game doesn't have any metadata so you run as fast as you can to add it to the database!

[jofamilly13]

salut est ce normal aujourd'hui avec la nouvelle version j'ai un message au demarrage de xml scraper v2 comme quoi j'ai un probleme de
connections a BDD.

[Kenshin57]

J'ai toujours quelques roms que XLM scraper ne trouve pas alors que les données sont présente sur screenscraper.fr
Par exemple mes 6 jeux megaman sur nes ne sont pas trouvé. Je me demande si le problème vient du fait qu'il soit patché en fr ? Est-ce que ça modifie le CRC de la rom et c'est pour cela qu'ils sont introuvable ?

[acris]

@Kenshin57 oui ça modifie.
Tu as surement un fichier missing.txt des jeux av leur crc non trouvé si oui le fournir.

[Kenshin57]

Effectivement !

Voilà le fichier .txt
Castlevania 3 (Patch FR).nes 12C7DC93 393 232 17:28.00 2005-08-19 9070298405E31C74CED98723ECF81093
Dragon Warrior (F).NES 560F98C9 82 064 23:11.00 2011-04-06 6486F6B3714A723EEBFEB25AB9A6CBF4
Dragon Warrior 3 (F).nes 029C4C40 524 304 23:11.00 2011-04-06 DACD6987D59A3F08AC8DEF81AD1B6572
FamicomWarsFr.nes FACC5661 196 624 23:55.00 2016-10-05 2F3B5979FA709E86CE1B177FFF0BF48D
Final Fantasy 1.nes C0D54AD6 262 288 22:25.00 2010-11-06 5026E422664A02D1AEBAF4E03217971F
Final Fantasy 3 FR .nes 833B3697 524 304 11:24.00 2011-08-30 A8C9CFFE5083374DAEDA63AE653D5A32
Final Fantasy II.nes 6470828A 262 160 08:51.00 2011-10-27 69E431853AF7696D0FDADDE67C545CBA
Fire Emblem (English).nes 6EA742F1 393 232 17:56.00 2013-05-12 88103BE3835EF95FF7B69A2D970243D8
Mega Man (U) [T+Fre_Terminus].nes 2DE7FC3B 131 088 12:33.00 2003-10-11 1233E25B2507A151FCF726DC75336390
Mega Man 2 (U) [T+Fre1.0].nes 85BA447C 262 160 17:01.00 2000-06-20 50561E75C0933BBD15C2BE189B2689D2
Megaman 3 (Patch FR).nes A2C216B7 393 232 12:17.00 2014-01-14 F0F7152ADF47D951C489A6F0713244F2
Megaman 4 (Patch FR).nes B13020CF 524 304 12:21.00 2014-01-14 F7AFF7D36D67CD332159B53C6E51B86F
Megaman 5 (Patch FR).nes 8C9FA4E3 524 304 12:25.00 2014-01-14 8542A74FA60F11B817314192FE460B5E
Megaman VI (Patch FR).nes 94BB044E 524 304 12:30.00 2014-01-14 572D0B798F0B5B116A2C8E1719BCA913
Metroid.nes 29BA882B 131 088 22:25.00 2010-11-09 6BF97A32C42F07D3BB23A5FB3F82DEA7
Mother.nes 60B22741 524 304 11:30.00 2010-11-06 9D5612866CE29734FC31F9511FD609AB
Tecmo Bowl.nes B609E318 262 160 19:57.00 2000-06-23 CAE67CA584AB77A95404358461794AC6
Tetris.nes 6C538829 262 160 17:10.00 2013-06-25 E4139CEC621F7E40468A29B18F28C532

Du coup il y a moyen de contourner le problème pour qu'il scrape quand même les roms patché ?

[courte]

A mon avis le probleme de rom patché c'est juste parce que la region de la rom de ne doit pas etre renseigner sur Screenscraper du moins je pense. Screech repondra mieux que moi mais ça me semble plausible.

[spriggan59]

il faut renommer tes roms comme sur le site screenscrapper exemple pour final fantasy 1 en Final Fantasy (USA).nes ou Final Fantasy.nes les nom sont en fin de liste

[kevinnash]

Non, il ne faut pas renommer les roms c'est inutile.

Screenscraper utilise le hash de la rom pour la correspondance, ce qui est bien mieux, quelque soit le nom, la hash sera identique.

Les hash des roms de Kenshin57 ne sont pas présents sur Screenscraper ( j'ai vérifié pour Metroid par exemple ), comme c'est souvent le cas avec les roms patchés, le patch modifiant le hash.

Dans ce cas, envoie ton missing.txt à screech afin qu'il ajoute tes roms à la BDD Screenscraper, tu devras peut-être ensuite les associer au bon jeu nes sur Screenscraper.

Ensuite le scrap avec UXMLS fonctionnera

[Avalokitesvara]

@spriggan59

Bonjour à vous !

Je me permet de poster ici car je rencontre un problème équivalent. J'ai posté sur le forum mon problème :
https://forum.recalbox.com/topic/5548/problème-de-scraping/3
Pour la faire courte, j'ai mes trois Castlevania sur NES en version traduite. Au début je ne parvenait pas les scraper, je les aient donc renommées. Du coup le premier marche mais le II et le III refusent de se scraper. J'ai renommer en d'autres noms, j'ai vérifier le poids, tout correspond à ce qui est indiqué sur ScreenScraper. J'ai du mal à comprendre où j'aurais pu commettre une erreur. De plus, j'ai constater le même problème pour des jeux N64, pour des roms non-traduites, donc originales. idem, j'ai renommer en fonction de la liste indiqué dans la fiche des jeux ScreenScraper mais rien n'y fait.

Mon fichier missing :

Castlevania II - Simon's Quest (USA).nes CBD047F6 262 160 07:46.00 2016-12-21 7F23C568B18CFFF967662C69FE395A91
Castlevania III - Dracula's Curse (USA).nes 12C7DC93 393 232 07:46.00 2016-12-21 9070298405E31C74CED98723ECF81093

Merci d'avance de votre aide, et bonnes fêtes à tous et à toutes !

EDIT : Je viens de lire le message de @kevinnash, posté trois minutes avant le mien ! Comment fait-on pour envoyer le hash à Screech ? Je ne connais pas ce monsieur, et je suis nouveau dans la communauté RecalBox.

Merci à vous.

[screech]

Bonjour à tous,

désolé, je n'ai pas été très présent ces derniers jours

Alors :
Pour les message d'erreur en tout genre (timeout ou autre) ça devrait etre rentré dans l'ordre (c'etait du à la bascule, désolé)

Pour les rom Patché, je vous conseil de trouver des roms "prépatchés" et de ne pas les renommer.
Si elles ne sont trouvées, vous pouvez me faire une http://pastebin.com/ de vos fichiers missing (ne pas faire un copier coller ici, sinon je ne pourrais pas les exploiter.. ça casse le format ^^)

(n'oubliez pas que meme si vous me les envoyez et que je les ajoutes, il faudra encore assigner ces nouvelles roms orphelines aux jeux correspondants )

Enfin pour les problemes de SSH, je crois que j'ai trouvé une nouvelle version sort sous peu.

[stamstamstam]

Bonjour,
Merci pour cette mise à jour et tout ce travail!
Pour ma part, le programme plante lorsque j'essaye de scrapper des roms PSX (hashing de la 1ère rom).
Est-ce que ça vient de mon côté?
Merci.

[screech]

@Avalokitesvara
En fait comme ton Hash n'est pas trouvé il doit essayer avec le nom. Et dans le nom de tes fichiers, il y a une apostrophe...

C'est dommage que tu les ai renommé, j'aurais bien aimé que tu m'envois ton fichier missing pour les ajouter (ou alors il faudrait retrouver le nom d'origine de la rom )

@stamstamstam en fait il ne plante pas.. Il est juste super lent ^^
Essaye la partie "expérimentale" que j'ai ajouté sur la 2.0.0.9

Dans ton fichier UXS-config.ini tu ajoutes à la fin :

$vHashOnPI=1
$vRootPathOnPI=/recalbox/share/roms

avec ça, les hash seront fait par le PI et pas sur ton PC ça "peut" mieux marcher ^^
(attention, c'est expérimental ^^)