[SOFT] Universal XML Scraper V2

[Ramstatlon]

@screech
As-tu remarque que lorsque une date est mentionne sans le jour precis (ex: 1994 ou juin 1994 au lieu de 25-06-1994) aucune date n est remontee du tout dans le Gamelist.xml.
Idem si la sortie jp et sortie us sons mentionnee entierement mais que la sortie ue est sans la date, aucune valeur n est du coup remontee.

On perd donc de l info de ma base.

[akh150]

Salut à tous,

Suis-je le seul qui scrape avec une moyenne de 49 sec par rom?
J'ai la fibre pourtant.
Dois-je faire une manipulation particulière pour accélérer le scrape.

Merci d'avance pour vos réponses.

[kevinnash]

Hello, tu peux créer un compte sur screenscraper.fr
En participant là-bas ou en faisant une donation, tu obtiens des threads supplémentaires pour UXMLS

[akh150]

@kevinnash j'ai déjà créé un compte, malheureusement je n'ai pas le temps de pouvoir prêter main forte (ce n'est pas l'envie qui manque). Avant il y avait 2 threads "gratuits" mais plus maintenant. Faudrait que je vois pour une donation.

[kevinnash]

Il te reste la possibilité de la donation

[choupisaumon]

Bonjour je ne sais pas si quelqu'un connais la solution : moi j'utilise universal xlm scraper qui est tres bien pour les jaquettes sauf pour celles de la pc engine cd , alors dans les anciennes versions XLM les jeux paraissai trop lourd et il s'arretai en jeu mais depuis la derniere version ça passe mais meme s'il arrive a trouver quelques jeux ils n ont jamais d'image de la jaquette et pourtant je sais que c'est possible puisque il y a une personnes qui envoi des torrents de recalbox sur xxxxxx et lui a reussi a en trouver pour les quelque jeux pc engine cd qu il envoi en telechargement mais vu que moi je les ai tous les jeux j'aimerai trop arriver a trouver leurs jaquettes complettes car c'est le seul truc qui me manque sur mon recalbox

[screech]

@choupisaumon essaye ça : https://github.com/Universal-Rom-Tools/Universal-XML-Scraper/wiki/ISO-Scrape-Freeze-or-are-very-long
Et si ça ne marche pas, essaye de décocher la "sélection automatique du système" dans la config générale pour préciser la plateforme que tu scrape.

@akh150 Effectivement, ça semble plutôt "lent" mais il te faut vraiment "peu" de proposition pour obtenir 2 Threads Supplémentaire (une simple traduction de synopsis de Anglais à FR ça se fait vite voir un syno depuis Wikipedia ;)... ça fait plaisir à tous le monde d'avoir plus de syno en FR, et en plus ça te file des threads )
On est sur un système "gagnant/gagnant" ceux qui participe scrape plus vite, et ça améliore la BDD pour tout le monde

@Ramstatlon effectivement, je n'avais jamais remarqué... je me le note pour corriger dans la prochaine version

@Larlouch normalement, le fait qu'ils soient merge ne devrait pas poser de problème (recherche par nom du fichier zip et si pas trouvé recherche à "l’intérieur" du zip... Par contre, de mémoire, les merge sont plutôt déconseillé sur RB (ou tu du moins pas très utile)

[Arckange84]

Lorsque je scrappe avec UXS v2 la balise <region> est toujours vide. Est-ce normal ?

[Ramstatlon]

@screech sans vouloir pousser, crois-tu qu il serais possible de l afficher jj/mm/aaaa au lieu de mm/jj/aaaa comme c est actuellement le cas.
Ou ca se decide dans le theme.xls?

[screech]

@Arckange84 non, ce n'est pas normal (mais ça dépend de la plateforme que tu scrape)
En toutes logiques, beaucoup de Roms ont l'information sur leur région. Malheureusement pas toute (Il est facile pour nous de dire que Mario(j).zip est la version jap, mais mario.zip.... Il faut avoir la rom avec le même CRC et "trouver" qu'elle région est concernée....)
N'hesite pas d'ailleurs à proposer directement sur http://www.screenscraper.fr/ les regions qui pourrait manquer

@Ramstatlon à ma connaissance, c'est même plus que thème dépendant, je crois que c'est emulationstation dépendant normalement UXS le mets dans un format "normal" pour qu'ES puisse le gérer... Mais il faut que je check (Il y a aussi un problème quand on a que l'année... c'est dans les bug que je dois corriger...)

[metra105]

Bonjour, j'ai un soucis avec XML v2 lorsque je veux scrapper tout les système j'ai une erreur line. Sa fonctionne bien avec une console uniquement. Pouvez vous m'aider svp.
Merci

[screech]

@metra105 oui, le scrape "tout système" est cassé... Il faut que je le répare ^^ désolé (tu peux néanmoins scraper les système 1 par 1 )

[metra105]

Ok par contre c'est normal que ce soit si long je met 2 heure pour 400 roms environs

[cotedeporc]

Salut @screech,

Je rencontre un petit bug avec l'ajout de texte.
Lorsque j'affiche le nom du jeu (balise: Data/jeu/nom), il me mange, quasiment 1 fois sur 2, le dernier caractère.

Dans le gamelist, pas de problème, le nom est complet. Le problème s'applique aléatoirement et non sur des roms précises.
Et il ne me semble pas avoir remarqué d'erreur dans les logs.

Merci!

[johnDoe_1]

@screech c'est normal que dans le dossier gamelist.xml que j'ai autant de <game />

J'ai scrape un dossier et dans mon gamelist.xml j'ai 134 lignes avec <game /> et aucunes descriptions, pourtant les images sont là et dans d'autres fichiers j'ai aussi une centaine de lignes avec <game />

[stamstamstam]

Le jeu DoDonPachi n'existe pas pour PS1, serait-il possible de l'ajouter?

[paradadf]

@stamstamstam
https://github.com/Universal-Rom-Tools/Universal-XML-Scraper/wiki/Rom-Missing-on-Screenscraper

[johnDoe_1]

C'est bizarre, j'ai renommé mes jeux PSX qui certains avaient des noms bizarres un truc beaucoup plus propre et Universal XML Scraper V2 ne semble pas trouver l'image alors qu'avant, aucun problème ...

ça serait super de rajouter une fonction pour que l'on scrape manuellement, exemple prenons : CTR : Crash Team Racing (qui avant, Universal XML Scraper V2 trouvait les informations et maintenant non)

La fonction serait de garder le dossier à scraper, pour l'exemple : PSX

Ensuite d'avoir une autre catégorie avec tous nos jeux de ce dossier qui sont listés, de choisir notre jeu, toujours dans l'exemple : CTR : Crash Team Racing

D'aller sur https://www.screenscraper.fr, de chercher notre jeu dans la section : JEUX

D'aller sur la fiche du jeu CTR : Crash Team Racing, copier coller l'URL https://www.screenscraper.fr/gameinfos.php?plateforme=57&gameid=19266 dans Universal XML Scraper V2 et le logiciel va chercher les informations de cette fiche pour le jeu que j'aurai au préalablement choisi tout en scrapant les informations de la page que je lui aurais attitrait

Après le logiciel télécharge l'image, les informations et les ajoutes dans le gamelist.xml sans effacer le gamelist.xml ou autre, simplement un ajout de rom ou ajout d'image

Je ne sais pas si tu vois l'idée @screech ? Tu en penses quoi ? Car là c'est un peu jouer au yoyo pour avoir le scrape

[screech]

@Genetik57 Le but, à terme, c'est qu'UXS ne fasse plus de recherche par "nom".
Le meilleur "unique ID" reste le hash du fichier. c'est fiable et permet un match à 100% sans erreur.
(Exemple : certains jeux peuvent etre en doublon avec des noms identiques mais ne sont pas du tout les memes... Je pense par exemple à Tetris ou il existe de nombreuse version avec des noms identiques mais pas du tout les meme jeux (sur Nes il existe 2 Tetris par exemple, un "officiel" Nintendo et un "non officiel" mais qui permet de jouer à 2, pourtant les 2 jeux portent le même nom))

Du coup, une gestion par "nom" de jeux n'est pas du tout recommandé.

Quand à un scrape de jeu "unique" par Id par exemple, ce n'est pas encore prévu

@stamstamstam j'ai plein d'import à faire je m'en occuppe ce matin

[OcEaN]

@screech said in [SOFT] Universal XML Scraper V2:

(Exemple : certains jeux peuvent etre en doublon avec des noms identiques mais ne sont pas du tout les memes... Je pense par exemple à Tetris ou il existe de nombreuse version avec des noms identiques mais pas du tout les meme jeux (sur Nes il existe 2 Tetris par exemple, un "officiel" Nintendo et un "non officiel" mais qui permet de jouer à 2, pourtant les 2 jeux portent le même nom))

Pourquoi ne pas lister tout les jeux qui correspondent a la recherche, avec un petit aperçu dans UXS, afin de choisir celui qu'on souhaite réellement scraper?