[SOFT] Universal XML Scraper V2

[kevinnash]

@voljega said in [SOFT] Universal XML Scraper V2:

Enfin mon commentaire concernait plus le futur des bases de données de scraping du jeu vidéo en général que screenscraper en particulier, sans recapture en bien meilleur qualité des medias (hors screenshots) ils seront de plus en plus pixellisés / moches sur des télés à la résolution de plus en plus grande...

La résolution de la télé n'est absolument pas le problème puisqu'elle upscale pour remplir l'écran.

C'est la taille de la télé le problème sur un écran de 65 pouces comme le mien tu auras la même pixellisation, que la télé soit en 4K ou en full HD.

[voljega]

@kevinnash non hein le résultat d'un upscaling d'une image de 500 par 500 censé s'afficher sur 3/4 de l'écran vers du 4k ou du 1080p ça donne pas la même chose c'est pas de la magie.

Dans le cas de la 4K t'auras forcément 2* plus de pixels interpolés en hauteur que dans le cas de la 1080p. Pareil en largeur, donc 4* plus au final

Que la différence entre les deux ne soit pas hyper visible ok mais qu'est ce que ça va être dans 10 ans ....

[kevinnash]

Tu as tort, ça donne exactement la même chose à taille d'écran égale, l'upscale multiplie simplement les pixels.

A l'inverse si ton écran était tout petit ton image ne serait pas pixellisée, que l'écran soit full HD ou 4K.

Mais je ne vais pas m'étendre, ce n'est pas le sujet.

[screech]

Bon désolé, faut que j’arrête de répondre le matin au réveil sans café dans les veines à la relecture de mon post, je suis un peu "virulent"

Donc si je reprend : La qualité des médias de ScreenScraper (et donc d'UXS) dépend énormément (voir exclusivement) des médias proposés par les utilisateurs et ceux récupérés à droite à gauche...

Notre rêve serait de trouver un (ou plusieurs) énorme collectionneur prêt à scanner en très haute définition leur(s) collection(s) complète de covers.
Le problème c'est qu'on en connait pas

On a quand même la chance d'avoir certains "inscrits" qui nous scan leur propre média. En règle général on essaie de récupérer ce qu'il y a de mieux sur le net. Mais concrètement ce n'est pas toujours possible... Et si la qualité d'un média est pourris, tous le monde à la possibilité d'ajouter un media de meilleur qualité

Après, un autre point à prendre en compte c'est l'espace de stockage...
Wheel : 33367
Screenshot : 60850
Vidéo : 27015
Texture Boitier : 26831
Texture Support : 9212
Marquee : 2429
ScreenMarquee : 18739

Si on avait tous en 2400x2400 on arriverait vite en saturation de stockage

mais (spoiler alerte) on change bientot de serveur pour encore plus performant et avec beaucoup plus d'espace

Enfin, en fonction des systèmes, une covers complète c'est autour de 1000x700. Ce qui est tout de même très raisonnable, même sur un écran Full HD (quelque soit sa taille ) bon sur du 4K, faut faire un x2 en interpolation, mais comme je disais (pas forcement gentiment ) :
"Qui joue à des jeux qui ont une résolution d'origine de 160x144 sur un écran 4K ?????"
Si c'est le cas, revendez votre télé 4K et achetez un énorme écran CRT ^^ ça passera mieux
(J'imagine effectivement dans 10 ans : "héhé, j'ai ma télé de 16m sur 9 en 360K, la cover pareil, j'ai fait un agrandissement format affiche de cinéma d'une boite en carton qui faisait 12 cm sur 12 à l'epoque. Le jeu ? oui oui, c'est le petit carré de 3 cm sur 3 au milieu la... je joue en pixel perfect dans la résolution d'origine, je suis un puriste moi..." )

Encore une fois le débat est un peu différent entre : "les médias sont dans une résolution trop faible." et "est-ce vraiment pertinent qu'ils soient dans une résolution plus importante ?"

à titre d'exemple (parmi des milliers) voila le genre de cover présente sur ScreenScraper :
https://www.screenscraper.fr/medias/114/106865/box-texture(jp).png

Il s'agit d'un scan d'original d'un de nos membres. (Merci Biblo)

(bon après on a aussi des trucs affreux, et on limite au maximum, il n'y a vraiment que pour les trucs introuvable qu'on garde... mais à la limite on peut lancer un sondage : "vous préférez avoir un scrape 'complet' mais avec quelques trucs moches" ou "rien du tout" ?)

Et tant qu'on est dans les stats :
Voici mes propres stats de "validation" sur Screenscraper :
Media "modérés" : 34650 Validé : 24212 Refusé : 10353
(ça te donne une petite idée de la modération effectuée sur ScreenScraper )

Voila, donc en gros : on fait au mieux et si c'est pas assez viendez nous aider ^^

[DacK]

@screech said in [SOFT] Universal XML Scraper V2:

à titre d'exemple (parmi des milliers) voila le genre de cover présente sur ScreenScraper :
https://www.screenscraper.fr/medias/114/106865/box-texture(jp).png

Oh punaise ! J'ai encore la VHS du 1er ep en animé... désolé pour le HS, mais j'avais adoré ce truc quand j'étais un jeunot...

Pour revenir au sujet, la bdd reste très vivante, le temps fera le reste... L'idéal serait, en effet, des images hi-res (c'est le graphiste qui parle) avec un traitement à la demande, mais ça reste un travail considérable...
A titre perso, je préfère une base complète à une base qui n'a que du hi-res mais moins complète.

[voljega]

@screech merci pour les précisions.

Après le stockage devoent un problème côté recalbox aussi par exemple mon set cpc les jaquettes et les manuels prennent beaucoup plus de place que les roms elles-mêmes

[Archangel54]

@screech Bonjour et merci pour ton logiciel, je n'arrive plus à m'en passer...

Voici un cas sur lequel je suis tombé et qui ne doit pas être isolé à mon avis :
Le scrappe du jeu "World Series Baseball '95" sur Megadrive me donne comme genre "Action". Sur le site screenscraper.fr, il y a 2 genres renseignés : "Action" et "Sport".

Donc ma question est la suivante : serait-il possible avec UXS de "récupérer" et, pourquoi pas combiner, tous les genres disponibles pour un jeu ?

Cordialement, Mickaël.

[Grosj]

Bonjour,

Pour info je n'arrivais pas a lancer une recherche dans Universal Xml Scraper V2 pour l'amiga. J'ai juste rajouté l’extension dans édition/ Configuration générale/ fichiers scrapés: *.adf;

Voilà si ça peut aider.

[gothrek]

Hi man,
maybe u just answer before, but i dont found it.

There is a possibility to scrape only 1 time a multi disc game, without editing 1by1.

tks

[chris256]

Bonjour à tous !

Il y a des jeux amiga (WHDLoad) qui n'étaient pas reconnus par Universal XML Scraper. Du coup, je suis allé vérifié sur screenscraper.fr et j'ai renommé en fonction. Par contre, certains sont récalcitrants et ne passent pas. J'ai par exemple le fichier Astatin (Europe).uae qui n'est pas retrouvé (il est dans le fichier "_Amiga_missing.txt") alors que c'est bien un nom qui existe sur Screenscraper.fr (lien ici). Et ce n'est pas un cas isolé. Est-ce que quelqu'un a une idée de ce qui se passe ?

Merci !!

[chris256]

@chris256 Bon j'ai trouvé. Souci de mon côté uniquement... Ne tenez pas compte du message...

[noda]

Salut @screech et merci pour ton logiciel!

J'ai quelques isos PSX qui restent en missing, serait-ce possible de les rajouter à la DB? Merci!

B****y Roar 2 - Bringer of the New Age (USA).pbp                          338 070 067    13:18.00 2014-07-12    22C5F557E7E0CC548E2F7D03794A249B
Colin McRae Rally 2.0 (Europe).pbp                                        403 029 635    11:42.00 2014-07-12    385DC7CF12769D05EE5ABF67025E45A5
Future Cop L.A.P.D (USA).pbp                                              288 029 619    12:56.00 2017-05-14    9C95685AF7191E5E559C8C67E8C9857D
Little Big Adventure - Twinsen's Adventure (Europe).pbp                   534 903 020    23:11.00 2017-05-13    878DABEFDA779797FE26E46EB7EF610E
Pandemonium! 2 (USA).pbp                                                  246 448 707    20:22.00 2014-08-15    DD155055D9F54B0A8B4367EE82903F1A
Resident Evil - Directors Cut (USA).pbp                                   362 931 635    19:48.00 2014-07-12    43E144903716F04BF56C797C95B9ADCF
Rollcage - Stage II (Europe).pbp                                          547 398 252    13:38.00 2017-05-14    5C67B48365417E56C0646044A26087E4
V-Rally 2 (USA).pbp                                                       500 511 651    20:17.00 2014-08-15    019D89E3AB4C3E4737CAA07C1008ABAF
Wipeout 3 - Special Edition (Europe).pbp                                  606 919 907    12:54.00 2017-05-14    C5770D7DBAB5FF869BB75BFFC67DC23B

[giiiantretro]

Merci Screech pour votre investissement. UXS est tellement bien et je rêverai d'une fusion UXS et Skraper. Prêt à filer un coup de main en trad si nécessaire (anglais, espagnol OK + italien version scolaire et avec les mains).
Faites signe si je peux aider de quelque façon que ce soit:

• ici

• sur screen scraper

• sur UXS
  A plus

[Leatherface]

Bonjour,

Est-il possible de rajouter SSRecalbox41v2 dans le programme ? il n'y a que SSRecalbox41v1 et sur le site screenscraper il y a bien une version 2 avec la cartouche ajoutée sur l'image. Je voudrai rajouter quelque roms au pack Emulga et ils utilisent la v2 avec la cartouche en plus sur l'image. Merci

[Legendsofrock]

Salut Screech, j'ai scrapper mes rom de super nintendo hier, 3429 roms exactement, bon tous c'est bien passer juste une chose plus de 24H pour cela c'est normal avec une connexion fibre optique et le disque dur brancher directement sur le pc en usb 3?

[Murdock]

Bonjour @Legendsofrock, oui cela parait normal vu le nombre de roms, mais c est surtout parce que tu n as qu un thread sur ton compte.
Si tu participes au site screenscraper, cela permettra de te débloquer d autres thread (pour récompenser les participants). Donc hésite pas a participer ta vitesse de scrap augmentera !

[Legendsofrock]

@murdock j'ai fais un don de 10€ jeudi matin mais je n'ai toujours pas eu les threads supplémentaire d'activer, j'ai bien donner mon ID.

[Murdock]

Je n'ai jamais fait attention au système de dons donc je viens de regarder, normalement, ça devrait te débloquer 5 threads. Attends un peu et si jamais tu n'as toujours rien après quelques jours, essaies de contacter un membre de leur staff

[drakanishta35]

Bonjour à tous !!
Cela va faire plus d'un an que je tourne sous recalbox sur pi3, et j'ai utiliser Universal XML scraper nickel tout bien.
Je viens de me lancer sur la version PC de recalbox, après avoir préparer l'ensemble des roms, et je suis passer à Universal XML scraper pour scraper tout ça, j'ai utiliser le visuel arcade Moon classique de base, et lorsque j'ai relancer je me suis rendu compte que le visuel était vraiment trop petit, du coup j'ai viré le fichier Gamelist.xml de chaque dossier rom et relancer un scrape avec une nouvelle version du visuel arcade Moon zoom et après avoir finit je relance et là mauvaise surprise rien n'a changé.
J'ai tenter avec d'autre visuel et c'est toujours la première version qui revient....
Est ce que quelqu'un aurait une idée ou bien une solution peut être,je ne trouve pas d'informations nul part et je commence à désespéré....

[Pegoncology]

Salut @screech
Le scrape 3 images sur Recalbox est différent de celui du logiciel (screenshot écran arrondi, boite et logo plus centraux). Perso je préfère celui du logiciel qui permet de mieux voir le screenshot. Par contre avec le logiciel j'ai parfois pas mal de manquants que je comble avec Recalbox.
Est-il possible d'avoir sur Recalbox exactement le même résultat 3 images que sur le logiciel ?

Merci