[SOFT] Universal XML Scraper - Scrappez vos roms depuis Windows (Scrape your roms from Windows)

[screech]

@naitreia I debbugged the Time Out... Now if you have a time Out it try to do the next rom and so on...

@sassa J'ai corrigé le fichier missing. Je ne sais pas pourquoi mais il y avait boulette sur sa génération, maintenant ça marche

@Nachtgarm MSX is now MSX and Start ES is added in the SSH menu

For every one, the Multilinguale integration in Screenscraper is huge now so there are the info in Universal XML Scraper V1.4.0.4

(Some modification : Name of the game, description, genre, date, etc... Are now in French, English, German, Portuguese, and Spanish... When it's in Screenscraper So don't hesitate to contribute in you own language... Translation of the interface of Screnscraper is in progress too ^^)

[naitreia]

Hi Screech,

here are the last lines from the error log after he says Database would be down:

[17:25:30] - ---------------------------------------------------------------------------------------
[17:25:30] - Calcul des Hash en : 0.02s
[17:25:30] - Recuperation des informations de la Rom no 2087 (CRC + SYSTEM)
[17:25:31] - --Recuperation des informations de la Rom no 2087 (CRC)
[17:25:31] - Recuperation des informations de la Rom no 2087 (FileName + SYSTEM)
[17:34:38] - ---------------------------------------------------------------------------------------
[17:34:38] - Debut de fusion des fichiers
[17:37:13] - Fin de fusion des fichiers en 155.31s
[17:37:13] - Bilan

[17:37:14] - Scrape Annule
[17:37:14] - Roms trouvees :2086 / 2086
[17:37:14] - Roms ajoutes :2086 / 2086
[17:37:14] - Temps moyen par Rom :6.801s
[17:37:14] - Temps Total :4h 8m 22s
[17:37:27] - Fermeture du Soft

Hope it helps you and you can fix it.

[screech]

Strange.. I see nothing anormal...
17:25:31 -> getting the last rom information
17:34:38 -> Fusionning every xml in one gamelist.xml
17:37:13 -> End of fusionning + calculate the "bilan"

The only thing strange is : [17:37:14] - Scrape Annule
who mean you canceled the scrape.

But no Timeout... (if it was one, you had a TimeOut Line in the log)

You had an error message ?

[naitreia]

Hi,

you can reproduce it by scraping round about 4-5 hours.
I think after 2k roms or so it will hang up.

What happens is, that the scrape ends and you get the error-message "Database are down" or something like this.

I tried it 3 times always the same result.

[naitreia]

Oh and im not canceled the scrape!
Message database are down coming and thats it.

[Duss]

Bonjour, j'ai un problème pour scraper la lynx et je ne trouve pas la solution.
Ca trouve toutes les roms mais ca ne scrape pas comme ci il n'y avais aucune base de donné pour la lynx alors que c'est quasi complet sur screenscraper ? Mes roms sont pourtant bien nommées et je n'ai ce problème que pour la lynx ...
Si une âme charitable pourrait m'aider, merci d'avance.

[screech]

@Duss Peux tu poster une partie de ton fichier log ? (10 lignes du début et 10 lignes de la fin )

Histoire de voir si la recherche se passe bien au bon endroit ?
(Normalement il fait 3 types de recherche :
(CRC + SYSTEM)
(CRC)
(FileName + SYSTEM)

Il devrait au moins trouver ^^ sinon ça veut dire :
Que tes roms n'ont pas de CRC ou de nom de fichier (sans extension) connu par Screenscraper

[Duss]

[00:49:06] - Version : 1.4.0.4
[00:49:06] - Langue Selectionnee : 040c
[00:49:06] - Recuperation des Profil
[00:49:13] - SSH : Stop Emulationstation OK
[00:57:47] - Recuperation des informations des systemes
[00:57:54] - Selection du systeme
[00:57:55] - Systeme selectionne : Super Nintendo
[00:57:55] - Recuperation des Profil
[00:57:55] - Recuperation des champs du profil
[00:57:56] - Nombre de roms trouvees : 2199
[00:57:56] - Creation des parametres pour le Mix

...........................

[01:14:06] - Calcul des Hash en : 0.07s
[01:14:06] - Recuperation des informations de la Rom no 68 (CRC + SYSTEM)
[01:14:06] - --Recuperation des informations de la Rom no 68 (CRC)
[01:14:06] - Recuperation des informations de la Rom no 68 (FileName + SYSTEM)
[01:14:06] - (*)Rom non trouve : Zarlor Mercenary (USA, Europe).zip (Hash : 07087967)
[01:14:06] - Fin de l'ecriture des informations de la Rom no 68 en 0.889s
[01:14:06] - ---------------------------------------------------------------------------------------
[01:14:06] - Debut de fusion des fichiers
[01:14:06] - Bilan

[01:14:08] - Scrape Termine
[01:14:08] - Roms trouvees :0 / 68
[01:14:08] - Roms ajoutes :0 / 68
[01:14:08] - Temps moyen par Rom :0.915s
[01:14:08] - Temps Total :0h 1m 9s

[Duss]

Je t'avoue que je comprends pas grand chose mais je viens de voir que le fichier gamelist.xml de la Lynx est vide même après le crape.

[Duss]

Et ca c'est peut etre mieux ^^'

[01:12:57] - Recuperation des informations des systemes
[01:13:03] - Selection du systeme
[01:13:04] - Systeme selectionne : Camputers Lynx
[01:13:04] - Recuperation des Profil
[01:13:04] - Recuperation des champs du profil
[01:13:04] - Nombre de roms trouvees : 68
[01:13:04] - Creation des parametres pour le Mix
[01:13:04] - ---------------------------------------------------------------------------------------
[01:13:04] - Calcul des Hash en : 0.1s
[01:13:04] - Recuperation des informations de la Rom no 1 (CRC + SYSTEM)
[01:13:04] - --Recuperation des informations de la Rom no 1 (CRC)
[01:13:05] - Recuperation des informations de la Rom no 1 (FileName + SYSTEM)
[01:13:05] - (*)Rom non trouve : A.P.B. - All Points Bulletin (USA, Europe).zip (Hash : 194ABA16)
[01:13:05] - Fin de l'ecriture des informations de la Rom no 1 en 0.892s

[screech]

Alors, en fait tu as fait un scrape super Nes avant ^^ du coup le début correspond au scrape super Nes ^^

Par contre, la fin, j'ai ta dernière rom lynx, qui est bien référencé au niveau du nom (mais pas au niveau du Hash) sur ScreenScraper.

Peux tu quitter le logiciel, le relancer, allez dans "configuration" / bouton "Avancée" et mettre "RechSYS" à 0

Du coup ça te demandera ton système avant le scrape, et il faut bien choisir Lynx .

Il devrait au moins te trouver la dernière

[screech]

Ah oui !! c'est mieux ^^

[01:13:04] - Systeme selectionne : Camputers Lynx

Tu ne choisi pas le bon système (ou alors c'est mon automatisation ^^)

Il faut prendre "Lynx" pas "Camputers Lynx"

[Duss]

J'ai fait mais je ne trouve qu'un seul Lynx malheureusement ^^''
et toujours le même résultat ...

[screech]

Effectivement, il y a un petit bug dans mon soft ^^ il confond les 2, je corrige demain (la il faut vraiment que je dorme ^^)

[Duss]

Et toujours "Camputers Lynx" dans le Log...

[Duss]

Ok merci de ta patiente et bonne nuit

[screech]

@Duss Et voila V1.4.0.5

[Duss]

Parfait !! Merci

[screech]

Working on new version of UXS

Based on the Theme DARKADE From @Nachtgarm (with some litle modification)
And a New Template from MIX Profile

This is some result :

Exemple on SNES With a Background
Exemple on SNES Without a Background found
(For information, the Console picture is dynamic ^^ and it's part of the picture, not the Theme)

Exemple on Game Gear 1
Exemple on Game Gear 2

Exemple on Mame

The resolution of every picture scraped adapt to your screen resolution (in my exemple it in 1440x900 but you can do what you want : 800x600 to 4K if you want and it respect the Ratio)

Be carrefull these picture take some place on your SD or USB Key (About 1Mo in 1440x900) so it's pretty heavy :S

Tested on the Pi with few picture, it's working like a charm ^^
(Need to Test on full set for evevry console ^^)

Soon : The new Version

(That's just a teasing)

[supernature2k]

Alors là... ça me laisse sans voix