Résolu et pour de vrai cette fois, la réponse je l'ai eue là:

https://thepihut.com/blogs/raspberry-pi-tutorials/34512708-troubleshooting-a-raspberry-pi-hdmi-vga-adapter

la configuration pour moi est donc

hdmi_ignore_edid=0xa5000080 # pour dire non au retour de monitoring
hdmi_drive=1 # pour dire pas de son par là
hdmi_group=2 # pour dire DVI mode
hdmi_mode=82 #pour dire 1080p 60hz

la clé est donc d'ajouter hdmi_ignore_edid=0xa5000080

en effet certains écrans retournent n'importe quoi et le raspberry n'arrive pas à lui répondre correctement, cette ligne n'est pas présente de base dans le config.txt, il faut l'ajouter manuellement.

J'espère que ça évitera à quelqu'un de passer des plombes la dessus!