J'avais un ami devenu depuis lomgtemps accompagnateur professionnel. Il me disait juste que c'était la curiosité (il regardait tout ce qui lui tombait "sous les yeux" et tâchait de déchiffrer). Au fil des années il a "appris" maîtriser la lecture à vue en faisant d'instinct l'impasse sur quelques notes (lorsque c'est difficile ou trop chargé) afin de privilégier le tempo. et l'écoute de l'autre.
Moi, technicien correct mais très moyen déchiffreur, j'ai constaté que les progrès techniques améliorent néanmoins le déchiffrage (par ex moins de temps pour mettre en place un passage difficile d'une étude de Chopin quand la technique est au RDV). Mais là c'est plutôt la vitesse d'apprentissage.
Je conseille aussi le "déchiffrage-plaisir" systématique de courtes pièces (connue d'oreille uo pas) telles Petits préludes et fugues de Bach, Mazurkas de Chopin avec un tempo plus modeste, pièces de Schumann, pièces lentes de Scriabine....