Visa longue durée ou courte durée ?
De toutes façons, il te suffit d'enclencher une procédure de divorce. Avec "zéro années" (et en tout état de cause moins de deux ans) de vie commune, son visa tombera aussitôt votre divorce prononcé.
Le fait qu'il ait ton livret de famille a peu d'importance en soi, c'est un document pour vous, tant que vous n'avez pas d'enfants, il ne sert pas à grand chose.
Sinon, si tu pense qu'il t'a épousée juste pour les papiers, tu peux sans doute aller plus vite en déposant une demande d'annulation pour mariage frauduleux. Je pense que cela doit suffire à faire sauter son visa.