Garde enfants, peut-on me la refuser

Bonjour,

Voila 10 ans que je suis avec mon conjoint, nous avons 2 enfants.

Nous envisageons une séparation et lui me dit qu'il fera tout ce qu'il peut pour que je n'ai pas les enfants, ni en garde alterné (ce que je propose) ni en garde unique.

Motif : je ne sais pas gérer mon budget et me suis endettée. Lorsque je l'ai connu, je ne gagnais que 900€ et devais payer mon loyer, mes déplacements si je souhaitais le voir et mes factures téléphones (env300€/mois).
Une fois ensemble : je payais nounou 800€, voiture + essence 300€, loyer 200€, courses, assurance....
Au fil des mois et des années, je suis entrée dans la spirale du revolving jusqu'à ne plus pouvoir m'en sortir.
Je lui en ai parlé en mars et en juillet, nous avons emprunté 17000€, dont 14000 pour rembourser mes emprunts et 3000 pour renflouer les comptes.
Mon plus gros tord a été de signer une demande de crédit à nos 2 noms sans lui en avoir parlé.

Le problème est que oui j'ai complétement "déconné" sur ce aspect mais qu'à côté de ça notre vie de couple est un cauchemar.
Je n'ai pas le droit de sortir voir des amies car ce n'est pas compatible avec notre de famille. J'ai voulu une fois diner avec un pote que je connaissais depuis 4 ans au début de notre relation mais comme il n'insultait quand je sortais, je lui ai dit que nous serions 5 au resto. Le jour où il a appris la vérité, il m'a demandé de me mettre à genou pour lui demander pardon.
J'ai nié avoir repris la cigarette, il m'a traité de "ME..E"...

J'ai fait ma plus grosse bétise avec ces crédits... je fais tout pour m'en sortir jusqu'à voir une psy.... mais est-ce un motif pour me retirer mes enfants ?

Lui est en libéral est gagne 7000€/ mois. Il rentre tard 3 soirs par semaine mais me dit que les enfants seront mieux chez leur grand-mère (où il retournerait vivre si nous nous séparions).

Je gère tout dans notre quotidien : médecin, nourrice, école, papier, appartement, voiture.... tout !

Je m'excuse de vous délivrer tout ce message un peu en vrac et espère trouver une réponse ici... car je suis prête à partir mais pas à n'importe quel prix !