PUEDEN EMBARGARME MI CASA DE INFONAVIT?

Mi situacion es la siguiente: En noviembre del 2009 estaba muy endeudado con mis tarjetas de credito y un conocido me presto $50,000 para salir de las deudas siempre y cuando le pagara intereses del 10% mensuales, firme un pagare por los $50,000 y le fui pagando los intereses mes con mes sin falta hasta hace unos 6 meses que me quede sin empleo y mi situacion economica cambió, desafortunadamente no firme ningun recibo por los intereses que le pague (que ya sumaron el total de la deuda). Mi Situacion ahora es muy complicada por que apenas tengo para mantener a mi familia ya que no he podido encontrar trabajop y me dedico al comercio y esta persona me fue a amenazar con un abogado exigiendome el pago total de la deuda de inmediato o me embargarian mi casa, La casa en donde habito es de mi esposa, estamos casados por bienes mancomunados la saco con un credito de infonavit y llebamos 15 años pagandola me dicen que si me la pueden quitar si esta persona gana la demanda pueden rematarla para liquidar la deuda pero nosotros nos quedariamos en la calle.
Hay alguna manera de ampararme o de que manera puedo defenderme? pueden realmente quitarme mi casa?.

Ayudenme por favor estoy desesperado!!