老公和他前妻离婚快一年了，可是他前妻总是来家里大吵大闹，还说不让我们过好日子，他们之前生育过一个女儿，离婚时女方坚持不给看，强行带走，并要判给她，最后给她了，她现在以女儿为名义要钱要房子，请问我需要为他们的抚养费负责吗？我现在自己也怀孕了，她成天来大吵大闹我精神很差，请问我该怎么做，如果我丈夫现在负担不起抚养费，可以要求变更离婚协议少给点钱吗。