试管打促排卵针期间卵泡从6个变成3个，为什么越来越少了？

一直没办法怀孕，去年年底检查完了之后医生说老公也有问题，我也有问题，建议直接试管吧。所以今年开始做试管婴儿，目前正进行的促排，当时监测卵泡都有6个，但是第二次去监测就变成了3个
我每天都有吃高蛋白，也没有剧烈运动和生气，整个人就很担心，这每次复查都少几个怎么办，想问一下我这种情况是怎么回事?