Kaf HaChaim on Orach Chaim 44:2 כף החיים על אורח חיים מ״ד:ב׳

ב) שם ולא היתה עמו אשה וכו' אבל אם אשתו עמו אסור גזירה שמא ישמש בהן. מ"א סק"א. א"ר אות א'. ר"ז אות א'. ועיין כ"מ על הרמב"ם פ"ד דתפילין הלכה ט"ז וד"ח שם ופרמ"ג א"א אות א'. יפה ללב אות א' ובש"ג פ' מי שמתו משמע דאף ביום חיישינן. א"ר שם: