Kaf HaChaim on Orach Chaim 25:61 כף החיים על אורח חיים כ״ה:ס״א

סא) [סעיף יוד'] אם סח לצורך תפילין וכו' אבל לכתחלה אסור להסיח אפי' לצורך תפילין כמ"ש סי' קס"ז העי' ו' בהגהה. מ"א ס"ק ט"ז. א"ר אות ט"ו. א"א אות ט"ז. ר"ז אות ך'. ח"א כלל י"ג אות ה' שתילי זיתים אות י"ט. בן איש חי פ' וירא אות יו"ד, מיהו היכא דלא סגי בלא"ה מותר להסיח. מ"א שם ובסי' תקצ"ב סק"ג. ר"ז שם. ח"א שם שתילי זיתים שם. ועיין שם בפרמ"ג שכתב דבחה"מ שרי להפסיק לכתחלה לצורך תפילין כל שהוא שאין שיחה בטילה יעו"ש. אמנם לפי מש"ל אות נ"א בשם הברכ"י דדוקא בקדיש וקדושה שהוא חייב לעשות יש מקום להתיר וכו' יעו"ש. א"כ ה"ה דיש ליזהר לכתחלה שלא להפסיק אפי' לצורך תפילין: