Kaf HaChaim on Orach Chaim 96:1 כף החיים על אורח חיים צ״ו:א׳

א) [סעיף א'] כשהוא מתפלל לא יאחוז בידו תפילין וכו' פי' רש"י ז"ל תפילין וס"ת מפני שטרוד במחשבתו שלא יפלו מידו ויתבזו ואין דעתו מיושבת עליו בתפלתו, וסכין מתירא שמא יפול ויתקע לו ברגלו וקערה מלאה ומעות שלא יתפזרו, וכבר שאם יפול יהיה נמאס, ולפ"ז משמע שאר דברים שאין בהם הפסד אם יפלו מידו מותר להתפלל בעודן בידו, אבל הר' יונה כתב בפ' מי שמיתי דאית דמפרשי דסכין וקערה וכל הני דנקט לאו דוקא אלא אורחא דמילתא נקט וה"ה שאין לו ליטול בידו שום דבר בשעת התפלה אלא לולב בלבד דמשום חבובי מצוה לא ימעט בזה כוונת התפלה עכ"ד, והב"ד ב"י ופרישה או' ב' ועיין ט"ז סק"ב שכתב להביא ראיה לדברי הר"י ומשמע שהוא מסכים לדבריו יעו"ש, וכ"כ א"ר או' ב' שבסמ"ק סי' י"א כתוב כדברי הר"י וכן הסכים הט"ז יעו"ש, וכ"כ ח"א כלל כ"ב או' ז' והגם שהמא"מר או' ב' והנו"ש והנה"ש או' א' כתבו על ראיית הט"ז שאינה ראיה וגם כתבו שם המא"מר והנו"ש דדעת מר"ן ז"ל כרש"י מ"מ יש להחמיר ואין לאחוז שום דבר בידו בעת התפלה, וכ"כ הש"ץ דקי"א ע"א והחיד"א בקש"ג סי' י"ב או' ל"ה דלא יאחוז בידו שום דבר כשהוא מתפלל חוץ מהמחזור, ועוד עיין לקמן או' ו':