Kaf HaChaim on Orach Chaim 38:3 כף החיים על אורח חיים ל״ח:ג׳

ג) אדם שהוא שומע ואינו מדבר יניח תפילין, וכן המדבר ואינו שומע, ס"ח שם, והביאו כנה"ג שם, וכתב שמדבריו נראה בחרש שדברו חכמים שאינו שומע ואינו מדבר אינו מניח תפילין, וראיתי בקושטנטינה כמה מהם שהיו מניחים תפילין ולא מיחו בהם חכמים. ויראה דספר חסידים חיובא קאמר דהנהו חייבים בתפילין אבל חרש שדברו בו חכמים פטור מן התפילין כיון שהוא פטור מכל המצות ומיהו אם רוצה להניחן אין מוחין בידו עכ"ל, וכ"כ בשכנה"ג בזה הסי' אות ד', וכ"כ העו"ת. א"ר אות ח', ש"ץ דף מ' ע"ד, שתילי זתים אות ב':