Shulchan Arukh, Yoreh De'ah 118:10שולחן ערוך, יורה דעה קי״ח:י׳
המניח עובד כוכבים בביתו ובו דברים שאם הוחלפו יש בהם אפילו איסור תורה אם הוא יוצא ונכנס או אפילו שהה זמן רב ולא הודיעו שדעתו לשהות מותר ולא חיישינן שמא החליף אפילו אם הוא נהנה בחליפין והוא שלא סגר הבית עליו (טור והמחבר ר"ס קכ"ט) לפי שהוא מתיירא בכל שעה לאמר עתה יבוא ויראני אבל אם הודיעו שדעתו לשהות אסור ואם אינו נהנה בחליפין מותר בכל ענין דלא חיישינן שמא החליף להכשילו כיון שאין לו הנאה בדבר:
Siftei Kohen on Shulchan Arukh, Yoreh De'ah 118:32:1שפתי כהן על שולחן ערוך יורה דעה קי״ח:ל״ב:א׳
המניח כו'. בחולין (דף ג' ע"א) דייק מההיא לישנא דהמניח היינו דיעבד מיהו מסיק התם דאפילו לכתחלה מותר ביוצא ונכנס וא"כ צ"ל דמ"ש הט"ו האי לישנא משום סיפא נקטוהו דשהה זמן רב ולא הודיעו שדעתו לשהות דאינו מותר אלא בדיעבד וכ"כ הרב לקמן סי' קכ"ט סעיף א' דבכה"ג אסור לכתחלה ע"ש והוא מהמרדכי פרק רבי ישמעאל בשם ראב"ן אי נמי כמ"ש התוס' בחולין שם דהמניח לכתחלה נמי משמע: