איך להסביר לילדה שאני לא רוצה קשר עם הבית החדש של אביה והמאהבת?

שלום רב,
לפני כ3 שנים התגרשנו לאחר גילוי של בגידות רבות של מי שהיה בעלי ומערכת יחסים ארוכה עם אישה נשואה . מאז שניהם התגרשו והגרוש שלי עבר לגור בביתה (עם ילדיה).
יש לנו 3 ילדים , 2 בוגרים ואחת בת 6.
האבא שומר על הסדרי ראיה ולוקח את הקטנה לבית המאהבת , אחיה הבוגרים לא מקבלים את המאהבת שלכאורה פירקה את משפחתם ולכן לא מגיעים לביתה.
גם אני לא מגיעה לשם כמובן.
שאלתי היא איך להסביר לביתי הקטנה מדוע אני לא מסכימה להגיע לשם, לראות את חדרה.
בכל פעם היא מנסה לשכנע אותי להיכנס לשם ולא מבינה כיצד אני שמחנכת אותה על ערכי חברות וכיבוד אחרים לא מגיעה לשם ולא מוכנה להכיר את בת זוגו של אביה.
באותה מידה היא לא מבינה למה אביה לא יכול לבקר בבית שלה (שלי).
כיצד להסביר לילדה בגילה את סיפור הגירושין שלנו שקרה בעקבות מסכת בגידות ושקרים של אביה (למרות שהתעקשתי על טיפול זוגי שלא צלח).
בתודה מראש