לא מבקרים עוד את סבא

שלום סמדר,
יש לי ילד בן 5.5. אני והורי לא בקשר ואת אימי הוא מעולם לא פגש, כששאל (לפני כשנה) אם יש לי אמא ואיפה היא אמרתי שהיא גרה בארץ אחרת רחוקה מאד.
עם אבי היה קשר רופף ובשנה וחצי האחרונות ראינו אותו פעם-פעמיים בחודש.
בחודשיים האחרונים הקשר נותק ולכן אנחנו לא נפגשים בכלל.
בני שאל מתי הולכים לסבא ולמה לא הולכים לסבא. אמרנו לו בינתיים שהוא בנסיעה ארוכה בחו"ל .
שאלתי היא מה לומר? האם לומר את האמת? שרבנו ואני לא רוצה לפגוש אותו?
מצד אחד, זה ברור לי שזה לא פייר לילד שלא חלק מהמריבה ורוצה את המפגש הפעם בחודש שלו עם סבא. אבל כיוון שסבא גר רחוק נאלץ לקחת אותו וגם להישאר איתו שם כי הוא מעולם לא היה איתו לבד.ואני גם לא מעוניינת להשאיר אותו עם סבא לבד.
מצד שני, אני חוששת לומר לילד שרבנו ולכן אנחנו לא נפגשים כדי שלא יפתח חרדות שאם הוא יכעיס אותי או "נריב" אז אעלם לו או לא נפגש יותר.
מה דעתך?