השכרת בית פרטי לעמותה של אנשים בעלי מוגבלויות

שלום, בבעלותי קוטג' (דו משפחתי) וברצוני להשכיר את הנכס שברשותי לעמותה לנכים. האם יתכן כי בעל הנכס הצמוד אלי יוכל להוציא צו מניעה ולסלקם? יש לקחת בחשבון כי העירייה אינה מאפשרת הוצאות רישיון בהינף יד ומעדיפה לא להנפיק רישיונות מהסוג הזה על מנת לא לבוא בדברים עם התושבים.