说道德关系的纯属法盲，立字为证。
首先，你和邻居这种关系由于不动产产生的关回系已经答被明确的规定在《中华人民共和国物权法》（以下简称“《物权法》”）中，法律称之为“相邻关系”，相应的，相邻关系对应的权利和义务就是相邻权了。
《物权法》第七章-相邻关系-第八十九条建造建筑物，不得违反国家有关工程建设标准，妨碍相邻建筑物的通风、采光和日照。
如果你执意要建下去那么你的邻居就可能依据《物权法》第三十五条“妨害物权或者可能妨害物权的，权利人可以请求排除妨害或者消除危险。”向法院请求排除妨害
当然，他需要举证你继续建造会对他的相邻权造成妨碍，你也可能需要举证你的行为没有对他的采光权造成妨碍。
总而言之，最终结果如何，还是要看你的房屋建造符不符合国家的城乡规划或者建造标准，因为很可能涉及到你的之后在相邻权纠纷中的胜诉问题