左右相邻房屋采光规定我家邻街面有块自…

左右相邻房屋采光规定我家邻街面有块自留地，但自留地的南侧已建有一栋房屋，我和家自留地紧挨着，现我家想在自留地建房屋，他们家称我家建房影响他们采光，请问是否合理，我们只听说过前后采光有影响，但从未听说左右采光不许别人建房的。