我家盖房子，因楼板质量问题导致工人摔伤，请问责任怎么划分？工人是在劳务市场上雇佣来的，没有包工头。