遇到房屋质量问题且开发商不肯整改或没有书面答复时，你可以采取以下措施：
1. 收集证据：详细记录房屋质量问题，拍照并保留相关文件，如验房报告、合同等。
2. 调解协商：与开发商协商，要求整改或书面答复，可找开发商现场负责人进行沟通，或书面向开发商提出整改要求。
3. 取证鉴定：如开发商拒绝整改或答复，可请相关专业人士进行房屋质量鉴定，确凿证明存在问题。
4. 公正机构介入：找房地产交易合同签订的公证处或仲裁委员会出具证明，确认房屋质量存在问题。
5. 查阅合同：仔细阅读购房合同中的有关房屋质量问题的条款，了解相关的条款和违约责任。
6. 寻求专业律师咨询：咨询专业律师，了解自己的权益，并制定相应的策略。
7. 报警投诉：如开发商拒绝整改且涉及违法行为，可向相关部门报警投诉，并提交相关证据。
8. 参与业主组织：与其他业主联合发起行动，共同维护自己的权益。
需要注意的是，在过程中要注意留存证据，保持与开发商的书面沟通记录，并及时咨询专业律师，以确保自己的合法权益得到维护。
