施工單位不按照發包人修改後的施工圖紙施工，屬於違約行為。施工單位未按施工圖施工情況屬實的，責令改正，並依據相關法律法規處以罰款；情節嚴重的，責令停業整頓、降低資質等級或者吊銷資質證書；建築工程質量不符合規定的質量標準的，應當負責返工、返修，並賠償由此造成的損失；構成犯罪的，將依法追究相關人員的刑事責任。
不按圖紙施工的量刑標準:
1.輕微違法行為的表現形式:未按規範設計施工，可以補救修復的。處罰標準:責令停止設計施工，限期改正，最高可處1，000元罰款；
2.壹般違法行為的表現形式:未按規範設計施工，無法補救或修復，但危害後果不嚴重。處罰標準:責令停止設計施工，限期改正，可以並處1000元以上20000元以下罰款；
3.嚴重違法行為的表現形式:未按規範設計施工，無法補救修復，造成嚴重危害後果的。處罰標準:責令停止設計施工，限期改正，可以並處2萬元以上3萬元以下罰款；
4、已取得設計、施工資質證書，情節嚴重的，提請發證機關吊銷設計、施工資質證書。
綜上所述，在建設工程中，施工方對設計圖紙施工不放心，屬於嚴重違約，發包人應立即追究施工方的責任，如支付違約金，賠償相應損失。協商不成，盡快委托建造師協助處理，積極收集證據材料，向法院提起訴訟，要求賠償。如果情況嚴重，我們建議直接報警，然後依法索賠。
法律依據:
《建設工程質量管理條例》第二十八條
施工單位必須按照工程設計圖紙和施工技術標準施工，不得擅自修改工程設計，不得偷工減料。
施工單位在施工中發現設計文件和圖紙有錯誤的，應當及時提出意見和建議。
第六十四條
違反本條例規定，施工單位在施工中偷工減料，使用不合格的建築材料、建築構配件和設備，或者有其他不按照工程設計圖紙或者施工技術標準施工的行為的，責令改正，處工程合同價款2%以上4%以下的罰款；建築工程質量不符合規定的質量標準的，應當負責返工、返修，並賠償由此造成的損失；情節嚴重的，責令停業整頓、降低資質等級或者吊銷資質證書。