買了新屋室內約20坪在交屋前兩個月有跟室內設計公司交涉，對於這個部份我真的外行，於是我選擇相信專業，第一次溝通後因為外行就覺得設計師說的都對，對方要求必須先簽合約才能看草圖才能進行下一步，我就傻傻的簽了一份設計費五萬元(千辛萬苦殺價結果)合約馬上先付訂金兩萬五千元，當時覺得想要有設計感的空間付設計費也應該，此時甚麼東西都沒有~~~後來第一次溝通設計師要求我給個預算我回覆約30萬，對方竟然給一個簡單的客廳區塊的圖包含天花板、主牆及背牆的草圖，就說預算已經差不多了！後來我就告訴對方我付設計費請他設計，就是要他的點子請他不用考量預算，因為當初就有說不一定請他施工只是對方咬定我不懂一定會讓他做。兩個月後我交屋了，除了沒估價以外，施工圖還是沒出來，僅有簡單到不行的平面及立面圖，有的還是貼現成照片給我看，為了防止我拿給別人施工。為了怕不能如期搬家我拿著自認為可以施工的草圖去問遍所有工班，他們都說沒有尺寸沒有施工圖根本做不出來，又告訴我這種簡單到不行的圖片設計費也太好賺了吧！我才決定不再找原先設計師，先前已付出25000元也不要了！今日對方拿著合約說我不履行合約要求我支付其餘的25000元，我認為根本沒有施工圖不需支付，兩方僵持不下，後來我傻傻的把原先的草圖還給他，可是他莫明其妙的丟出請款單，又說要到我的新屋拍照懷疑我偷竊他的智慧財產權還請律師打電話給我。同事告訴我他已完成請款動作且我把原先圖還他，沒有證據在手上他可以賴說已交付我完整施工圖給我，是我違反合約，甚至還可把圖改成日後新裝潢好的樣子說我侵犯智慧財產權，對方還威脅我他有參加設計師公會已把此案件呈報上去列為糾紛案件，我該怎麼辦？已經認賠25000了還搞上這一遭，請各位有法律長才的先進們幫幫我好嗎？