賃貸契約トラブルで相談です。入居当日なのに… -賃貸 博士-

初めて相談します。
ご相談したいのは、賃貸マンションの契約に関してなのですが、
入居当日に家主から契約を破棄されたことに関してです。

時系列的にお話しいたしますと…
1.4/9　物件を内覧、同時に申込み。
2.4/10　家主よりOKをもらう。
3.4/13　4/14までに契約に関わる費用全額を振り込むように言われたので、
振り込みを完了させる。
4.4/17からの日割り家賃を支払っていたので、4/16日に契約をしたいむねを
不動産屋に連絡するが、4/16は都合があってできないので、
4/17にしてほしいとのことを言われたので了承する。
4/17はすでに家賃を支払っているので朝から契約をと言い、
10:00に契約に伺いますと伝える。
5.当日の朝、体調が悪くお昼まで起きれず、午後に不動産屋に行く。
6.不動産屋に行くと、契約は無効となりましたと言われ、理由を聞くと、
家主が今日の契約に立ち会うため来ていたが、
時間通りに来なかったこと、かつ携帯に連絡をしたが、
不通になっていたため不信感を持ったとのことでした。

私としては、家主が契約当日来ることは聞いておらず、
不動産屋さんも聞いていなかったとのことでした。

もちろん、約束の10時に行けなかったことは、申し訳ないと思うのですが、
費用は全額指定の期日より前に払い込みをし、
契約書にサインをするだけのことであったので、
時間に関してはさほど重要なことではなかったのです。

もちろん、家主が来ることを知っていれば、時間に遅れず、
また遅れる際は連絡をしましたが、不動産屋さんも
知らなかったのですから、私が知る由もありません。

こんな理由で一方的に解約できるのでしょうか？

また、当日に合わせて家具や家電の配送も手配してありましたし、
電話工事も手配してありました。
結局、その荷物も知人宅に転送した状態ですし、
工事もかえってもらいました。

SOHO使用ということでOKをもらっていましたので、
名刺や会社の移転案内も印刷をしてしまっています。

不動産屋さんは、契約前なのでそれはあなたの勝手と言いますが、
入居費用全額を振り込み、あとはサインだけという状況ならば、
誰しも同じことをすると思います。

はたして、私にどのぐらいの落ち度があるのでしょうか？
また、このようなケースで解約された場合、納得するしかないのでしょうか？

教えていただければ幸いです。