这种协议中要求无论任何理由解除合同都需赔付对方一定金额的条款，很可能存在不合理性甚至不合法性，你能否要回所交的钱，需要从以下几个方面分析并采取相应措施：

    协议条款的效力分析

    显失公平 ：该条款规定无论任何理由解除合同都要赔付，限制了你的合法解除权，对劳动者一方极为不利，属于显失公平的条款。根据《民法典》第一百五十一条规定，一方利用对方处于危困状态、缺乏判断能力等情形，致使民事法律行为成立时显失公平的，受损害方有权请求人民法院或者仲裁机构予以撤销。

    格式条款 ：如果这份协议是房地产公司预先拟定，未与你充分协商的格式条款，且该条款不合理地加重了你的责任，排除了你的主要权利，根据《民法典》第四百九十七条规定，这样的格式条款是无效的。

    交钱性质分析

    押金或保证金 ：如果公司以各种名义收取了你的押金或保证金，根据《劳动合同法》第九条规定，用人单位招用劳动者，不得扣押劳动者的居民身份证和其他证件，不得要求劳动者提供担保或者以其他名义向劳动者收取财物。公司的这种行为是违法的，你有权要求公司全额返还。

    其他费用 ：如果是其他性质的费用，需要结合具体情况判断其合理性。如果没有合理依据，你也可以主张返还。

    要回钱的途径

    与公司协商 ：你可以先尝试与房地产公司进行沟通，说明法律规定，指出协议条款的不合理性，要求公司退还所交的钱。在协商过程中，注意保留好聊天记录、通话录音等证据。

    向劳动监察部门投诉 ：如果协商不成，你可以向当地的劳动监察部门投诉，劳动监察部门有权对用人单位的违法行为进行查处。你需要提供相关的证据，如协议、缴费凭证等，以证明公司存在违法行为。

    申请劳动仲裁或提起诉讼 ：如果劳动监察部门无法解决问题，你可以向劳动争议仲裁委员会申请仲裁，或者向人民法院提起诉讼。在仲裁或诉讼过程中，你需要提供充分的证据来支持自己的主张。

   建议你尽快采取行动，避免时间过长导致证据丢失或难以收集。同时，在以后签订协议时，要仔细阅读协议条款，对于不合理的条款要及时提出异议。