公司以调岗为由欲辞退我，协商不成，又要我回去原岗位上班，我可以拒绝吗？

结论：可以。
解析:
1、调岗属于变更劳动合同的主要内容，用人单位必须先与劳动者协商一致，未经劳动者同意，用人单位单方面调整岗位，原则上是无效的；
2、如果用人单位是生产经营需要的调岗，且调岗具有合理性，不存在侮辱或惩罚性质，工资待遇不降低，与劳动合同约定的岗位之间存在相关性，则调岗有效；你作为劳动者应该遵守。
当然，调整岗位的合理性需要用人单位举证；反之，用人单位是基于迫使劳动者离职而调整岗位，劳动者是可以拒绝的。
用人单位以劳动者不服从安排为由解除劳动合同，就属于违法解除；你可以申请劳动仲裁要求支付赔偿金，工作1年支付2个月本人工资，即2；
3、如果劳动者不能胜任工作，用人单位也是有权调整岗位的。
当然，用人单位主张劳动者不胜任工作也是需要提供证据的。
劳动者拒绝调整岗位的，用人单位据此解除劳动合同，属于合法解除，但是用人单位也是应该支付经济补偿
法律依据：
《中华人民共和国劳动合同法》
第三十五条用人单位与劳动者协商一致，可以变更劳动合同约定的内容。
变更劳动合同，应当采用书面形式。
变更后的劳动合同文本由用人单位和劳动者各执一份。
第三十八条用人单位有下列情形之一的，劳动者可以解除劳动合同：
（一）未按照劳动合同约定提供劳动保护或者劳动条件的；
（二）未及时足额支付劳动报酬的；
（三）未依法为劳动者缴纳社会保险费的；
（四）用人单位的规章制度违反法律、法规的规定，损害劳动者权益的；
（五）因本法