我作为公司法人可以单方直接解除委托和委托人么？

当然可以的。
公司是法人，一般的人称为自然人。法人和自然人都可以做被委托人的。
比较典型的委托合同：比如外贸生意中的货运代理公司，这些货代公司通常就是接受他人的委托代为向船公司订舱，然后将订舱后船东签发的相关文件(比如提单)转递给委托人。
根据《民法通则》委托人是委托他人为自己办理事务的人。在企业里因具体工作不同委托人不同，如法人授权委托人就是公司授权办理某项业务的代理人，在授权期间，由被授权人即被被委托人签字，获得授权人的签字，与法定代表人签字具有同样的法律效力。
委托人是指委托他人为自己办理事务的人。在证券经纪业务中，委托人是指依国家法律、法规的规定，可以进行证券买卖的自然人或法人。是指委托公司拍卖其享有所有权或处分权的拍卖物品或财产权利的公民、法人或其他组织(亦称卖家)。
信托的过程中，委托人的权利：
(1)要求选择信托管理人的权利
(2)对信托财产给予强制执行，提出异议的权利
(3)要求改变信托管理方式的权利
(4)当受托人管理不当或违反信托契约时，对受托人要求补偿信托财产的损失以及复原的权利
(5)要求法院就信托事务的处理进行检查的权利
(6)对受托人的辞任予以承诺的权利
(7)要求解任受托人的权利
(8)信托结束而无信托行为规定的财产归属者时。取得信托财产的权利
(9)当委托人享受全部信托利益(自益信托)时解除信托关系的权利。
与第三人的关系委托人编辑
在委托合同履行过程中，不可避免地会涉及到第三人，委托人与第三人权利、义务的法律关系，合同法作了如下四点规定：
1、受托人以自己的名义，在委托人的授权范围内与第三人订立的合同，第三人在订立合同时知道受托人与委托人之间的代理关系，该合同直接约束委托人和第三人，但有确切证据证明该合同只约束受托人和第三人的除外(《合同法》第四百零二条)
2、受托人以自己的名义与第三人订立合同时，第三人不知道受托人与委托人之间的代理关系的，受托人因第三人的原因对委托人不履行义务，受托人应当向委托人披露第三人，委托人因此可以行使受托人对第三人的权利，但第三人与受托人订立合同时如果知道该委托人就不会订立合同除外(《合同法》第四百零三条第一项)
3、受委托人因委托人的原因对第三人不履行义务，受托人应当向第三人披露委托人，第三人因此选择受托人或者委托人作为相对人主张其权利，但第三人。

把大概情况说清楚，您这一句话律师没办法答复的。

根据有关情况可以解除委托关系。

一、委托合同如何解除《合同法》第四百一十条委托人或者受托人可以随时解除委托合同。因解除合同给对方造成损失的，除不可归责于该当事人的事由以外，应当赔偿损失。本条是对解除合同的规定。委托合同是以双方信任为存在的条件，如果一方不守信用，失信于另一方，继续履行合同已无必要，法律赋予了双方当事人的权利，即只要一方想终止合同，就可以随时解除合同，而且不须有任何的理由。
（一）委托人可以随时撤销委托。如果互相没有信任或者已不再需要办理委托的事项，委托人即可单方解除委托合同，无须征得受托人的同意即可发生效力。但是受托人可以要求委托人赔偿相应的损失。
（二）受托人可以随时辞去委托。委托合同的成立既需要委托人对受托人的了解和信任，也需要受托人对委托人的信任。如果受托人不愿意办理受委托的事务，受托人无须表明任何理由，即可解除合同。
二、委托人单方解除和同的法律后果《合同法》第四百一十条委托人或者受托人可以随时解除委托合同。因解除合同给对方造成损失的，除不可归责于该当事人的事由以外，应当赔偿损失。本条是对解除合同的规定。委托合同是以双方信任为存在的条件，如果一方不守信用，失信于另一方，继续履行合同已无必要，法律赋予了双方当事人的权利，即只要一方想终止合同，就可以随时解除合同，而且不须有任何的理由。
1、委托人可以随时撤销委托。如果互相没有信任或者已不再需要办理委托的事项，委托人即可单方解除委托合同，无须征得受托人的同意即可发生效力。但是受托人可以要求委托人赔偿相应的损失。
2、受托人可以随时辞去委托。委托合同的成立既需要委托人对受托人的了解和信任，也需要受托人对委托人的信任。如果受托人不愿意办理受委托的事务，受托人无须表明任何理由，即可解除合同。委托合同的一方当事人在不利于对方当事人的时期解除委托合同而造成对方损失的，应当承担赔偿责任，所谓不利于对方当事人的时期，就不利于委托人方面而言，当受托人在未完成委托事务的情况下解除合同时，委托人自己不可能亲自处理该项事务，而且又不能及时找到合适的受托人代他处理该委托事务而发生损害的情形；就不利于受托人方面而言，是指由于委托人在受托人处理委托事务尚未完成前解除了合同，使受托人因不能继续履行义务而少获的报酬。委托人除对受托人已履行的部分给付报酬外，对在不可归责于受托人的情况下，因解除委托合同给委托人造成的报酬减少承担赔偿责任。但是受托人处理事务不尽注意义务，怠于委托事务的处理，委托人无奈而解除委托合同，虽会给受托人造成一定损失，但因解除合同事由不可归责于委托人或者不能完全归责于委托人，委托人对受托人因合同终止而遭受的损失不予赔偿或者只赔偿其部分损失。