法律分析：一、委托人或受托人谁可以随时解除委托合同
委托人或者受托人可以随时解除委托合同。因解除合同给对方造成损失的应承担赔偿责任。因解除合同事由不可归责于委托人或者不能完全归责于委托人，委托人对受托人因合同终止而遭受的损失不予赔偿或者只赔偿其部分损失。
根据2021年1月1日起施行生效的《民法典》第九百三十三条规定，委托人或者受托人可以随时解除委托合同。因解除合同造成对方损失的，除不可归责于该当事人的事由外，无偿委托合同的解除方应当赔偿因解除时间不当造成的直接损失，有偿委托合同的解除方应当赔偿对方的直接损失和合同履行后可以获得的利益。
二、委托合同有任意解除权
委托人可以随时撤销委托。如果互相没有信任或者已不再需要办理委托的事项，委托人即可单方解除委托合同，无须征得受托人的同意即可发力。
但是受托人可以要求委托人赔偿相应的损失。受托人可以随时辞去委托。委托合同的成立既需要委托人对受托人的了解和信任，也需要受托人对委托人的信任。如果受托人不愿意办理受委托的事务，受托人无须表明任何理由，即可解除合同。
(1)当事人合同解除权的行使，应以明示的方法通知他方，该通知自到达对方当事人时生效。合同当事人的一方有数人的，该项意思表示应由其全体或向其全体作出。同时，解除合同的通知一旦生效后不可撤销。
(2)在委托人或受托人一方为数人的情况下，数人中的部分人解除合同，其解除的效力是否及于其他人?这应区分不同情况判断：若委托事务依其性质是不可分割的，那么部分人的解除对其他人也应有效。在委托事务可分割执行的场合，各当事人解除合同的行为独立地发生效力，其他当事人之间的委托关系继续存在，不受影响。
(3)委托合同的任意解除权是否可由双方当事人通过特别约定加以限制或者排除?虽无明文规定，通常从尊重当事人意思自治的角度出发，对此应做肯定的回答。不过当事人依据民法典第95条到第102条的规定解除合同的权利仍然存在。此外，若在委托事务的处理过程中发生当初未曾料到的情事变更，使得对任意解除权的限制或排除条款显失公平的，这样的约定是可撤销的。在委托事务已经处理完毕的情况下，任何一方不得再行使解除权。
(4)当事人一方在不利于另一方当事人的情形下终止委托合同时，应对因此而给双方当事人造成的损失承担赔偿责任。因解除委托合同给对方造成损失的，除不可归责于该当事人的事由以外，应当赔偿损失。“不可归责于该当事人的事由”，是指不可归责于解除合同一方当事人的事由。即只要解除合同一方对合同的解除没有过错，那么他就不对对方当事人的损失负责，而无论合同的解除是否应归咎于对方当事人或第三人或外在的不可抗力。
另外值得注意的是，即使合同的解除方没有说明任何正当理由而解除合同，只要不存在可归责于该方当事人的事由，他就不对对方的损失负责。因为委托合同的解除权是任意解除权，并不以具备正当理由为行使要件。
随着社会经济的快速发展和市场化改革的深入，人们间的经济交往日益频繁，专业化要求也在逐步加强，加上工作繁忙无法脱身，社会事务中的诸多事项需要委托他人完成，随之而来的委托纠纷亦日益增多，如委托事项不明、超出委托权限、超过委托期限等，现本律师就委托合同中任意解除权做简单的介绍和分析。
法律依据：《中华人民共和国民法典》第九百三十三条
委托人或者受托人可以随时解除委托合同。因解除合同造成对方损失的，除不可归责于该当事人的事由外，无偿委托合同的解除方应当赔偿因解除时间不当造成的直接损失，有偿委托合同的解除方应当赔偿对方的直接损失和合同履行后可以获得的利益。
