如果需要退掉故宫预约中的部分人数，您可以通过联系故宫官方网站或客服热线进行退单。在退单过程中，您需要提供预约时的订单信息以及需要退单的人数和姓名等相关信息。之后，工作人员会根据您提供的信息帮助您进行退单操作。退单成功后，您将收到相应的退款或取消预约确认。需要注意的是，退单操作可能涉及到一定的手续费用或退款政策，请提前了解清楚相关规定。