在红绿灯路口上下人的行为属于违反交通规则的行为，可能会受到以下处罚：
1. 罚款：根据不同的国家和地区，罚款金额可能不同。在一些地方，可能会被罚款几十元至几百元。
2. 扣分：如果是在驾驶过程中或者在有驾照的情况下进行这种行为，可能会被扣除相应的驾照积分。
3. 吊销驾照：在某些情况下，比如造成交通事故或者多次违反交通规则等行为，可能会被吊销驾照。
4. 刑事责任：如果因为这种行为导致了严重的交通事故，可能会承担刑事责任。
具体的处罚情况需要根据实际情况和当地的交通法规来判断。总之，遵守交通规则是非常重要的，不仅是为了避免被处罚，更是为了保护自己和他人的安全。