更换小牛电瓶车的钥匙电池需要一定的工具和技术。以下是一般的步骤：
1. 准备工具：一把一字螺丝刀，一个十字螺丝刀和新的纽扣电池（2032型号）。
2. 打开钥匙：将钥匙的头部向下放置在一个稳定的表面上，用一字螺丝刀沿着钥匙侧边的缝隙撬开钥匙。
3. 取出旧电池：用十字螺丝刀拧下固定电池的螺丝，然后小心地取出旧电池。注意不要弄坏电路板。
4. 安装新电池：将新的2032纽扣电池放入电路板上的电池槽中，确保电池的正负极方向正确。然后将电池槽的盖子拧紧。
5. 重新组装钥匙：将钥匙的内部部件重新组装好，然后用一字螺丝刀将钥匙外壳合拢。
6. 检查功能：将钥匙放回电动自行车上，尝试开启和关闭电源，以确保钥匙功能正常。
以上步骤仅供参考，具体操作请根据实际情况进行调整。如果可能的话，建议寻求专业人士的帮助进行操作。