是的，电动车的新电池在首次使用时应该将电量完全耗尽后再进行充电。这是因为新电池在出厂时可能并未充满电，或者存在一定的自放电现象。将电量完全耗尽后再充电可以确保电池能够被充分激活并达到其最大容量。
至于充电时间，这取决于你的电池容量和充电器性能。一般来说，对于大多数电动自行车或电动摩托车使用的铅酸电池，首次充电需要10-12小时以完全充满。不过，现在的充电器大多具有智能充电功能，当电池充满后会自动停止充电，所以实际充电时间可能会更短一些。
建议你在充电过程中定期检查电池状态，以确保不会过充。同时，尽量使用原装或品质可靠的充电器进行充电。