这种情况可能是不正常的。如果您的电动自行车在充电时发出嗡嗡声，可能有以下几种原因：
1. 充电器故障：充电器内部可能存在接触不良或元件损坏的情况，导致在充电过程中产生噪音。
2. 电池问题：电池组中可能存在个别电池性能不佳或者连接不良的问题，导致在充电时发出声音。
3. 电机问题：电动自行车的电机在运行过程中可能会产生一定的噪音，但如果噪音过大则可能是电机存在问题。
4. 机械部件松动：自行车在运输或使用过程中，部分机械部件可能会有松动，导致在骑行或充电时产生噪音。
建议您尽快检查并修复这些问题，以确保您的电动自行车能够正常运行和使用安全。如果您无法确定具体原因，建议寻求专业维修人员的帮助。