根据《机动车登记规定》规定，电动自行车是不需要上牌照的。但是，如果要在二手市场上卖一辆电动自行车，有一些手续是必须要准备的。

首先，卖家需要提供车辆的合法购车发票，以证明车辆是正常合法购买的，并且没有被盗窃。

其次，卖家还需要在出售时提供车辆的质检报告和保修单，以证明车辆没有任何质量问题，并且可以正常运行。

最后，卖家还需要提供车辆的身份证明，如车架号码和车主证明，以便买家可以在购买后进行登记。