牡丹江市区的自来水确实存在一定的“臭味”，这种味道主要来源于消毒剂，特别是氯气的味道[1]。有市民反映，每年开春时节都会出现自来水有异味的情况，这种异味主要是消毒剂气味[2]。然而，牡丹江供水公司表示，市区供应的自来水水质是达标的[1]。此外，还有关于牡丹江水雾分离器防腐施工程序的信息，提到脱臭效率可达99.9%以上，这表明牡丹江在处理水质方面有一定的技术手段来减少或消除臭味[3]。

综上所述，虽然牡丹江市区的自来水存在一定的臭味，但这主要是由于消毒剂引起的，并且供水公司的水质是达标的。同时，牡丹江也在采取措施改善水质，提高脱臭效率。因此，可以认为牡丹江浴池的水在一定程度上可能带有消毒剂的气味，但整体水质是符合标准的。