Почему у слова серый каждый раз разное окончание

Серый-мужской род.
серая-женский род.
серое-средний род.
серую-(какую?)
Когда слово не в начальной форме (серый),а в другой окончание такое как в вопросе!