Si a lo que te refieres es a crear una clase "Ventana", con todos sus métodos, es algo que puedes hacer. Basta guardar los campos necesarios, como los HANDLE de la ventana y lo que sea.
No es difícil, pero es algo que lleva tiempo, y que ya han hecho otras librerías, como GLFW, SFML o Qt.
No es difícil, pero es algo que lleva tiempo, y que ya han hecho otras librerías, como GLFW, SFML o Qt.