Clique duas vezes no pequeno botão disponível no topo da barra de rolagem direita para criar uma divisão horizontal
e,
Clique duas vezes no pequeno botão disponível à direita da barra de rolagem inferior para criar uma divisão vertical
(veja a imagem para ter mais ideia da localização desta caixinha)
A divisão seria criada na linha ou coluna da célula selecionada e se você quiser remover a divisão, basta clicar duas vezes novamente.
Captura de tela // Maneira rápida de dividir a janela do Excel