Você 
 pode  Definitivamente, conecte dois computadores a um roteador sem fio! É um dos principais propósitos de um roteador.  
 Parece que você pode estar tendo um problema específico. Para ajudar a solucionar problemas, você poderia me contar mais sobre: 
 * 
 Que tipo de problema você está enfrentando?  Os computadores não estão se conectando, estão se conectando, mas não à Internet, ou estão se conectando, mas a conexão é lenta? 
 * 
 Que tipo de roteador sem fio você tem?   * 
 Quais sistemas operacionais seus computadores estão em execução?   * 
 Você já tentou reiniciar o roteador e os computadores?    Depois de ter mais informações, posso lhe dar conselhos mais específicos.