La primera opción es mirar si el router te permite hacer eso que pides. No todos lo permiten.
Para eso te recomiendo que ojees las opciones del router desde la interfaz web, y de paso le eches otro ojo al manual.
También hay programas para Windows que te permiten hacer eso. Pero tienes que instalarlos en los 2 ordenadores y calcular tú la velocidad que les quieres destinar, teniendo en cuenta que también afectará al rendimiento de la red local.