Для IE: Tools -> Internet options... -> Connections -> LAN Settings... -> Use a proxy server - далее указать адрес проксии; его порт. Во вкладке Advanced можно указать разные сервера для разных протоколов