Puedes hacerlo de varias formas:

1) A través de la versión que tienes instalada, yendo arriba a "Ayuda"/ "Buscar actualizaciones". Te irá actualizando, primero, a la versión 3.6.16, y después, a la 4.

2) Bajarte la versión 4 desde el enlace e instalarla sobre la que tienes. Con ello se borrará la actual e instalará la 4.

3) Si quieres, puedes desinstalar la actual, bajarte la 4 e instalarla. En tal caso, al desisntalar la 3, te ofrecerá la posibilidad de conservar extensiones y perfiles que hayas personalizado.

Yo probaría con el paso 1, y, sólo si tienes algún problema, procedería a desinstalar.

En todo caso, si tu sistema es windows, crea previamente un punto de restauración, por si quieres volver donde estabas.

Un saludo.