1,2,3: Alguno de los módulos está defectuoso, pasale el memtest86+ y si ves información en rojo... premio, están defectuosos(lo más seguro) o tu placa no es compatible con esa marca/modelo (poco frecuente) y si soporta 4 Gb, actualiza la bíos y comprueba que la marca y modelo están soportados en la web del fabricante de la placa, también la configuración de la memória dejala en auto (por si tenías alguna configuración concreta). El memtest es un bootcd, también lo tienen casi todas las distribuciones de linux en la opción comprobar memoria. Cuando uses el memtest, prueba a usar los dós módulos, luego solo con uno, y luego cambiando de slot para comprobar que es ciertamente problema de la memória o falla el slot.
4: En el SO, si no tienes un sistema Operativo de 64bits solo verás 3-3,5 Gb, que es el tamaño que se puede direccionar trabajando con 32bit, pero en la Bios, o simplemente cuando arranca el ordenador deberías ver en el arranque 4 Gb Installed, 3,5 Avaliable si no tienes el remap activado. Si te sigue poniendo 3 malo, no tienes ni que pasar el memtest86+.