Tengo el mismo problema en mi caso:lib dentro de .rvm/usr/lib que se llevó a esta compilación en lugar de lib del sistema. No estoy seguro de por qué sucede eso y por qué no funciona (en mi caso en Ubuntu 10.04 x86_64), pero para resolverlo solo:
mv ~/.rvm/usr/lib ~/.rvm/usr/lib_rvm
por un tiempo o para siempre;)
Si alguien investiga por qué sucede eso, se lo agradeceré. Saludos.