Je pense que tout est possible... 
Dans ton cas, si tu veux pas passer par les hiragana et katakana, c´ est ton choix, par contre t´ auras peut etre quelques difficultés de plus...
Le mieux c´ est que t´ avances a ton rythme, ne pas te donner des tonnes de trucs à apprendre, en plus de tes cours... et pour que le jap soit tjrs un plaisir et que t´ y retiennes bien des choses, faut pas non plus te forcer surtout si tu débutes ( comme t´ as l´ air de le montrer là
) . Tu veux apprendre avec le romaji? pourquoi pas ^^...
Il y a bien des aveugles qui apprennent à parler des langues sans connaitre leur alphabet... ( enfin j´ suis pas trop trop sur là ^^)
Mais le seul bleme c´ est qu il faudra trouver les supports qui te donneront la possibilité de l apprendre avec le romaji, à part tevader et d´ autres bouquins, j´ en vois pas des masses... vlà
Bref, progresses à ton rythme et t´ exploses pas le crâne
^^
- un autre site pour le japonais avec des petites lecons par audio, il faut real player ( logiciel gratuit) pour les ecouter
http://www.nhk.or.jp/lesson/french/