日本でいくら英語を勉強しても上達しません。やはり本場にいかないとダメなのでしょうか？

基礎英語力のない人は、本場に行ってもかえって回り道をすることになります。

基礎英語力、すなわち英検2級程度の学力は日本でもつくはずですし、この程度までの英語教育は設備を含めて日本の方が進んでいます。絶対に日本で基礎を作ってから行くようにしてください。