ドイツ語学科卒なもので口出ししたくなりました。
日本語にない発音はドイツ語ネイティブの先生に指導してもらうのがいいのですが…。言葉で書くとなると、
o-ウムラウトの場合。まず o を発音してください。舌が後ろに引かれ、唇はすぼめて丸い形になっています。次に e を発音してください。o に比べて舌は前にあり、唇は丸くなっていません(平唇)。
そこで o-ウムラウトですが、もう一度 e を発音して舌の位置を保ったまま、唇を o の時のようにすぼめて円唇にしてください。これで出るのがカタカナにできない o-ウムラウトの音です。
u-ウムラウトは上の o と e を u と i に置き換えて試してください。ただし、ドイツ語の u は日本語の「ウ」と違うので注意してください。日本語の「ウ」は平唇なのに対し、ドイツ語の u は o をもっと狭くした円唇音です。
これらの音は英語にはないのですが、フランス語や北欧語などいろんな言語にある音です。一度習得すれば、比較的簡単に聞き取りもできるようになります。