в нем. языке ü, ö, ä - умлауты, а в русском й и ё это что?

Над й - кратка. Над ё - просто две точки, которые устоявшегося названия не получали.

нормальные немцы такого слова вообще не знают

Разные точки, чёрточки над буквами называется "диакритика". Ставятся для того, чтобы не изобретать новую графику для очередной буквы.

Именно "просто буквы", без диакритики. История буквы Ё сложна и запутана, считается, что её ввела Дашкова под влиянием немецкого языка. Но умляут - это совершенно другое явление, так называемая "перегласовка", когда под влиянием E или I задние гласные (A O U) приобретают качественно иное звучание:
Ä - примерно как русская Э
Ö - нечто среднее между русскими Э и О (не [йо]!), после согласных традиционно передаётся как Ё (раньше ещё была попытка ввести букву Э с точками наверху, чтобы показать, что это несмягчающий звук).
Ü - нечто среднее между русскими И и У (не [йу]!), после согласных передаётся как Ю.
Буква Ё не является умляутом, поскольку:
1) в русском нет явления перегласовки;
2) умляут возможен ТОЛЬКО над A O и U;
3) двоеточие является частью самой буквы и уже не рассматривается как диакритика;
наконец, 4) буквой Ё часто пренебрегают, чего нельзя сказать об умляутах - в крайнем случае немец допишет Е (т. е. ae, oe, ue).
Й - буква с краткой, которая превращает гласный звук в краткий согласный (в белорусском есть У с такой же краткой).