Когда функция плавающие окна станут похожи как на windows окна (с кнопками где находиться заголовок)

Кнопки, закрыть, развернуть, полное окно/скрыть.
Скрытое окно можно будет найти на панеле.

А зачем? Смартфоны заточены на управление пальцем, а не мышкой. Стараться попадать пальцем по кнопкам - такое себе занятие.
На тач интерфейсах все стремится к жестам, и это я считаю более удобным и разумным, чем городить кучу кнопок, которые только загромождают место, на котором мог быть контент.

А значит ответ на твой вопрос - никогда.
Скорей винда от них избавится, чем смартфоны их внедрят

Хз.
Надо у производителей просить)

А зачем кнопки как на Windows?

Не знаю как на стоковой оболочке Android, но у меня One UI 3.1 (Android 11) выглядит это вот так:

1. Окно во всплывающем режиме
2. Свернутое окно во всплывающем режиме