要关闭电脑上的小窗口，您可以使用以下快捷键：
1. 按下 `Alt + F4` 键可以快速关闭当前活动窗口。
2. 如果您需要关闭多个窗口，可以按住 `Alt` 键不放，然后连续按 `F4` 键，每按一次关闭一个窗口。
3. 另外，您也可以使用 `Ctrl + W` 快捷键来关闭当前活动窗口。
4. 双击窗口标题栏最左侧的程序图标也可以关闭当前窗口。
5. 在窗口标题栏上右击，然后在弹出的菜单中选择“关闭”按钮。
6. 在任务栏上右击要关闭的窗口图标，然后在弹出的快捷菜单中选择“关闭”命令。
请选择适合您需求的方法来关闭窗口