带彩色括号的上标位置错误

Question

给括号上色会改变上标的位置。如何使用标准颜色的括号获得与右例相同的位置？我打算使用\left)和\right)作为括号，以便在比给定的最小示例更大的方程式中获得合适的括号大小。

\documentclass{article}
\usepackage{color}
\begin{document}
$\color{red}\left(\right)\color{black}^2 \left(\right)^2$
\end{document}