与 Charter 匹配的 IPA 字体

Question

我怎样才能获得一个带包的语音字体编译charter？

\documentclass{article}

\usepackage{charter,tipa,lipsum}

\begin{document}
\lipsum[1]
[\textipa{D}]
\end{document}

那么括号里的字符依然是CM字体。