回答

このthatは副詞で、後ろの形容詞を修飾しています。
「そんなに〜[ない]、それほど〜[ない]」みたいな意味があります。

not all thatというのがひとまとまりの連語なので、thatを抜かすことはないですね。
not all that = not very
それほど〜ない

この回答にコメントする
疑問は解決しましたか?