超単純に考えると、元の動詞であるfailは何かが「欠損する」というニュアンスがあります。そこから失敗だとか無くすだとか色々派生します。
そして不定詞というのは単なる修飾でしかありません。
failureという単語1つ置いたところで、意味を成しません。何がfailureなの？ってなります。だからそれに意味を加える訳です。
ただ、形容詞の後ろは基本動詞はおけませんよね。ただ、failureの内容に動作のニュアンスを加えたい場合どうしますか？その答えの1つがtoを置くことで、動詞を置いていいとルールを作ったわけです。それがto不定詞です。なので形容詞適用法がどうとかってのはどうでもいいんです。
なので、何がfailureなの？→use Englishがfailure。
つまり、英語を使うということが欠陥してる→
英語を使えない(話せない)
になります。
理解しました！
詳しくありがとうございます！