見たページはこちらですかね。
拡張スタイル「タブボックス」のラベルを日本語化するカスタマイズ方法

URLなど具体的な情報の提示がないのでタブボックスの話なのかアイコンボックスの話なのか分かりませんが、タブボックスの話かつGutenbergをご利用であれば、タブ見出しボックスを使えばカスタマイズをしなくてもアイコンと見出しを変更できます。
選択肢にある以外のアイコンに変えたい場合はカスタマイズが必要ですが。

アイコンボックスの話であれば、以下のCSSでアイコンが文字に置き換わります。

.information-box::before {
  content: '補足情報'
}

ただ元々文字が入る用にはなっていないので見た目が不格好になります。

文字サイズや文字が入る用のスペースのサイズを調整したりする必要があると思いますが、最終的にどうしたいのかが分からないので、ご自身の望む形にカスタマイズが必要だと思います。

はるさん、ありがとうございます。

classic editorを使用していて、Gutenbergは使たことがありません。

ボックス(タブ)の日本語化はできたのですが、「ボックス(アイコン)→補足情報]」を使うと、WEB上ではiのマークだけが表示されるので、このマークの代わりに「補足情報」という文字で表示したかった、という事です。

わかりづらくて申し訳ありません。
貴重なお時間いただきまして、ありがとうございました。

.information-box::before {
  content: '補足情報'
}

をstyle.cssに追加して更新してみましたが、変わりませんでした。

本当は、特に何かを書こうとは思っていなかったのですけれど・・・。

コード自体は間違っていません。

私の環境に、そのまま適用すると、以下のようになります。
はるさんの仰る通りではありますけれど。

投稿者:: @haruinoue

↑

ただ元々文字が入る用にはなっていないので見た目が不格好になります。

書き込みの前に以下の3点をご確認ください。

1. 1つのトピックにつき1つの質問を書き込んでください
2. 不具合・カスタマイズ対象ページのURLを提示し高速化を無効にしてください
3. 該当部分のキャプチャ・環境情報とともに書き込んでいただけると助かります

また、要件が不明瞭な場合は、回答側も曖昧にしかお答えすることはできません。

フォーラムの案内にあります通り、お問い合わせに当たっては、テンプレートのご利用や、画像などを使用してのご要件の説明など、詳細にお願い致します。

フォーラムマナーに、ご協力いただけますと幸いです。

このトピックは、以下のように「要望」フォーラムにお書きになっています。

ｍｋ２さん、ありがとうございます。

返信が遅くなりもうしわけありません。

CSSの知識がほとんどない自分にとって皆さんのお話はとても助かります。

もう一度、チャレンジしてみたいと思います。