Когда мы добавляем к справке новые темы не рекомендуется вносить в файлы, которые подготовлены AppWizard'ом. Лучше создавать отдельный файл в WORD и сохранять его как RTF:

В каталог с файлами проекта помощи проекта HLP:

После этого файл можно включить в проект. Но самое главное добавить его к hpj проекту.

ERRORLOG=TestHlp.LOG
[FILES]
......
afxcore.rtf
afxprint.rtf
doc1.rtf
[ALIAS]
HIDR_MAINFRAME = main_index
HIDD_ABOUTBOX = HID_APP_ABOUT
......

После компиляции этот файл будет как единое целое.