I think there is also fine-tuning ("reinforcement learning from human feedback").

Но какой-то начальный prompt, наверное, тоже есть.

Янус рекомендует всем пользоваться не цензурированной системой (ChatGPT), а оригиналом - ("GPT 3.5"), хоть это и требует более квалифицированного пользователя (ChatGPT ведь не только цензуру содержит, но и поддержку, чтобы всякие штуки лучше получались)...