فرموله سازی هدف بر اساس حالت جاری و معیار کارآیی عامل انجام می شود و اولین مرحله در حل مسئله محسوب میشود.
تعریف مسئله با چهار جزء انجام میشود:
۱- حالت اولیه
۲- توصیفی از اعمال قابل دسترس برای عامل( مثل حرکت کردن پا)
۳- آزمون هدف
۴- تابع هزینه مسیر( توسط معیار کارآیی عامل)