Skip to main content

EpiAgent: LLM އޭޖެންޓުންނަށް epistemic self-play

Updated 1 min readMarkdown

Epistemic game theoryއަކީ އެއް އޭޖެންޓެއްގެ ސްޓްރެޓެޖިކް ޢަމަލު ކިޔައި ދޭނީ އެ އޭޖެންޓު އެހެނިހެން ފަރާތްތަކުންގެ މައުލޫމާތާ ބެހޭ ގޮތުން ހިފައިގެން އޮންނަ ޔަގީންކަމުގެ ސިޔާސަތު މެދުވެރިކޮށެވެ. އެހެނަސް ޒަމާނީ LLM މަތީގައި ބިނާ ކުރެވިފައިވާ އޭޖެންޓުންގެ ގާބިލުކަމުގެ ތެރޭގައި އެފަދަ ޔަގީންކަން އުފެއްދުމާއި އަޕްޑޭޓް ކުރުމުގެ ނިޒާމެއް ގިނަފަހަރަށް ފެންނަގޮތެއް ނެތެވެ. މި ގެޕް ބްރިޖް ކުރުމަށް ދިރާސާއެއްގައި ކުރިމަތި ކުރަނީ EpiAgentއެވެ.

EpiAgent އަކީ LLM އޭޖެންޓަށް ޚާއްޞަ، ތަޢުލީމު ކުރެވޭނެ epistemic ފަންތި އެއް ލިބިގެން އުޅޭ ފްރޭމްވަރކެކެވެ. މި ފަންތި އެހެން ފަރާތްތަކުގެ ޕްރައިވެޓް މަޢުލޫމާތުގެ މައްޗަށް ޔަގީންކަން ބެލެހެއްޓެއް. އޭޖެންޓުގެ ޕޮލިސީ ބެހިފައިވަނީ ދެ މަރުޙަލާއަކަށް: Epistemic Update، އެއްޗެހި ތާރީޚުން ޔަގީންކަން އަޕްޑޭޓް ކުރުން، އަދި Action Planning، އަޕްޑޭޓް ކުރެވުނު epistemic ޙާލަތާ ގުޅިގެން އެކްޝަން އިޚްތިޔާރު ކުރުމެވެ.

މި ދެ މަރުޙަލާގެ ގުޅުން bi-level optimization މައްސަލައެއްގެ ގޮތުން ފޯމިއުލޭޓް ކޮށްފައިވާއިރު، ދިރާސާގައި ތައާރަފް ކުރަނީ Epistemic Self-Playއެވެ - ސެލްފް-ޕްލޭ މެދުވެރިކޮށް ދެ މަރުޙަލާ ބަދަލުބަދަލުން އޮޕްޓިމައިޒް ކުރާ އެލްގޮރިދަމެކެވެ. މިގޮތުން intrinsic prediction reward އެއް ބޭނުން ކޮށްގެން ޔަގީންކަން ކިހާ ރަނގަޅަށް ފަހުގެ މުޝާހިދާތު ލަފާ ކުރަނީތޯ ބަލައެވެ.

އެކިއެކި މަންޒަރުގައި ހަދާފައިވާ ތަޖުރިބާތުން ދައްކާ ގޮތުން EpiAgent އަކީ prompting އަދި RL މަތީގައި ބިނާ ކުރެވިފައިވާ ބެސްލައިންތަކަށް ވުރެ ދެމެހެއްޓެނި ރަނގަޅު ނަތީޖާ ދައްކާފައިވާ ނިޒާމެކެވެ. އިތުރު ތަޙުލީލުތަކުން ދައްކާނީ ޚާއްޞަ epistemic ތަޢުލީމުގެ ފައިދާ، ޔަގީންކަން އިންފަރެންސް ކުރުމުގެ ދެކޮޅުގެ ރަނގަޅުވުން، އަދި އެކްޝަން ޕްލޭނިންގަށް ލިބިގެންވާ ޔަގީންކަމުގެ ބައްޔެވެ.

މި ލިޔުން ލިޔުއްވީ Yethikrishna R، Mynd Labsގެ ފައުންޑަރ އަދި ލީޑް އިންޖިނިއަރ، އަދި Compyle (YC F25)ގެ ކޯޑިނޭޓަރ އަދި ފައުންޑިންގ މެންބަރ، ހިންދުސްތާނުގެ ތްރިއްސޫރުންނެވެ.

މަޞްދަރު: https://arxiv.org/abs/2610.40227

6 views

No comments yet. Be the first to comment.

More from this blog