Argument Mining

When LLMs Met Argument Mining: What Changed and What Didn't

AT
Argumentree Team
Decision Science
July 29, 2026
10 min پڑھیں
When LLMs Met Argument Mining: What Changed and What Didn't

جب LLMs نے دلیل کی کان کنی سے ملاقات کی: کیا بدلا اور کیا نہیں بدلا | Argumentree

اپنی تاریخ کے زیادہ تر حصے کے لیے، کمپیوٹیشنل آرگومنٹ مائننگ کو ہر نئے ڈومین کے لیے ہاتھ سے تشریح کردہ کارپس کی ضرورت تھی۔ یہ ضرورت اس میدان کی پابند رکاوٹ تھی: تشریح کی کوشش بڑی تھی، رہنما اصول متنازع تھے، اور طلبہ کے مضامین پر ترتیب دی گئی ایک نظام ملاقات کے ٹرانسکرپٹس یا عوامی تبصروں پر منتقل ہونے میں ناکام رہا۔ بڑے زبان ماڈلز نے اس رکاوٹ کو ختم کر دیا۔ ایک عمومی مقصد کا ماڈل ایک پرامپٹ سے جزو کی شناخت اور تعلق کی درجہ بندی کر سکتا ہے، بغیر کسی ڈومین مخصوص تربیتی ڈیٹا کے، اور شائع شدہ تشخیصات نے پایا کہ پرامپٹ کیے گئے عمومی مقصد کے ماڈلز تعلق پر مبنی آرگومنٹ مائننگ میں بہتر یا بعض صورتوں میں بہتر ہیں۔ اس نے یہ تبدیل کیا کہ آرگومنٹ مائننگ کس کے لیے ہے: یہ عام تنظیمی متن پر استعمال کے قابل ہو گیا نہ کہ صرف منتخب کردہ تحقیقی کارپس پر۔ جو چیز تبدیل نہیں ہوئی وہ مشکل مسائل کی ساخت ہے۔ کلاس عدم توازن اس بات کی عکاسی کرتا ہے کہ لوگ کیسے لکھتے ہیں، نہ کہ ماڈلز کیسے تربیت دیے جاتے ہیں۔ آیا ایک شراکت حمایت کرتی ہے یا حملہ کرتی ہے یہ اس کے والدین پر منحصر ہے نہ کہ اس کی الفاظ پر۔ اور اعتراضات اکثر ایک غیر بیان کردہ وارنٹ کو نشانہ بناتے ہیں جو متن میں کہیں بھی ظاہر نہیں ہوتا۔ بڑے ماڈلز نے اپنی ایک نئی مشکل بھی متعارف کرائی: زبانی اعتماد خام ٹوکن کی ممکنات سے بہتر طور پر کیلیبریٹ کیا جاتا ہے لیکن پھر بھی ایک درجہ بندی کے اشارے کے طور پر غیر قابل اعتبار ہے، لہذا ایک ماڈل کی یقین دہانی کو یہ فیصلہ کرنے کے لیے استعمال نہیں کیا جا سکتا کہ کون سا نکالا گیا آرگومنٹ سب سے زیادہ اہم ہے۔

Share:
خلاصہ

کارپوس کی رکاوٹ ختم ہوگئی۔ ساختی مسائل ایک انچ بھی نہیں ہلے — اور ایک نیا مسئلہ آیا، جو حل کے لباس میں تھا۔

  • دلائل کی کان کنی کے لیے ہر شعبے میں ہاتھ سے تشریح کردہ کارپس کی ضرورت ہوتی تھی۔ عمومی مقصد کے ماڈلز کو اس کی ضرورت نہیں ہوتی، جو اسے عام کاروباری متن پر قابل استعمال بناتا ہے۔
  • شائع کردہ تشخیصات نے پایا ہے کہ عمومی مقاصد کے ماڈلز تعلقات کی درجہ بندی پر، بعض اوقات بہتر، اور بعض اوقات بہتر، خاص طور پر ترتیب دیے گئے انکوڈر بیس لائنز کے مقابلے میں مسابقتی ہیں۔
  • عدم توازن، سیاق و سباق کی انحصار اور غیر بیان کردہ ضمانت زبان اور کام کی خصوصیات ہیں، ماڈل کے حجم کی نہیں۔
  • ماڈل کی اعتماد خام امکانات سے بہتر ترتیب دی گئی ہے لیکن پھر بھی یہ ایک قابل اعتماد درجہ بندی کا اشارہ نہیں ہے — ایک نیا جال، نیا ٹول نہیں۔
  • مدد یہ ہے کہ تعلق کو الفاظ میں بیان کرنے پر مجبور کیا جائے قبل اس کے کہ لیبل کو حتمی شکل دی جائے۔

وہ پابندی جو میدان کی تعریف کرتی تھی، بس لاگو ہونا بند ہوگئی۔

بیس سالوں تک، کیا ہم اپنے ڈیٹا پر دلیل کی کان کنی کر سکتے ہیں؟ کا جواب ایک اور سوال تھا: آپ کتنے ہزار دستاویزات کو پہلے ہاتھ سے تشریح کرنے کے لیے تیار ہیں، اور رہنما کون لکھے گا؟

یہ کوئی تکنیکی تفصیل نہیں تھی۔ یہ وہ وجہ تھی کہ دلیل کی کان کنی تحقیقاتی لیبز میں رہی جبکہ جذباتی تجزیہ ہر پروڈکٹ میں شامل ہوا۔ تشریح کی ضرورت نے ہر نئے شعبے کو ایک منصوبہ بنا دیا بجائے اس کے کہ وہ ایک ترتیب ہو، اور جیسا کہ اس سلسلے کی دوسری پوسٹ میں بیان کیا گیا، ہدایات خود ماہرین کے درمیان بھی متنازع تھیں۔

پھر عمومی مقصد کے زبان ماڈلز آئے اور سوال پوچھنا بند ہوگیا۔ آپ اب کسی میٹنگ کے نقل کو ایسے شعبے میں نشانہ بنا سکتے ہیں جس کی کبھی بھی تشریح نہیں کی گئی اور ایک قابل استعمال ابتدائی نتیجہ حاصل کر سکتے ہیں۔ اگر آپ نے کبھی سوچا ہے کہ یہ صلاحیت اچانک مصنوعات میں کیوں ظاہر ہوئی نہ کہ بتدریج، تو یہی وجہ ہے۔

زیرو شاٹ پوری کہانی ہے

جو خاص چیز تبدیل ہوئی ہے وہ ڈومین مخصوص نگرانی کا خاتمہ ہے۔ ایک پروپٹڈ ماڈل زبان کے ساتھ عمومی قابلیت لاتا ہے اور اسے بتایا جا سکتا ہے کہ دعویٰ کیا ہے اور مفروضہ کیا ہے، پرامپٹ میں، استدلال کے وقت۔

رشتہ پر مبنی دلیل کی کان کنی پر شائع کردہ کام نے عمومی مقصد کے ماڈلز کو چند مثالوں کے اشارے کے ساتھ متعدد ڈیٹا سیٹس میں عمدہ طور پر ایڈجسٹ کردہ انکوڈر کی بنیادوں کے ساتھ مقابلہ کرتے ہوئے پایا ہے — اور بعض صورتوں میں ان سے آگے بھی۔ ایک ایسے میدان کے لیے جس کی پوری تشخیصی مشینری کو تشریح شدہ کارپس کے خلاف نگرانی شدہ تربیت پر بنایا گیا تھا، یہ ایک حقیقی عدم تسلسل ہے۔

تین عملی نتائج نکلتے ہیں۔ ڈومین ایڈاپٹیشن دوبارہ تربیت کرنے کے بجائے پرامپٹ سوئچنگ بن جاتا ہے۔ طویل دستاویزات قابل عمل ہو جاتی ہیں، کیونکہ سیاق و سباق کی کھڑکیاں بڑھ گئی ہیں۔ اور ثبوت کا میدان ایک وضاحت فراہم کر سکتا ہے، کیونکہ ماڈل سے اسی کال میں اپنے آپ کو جواز فراہم کرنے کے لیے کہا جا سکتا ہے — جو کہ سننے میں جتنا لگتا ہے اس سے زیادہ اہم ثابت ہوتا ہے۔

تین مسائل جو نہیں ہلے

پچھلی پوسٹ میں بیان کی گئی ہر بات اب بھی درست ہے، اور یہ واضح کرنا ضروری ہے کہ محض پیمانہ بڑھانے سے ان میں سے کوئی مسئلہ کیوں حل نہیں ہوتا۔

  • کلاس عدم توازن لکھنے کی ایک خصوصیت ہے، تربیت کی نہیں۔ لوگ کیس بنانے کے لیے زیادہ تر حمایت کرنے والے جملے لکھتے ہیں۔ ایک ماڈل جس نے پورے انٹرنیٹ کا مطالعہ کیا ہے، اس نے زیادہ تر اتفاق بھی پڑھا ہے۔
  • سیاق کی انحصاری ایک خاصیت ہے۔ حمایت اور حملہ تعلقات ہیں، جملے کی خصوصیات نہیں۔ ایک ہی جملہ ایک مختلف والد کے تحت ایک مختلف لیبل رکھتا ہے، اور دنیا کے علم کی کوئی مقدار اس کو نہیں بدلتی۔
  • غیر بیان کردہ وارنٹ متن کی ایک خاصیت ہے۔ اگر نتیجے سے ثبوت کو جوڑنے والا اصول کبھی تحریر نہیں کیا گیا، تو یہ ان پٹ میں نہیں ہے۔ ایک بڑا ماڈل اسی غیر موجود جملے کو پڑھتا ہے۔

ایک چوتھا، زیادہ لطیف ہے۔ ایک روان ماڈل روان نتائج پیدا کرتا ہے، اس لیے اس کی غلطیاں اچھی طرح سے بیان کی گئی اور اندرونی طور پر متوازن ہوتی ہیں۔ ایک انکوڈر سے غلط تعلق کا لیبل شور کی طرح لگتا ہے۔ ایک زبان ماڈل سے غلط تعلق کا لیبل ایک دلیل کی طرح لگتا ہے۔

نیا جال: ماڈل کی اپنی یقین پر اعتماد کرنا

کیونکہ یہ ماڈل یہ رپورٹ کر سکتے ہیں کہ وہ کتنے پختہ ہیں، اس لیے اس نمبر کا استعمال کرنا دلکش ہے — نکالی گئی دلیلوں کی درجہ بندی کرنے کے لیے، یہ فیصلہ کرنے کے لیے کہ کون سی اہم ہیں، یہ طے کرنے کے لیے کہ کیا دکھایا جائے۔

سوراو کڈوتھ اور ان کے ساتھیوں کے کام نے یہ پایا کہ زبانی خود تشخیص خام ٹوکن امکانات کے مقابلے میں معنی خیز طور پر بہتر طور پر ترتیب دی گئی ہے۔ اس نتیجے کو اکثر اس نمبر پر اعتماد کرنے کی اجازت کے طور پر حوالہ دیا جاتا ہے۔ بعد کی تشخیص مسلسل کم حوصلہ افزا رہی ہے: متبادل سے بہتر ہونا قابل اعتماد ہونے کے مترادف نہیں ہے، اور ترتیب بالکل اسی جگہ خراب ہوتی ہے جہاں آپ کو اس کی ضرورت ہوتی ہے، مشکل اور غیر معمولی معاملات میں۔

عمل میں ایک زمرہ کی غلطی بھی چھپی ہوئی ہے۔ اعتماد اس بات کی پیمائش کرتا ہے کہ ماڈل کتنی یقین کے ساتھ یہ جانتا تھا کہ اس نے ایک حقیقی دلیل تلاش کی ہے۔ یہ اس بات کے بارے میں کچھ نہیں کہتا کہ آیا وہ دلیل بحث کے لیے مرکزی ہے یا نہیں۔ ایک واضح طور پر بیان کردہ شماریات ایک آسان، اعلیٰ اعتماد کی استخراج ہے؛ جبکہ وہ جملہ جو دراصل تھیسس ہے، ایک مشکل ہے۔ اعتماد کے لحاظ سے درجہ بندی شواہد کو فروغ دیتی ہے اور دعووں کو کم کرتی ہے — جو کہ بالکل وہی ناکامی ہے جس کا آغاز اس سلسلے کی آخری پوسٹ میں کیا گیا ہے۔

اسے اس نقل پر آزماؤ جسے آپ اچھی طرح جانتے ہیں۔

ایک ایسی میٹنگ کا ذکر کریں جس کا نتیجہ آپ کو واضح طور پر یاد ہو اور کسی بھی AI ٹول سے پوچھیں کہ بنیادی دلیل کیا تھی۔ اگر یہ آپ کو سب سے درست، بہترین ثبوت والی جملہ فراہم کرتا ہے بجائے اس کے کہ جو واقعی فیصلے کو متاثر کرتا ہے، تو آپ نے دیکھا کہ اعتماد نے اہمیت کی جگہ لے لی ہے — اور آپ اب جانتے ہیں کہ اس درجہ بندی پر اعتماد نہیں کرنا چاہیے۔

مدد: پہلے یہ کہنا کیوں ہے؟

ان ماڈلز کے ساتھ دستیاب سب سے قابل اعتماد بہتری تقریباً شرمندگی سے سادہ ہے۔ لیبل سے پہلے وجہ پوچھیں۔

ایک ماڈل کو یہ لکھنے کی ضرورت ہے کہ ایک شراکت اپنے والدین کے لیے کیا کرتی ہے — یہ اوپر دی گئی اعتراض کو مزید تقویت دیتا ہے، کیونکہ یہ اس اعتراض کے برقرار رہنے کی ایک اور وجہ فراہم کرتا ہے — حمایت یا حملے کے فیصلے پر عمل کرنے سے پہلے اس فیصلے کو قابل پیمائش طور پر بہتر بناتا ہے۔ لکھا ہوا مرحلہ والدین کے تعلق کو ماڈل کے کام کرنے کے سیاق و سباق میں مجبور کرتا ہے، جو کہ بالکل وہ معلومات ہے جو جملے کی عبارت فراہم کرنے میں ناکام رہتی ہے۔

یہ ایک مکمل انسانی تکنیک کا مشینی ورژن ہے۔ یہی وجہ ہے کہ اسٹیل میننگ کام کرتا ہے: یہ بیان کرنا کہ ایک دلیل واقعی کیا کر رہی ہے، اس کا فیصلہ کرنے سے پہلے، فیصلے کو تبدیل کرتا ہے۔

کیا یہ دلیل کی کان کنی حل ہو گئی ہے؟

نہیں، اور جو باقی بچا ہے اس کی شکل اب پہلے سے زیادہ واضح ہے۔

جو حل ہوا ہے، عملی طور پر بات کی جائے تو، وہ رسائی ہے۔ آج کوئی بھی تنظیم اپنے متن پر دلیل کی کان کنی کر سکتی ہے بغیر کسی تشریحی پروگرام کے، جو چند سال پہلے ناممکن تھا۔ یہ ایک حقیقی اور بڑا تبدیلی ہے۔

جو حل نہیں ہوا وہ ساخت ہے: کون سا تعاون کس کا جواب دیتا ہے، اور کس سمت میں، جب کہ جڑنے والا اصول بیان نہیں کیا گیا اور ڈیٹا نے سب کو — انسان اور مشین — اتفاق کی توقع کرنے کی تربیت دی ہے۔ ایماندارانہ حیثیت یہ ہے کہ نکاسی اب کسی بھی شعبے میں ایک اچھا مسودہ تیار کرتی ہے، اور ایک شخص کو اب بھی اختلافات کی جانچ کرنی پڑتی ہے۔ یہ کام کی تقسیم اس سے کہیں بہتر ہے جہاں کوئی بھی ساخت نہیں بناتا۔

اسے صحیح طریقے سے کیسے استعمال کریں

  • اعتماد کے لحاظ سے درجہ بندی نہ کریں۔ یہ نکاسی کی یقین دہانی کو ماپتا ہے، اہمیت کو نہیں، اور یہ نظامی طور پر دعووں کے مقابلے میں شواہد کو فروغ دیتا ہے۔
  • رشتہ پوچھیں، جذبات نہیں۔ مفید سوال یہ ہے کہ یہ اس کے والدین کے لیے کیا کرتا ہے — کبھی بھی یہ نہیں کہ اس موضوع کے بارے میں یہ کیسا محسوس کرتا ہے۔
  • اسے لیبل دینے سے پہلے اس کی وضاحت کریں۔ تحریری وجوہات وہ ہیں جو والدین کے تعلق کو سیاق و سباق میں رکھتی ہیں، اور یہی وہ جگہ ہے جہاں آپ غلطیاں پکڑتے ہیں۔
  • اپنے جائزے کا وقت اختلافات پر صرف کریں۔ یہی وہ جگہ ہے جہاں ماڈلز کمزور ہوتے ہیں اور جہاں فیصلہ سازی کی قیمت مرکوز ہوتی ہے۔

ایک بہتر مسودہ، فیصلہ نہیں

وہ رکاوٹ جو دلیل کی کان کنی کو لیب میں رکھے ہوئے تھی ختم ہو چکی ہے، اور یہ واپس نہیں آئے گی۔ اس بارے میں واضح ہونا ضروری ہے: یہ ایک تحقیقی تکنیک اور کچھ ایسا ہے جسے آپ اپنی میٹنگز میں دکھا سکتے ہیں۔

لیکن 1958 میں جو مسائل مشکل تھے وہ اب بھی مشکل ہیں۔ وارنٹ ابھی تک غیر تحریر شدہ ہے، اختلاف رائے اب بھی نایاب ہے، اور لیبل اب بھی والدین پر منحصر ہے نہ کہ الفاظ پر۔ جو چیز بدلی ہے وہ یہ ہے کہ مسئلہ کس کے پاس ہے — جو کہ ایک ایسے میدان کے لیے ہے جس نے بیس سال تشریح کرنے والوں کا انتظار کیا، یہ کافی تبدیلی ہے۔

دلائل نکالنے کی سیریز

پانچ مضامین کہ مشینوں نے دلائل پڑھنا کیسے سیکھا — یہ میدان کہاں سے آیا، اس کے مشکل مسائل کیوں مشکل ہیں، اور ہم اسے کیسے استعمال کرتے ہیں۔

اکثر پوچھے جانے والے سوالات

بڑے زبان ماڈلز نے دلیل کی کھدائی کو کس طرح تبدیل کیا؟

انہوں نے ہر نئے شعبے میں ہاتھ سے تشریح شدہ کارپس کی ضرورت کو ختم کر دیا۔ ایک متحرک عمومی مقصد کا ماڈل دعوے، مقدمات اور تعلقات کی شناخت کر سکتا ہے بغیر کسی شعبے کے مخصوص تربیتی ڈیٹا کے، جس نے دلیل کی کان کنی کو ایک تحقیقی تکنیک سے تبدیل کر دیا جو عام تنظیمی متن پر قابل استعمال ہے۔

کیا LLMs دلیل نکالنے میں بہتر ہیں بجائے فائن ٹیونڈ ماڈلز کے؟

رشتہ پر مبنی دلیل کی کان کنی پر شائع کردہ تشخیصات نے یہ پایا ہے کہ عمومی مقاصد کے ماڈلز کئی ڈیٹا سیٹس میں بہتر یا ان کے مقابلے میں مسابقتی ہیں جو کہ خاص طور پر ترتیب دیے گئے انکوڈر بیس لائنز کے ساتھ ہیں۔ عملی طور پر بڑا فائدہ یہ ہے کہ انہیں کسی نئے شعبے کے لیے بالکل بھی تشریح شدہ تربیتی ڈیٹا کی ضرورت نہیں ہوتی۔

ایل ایل ایمز نے کون سے مسائل حل نہیں کیے؟

تین ساختی عناصر۔ کلاس کا عدم توازن اس بات کی عکاسی کرتا ہے کہ لوگ کس طرح لکھتے ہیں نہ کہ ماڈلز کس طرح تربیت پاتے ہیں۔ حمایت بمقابلہ حملہ والدین پر منحصر ہے، الفاظ پر نہیں۔ اور اعتراضات اکثر ایک غیر بیان کردہ ضمانت کو نشانہ بناتے ہیں جو متن میں موجود نہیں ہوتی، لہذا ماڈل کی قابلیت کی کوئی مقدار اسے فراہم نہیں کرتی۔

کیا آپ ماڈل کے اعتماد کے اسکور پر بھروسہ کر سکتے ہیں؟

یہ ایک درجہ بندی کے اشارے کے طور پر نہیں ہے۔ زبانی اعتماد خام ٹوکن کی ممکنات کے مقابلے میں بہتر طور پر متوازن ہے لیکن یہ مطلق طور پر غیر قابل اعتبار رہتا ہے، اور یہ نکاسی کی یقین دہانی کو ماپتا ہے نہ کہ اہمیت کو — لہذا اس کے ذریعے درجہ بندی کرنا منظم طور پر اچھی طرح سے ثابت شدہ تفصیلات کو ان ڈھیلے جملوں پر ترجیح دیتا ہے جو حقیقی دعوے رکھتے ہیں۔

LLMs کے ساتھ تعلق کی درجہ بندی کو اصل میں کیا بہتر بناتا ہے؟

ماڈل سے یہ بیان کرنے کی ضرورت ہے کہ ایک شراکت اپنے والدین کے لیے کیا کرتی ہے، اس سے پہلے کہ وہ حمایت یا حملے کے لیبل پر عزم کرے۔ یہ تحریری مرحلہ والدین کے تعلق کو کام کرنے کے سیاق و سباق میں لاتا ہے، جو کہ بالکل وہ معلومات ہے جو جملے کی اپنی الفاظ فراہم کرنے میں ناکام رہتی ہے۔

کیا دلیل نکالنا اب ایک حل شدہ مسئلہ ہے؟

رسائی کا مسئلہ حل ہو گیا ہے — کوئی بھی تنظیم اسے اپنے متن پر بغیر کسی تشریحی پروگرام کے چلا سکتی ہے۔ ساخت کا مسئلہ ابھی حل نہیں ہوا۔ یہ فیصلہ کرنا کہ کون سا تعاون کس کا جواب دیتا ہے، اور کس سمت میں، ابھی بھی مشکل ہے، اس لیے نکاسی ایک اچھا مسودہ تیار کرتی ہے اور ایک شخص اب بھی اختلافات کا جائزہ لیتا ہے۔

AT

Argumentree Team

Decision Science

The Argumentree team explores the science of better decisions—from ancient philosophy to modern AI.

اسے اپنے ٹرانسکرپٹ پر چلائیں۔

کوئی تشریحی پروگرام نہیں، کوئی کارپس نہیں، کوئی تربیتی دور نہیں — صرف جائزے کے لیے ایک منظم فوائد اور نقصانات کا درخت۔

مفت شروع کریں

متعلقہ مطالعہ