هوش مصنوعی چطور آموزش داده میشود؟ از داده خام تا پاسخ هوشمند
قبل از اینکه تماشا کنید: این ویدیو در دی ماه ۱۴۰۴ و قبل از قطع اینترنت در استودیو دیجیاتو ضبط شده است.
هوش مصنوعی یکی از مهمترین فناوریهای تحولآفرین عصر حاضر است و درک نحوه آموزش مدلهای زبانی میتواند به ما کمک کند تا بهتر بفهمیم این سیستمها چگونه قادرند متن تولید کنند، تحلیل انجام دهند و پاسخهای پیچیده ارائه دهند. فرآیند آموزش یک مدل زبانی پیشرفته شامل مراحلی دقیق، گسترده و مبتنی بر داده است که در این ویدیو به صورت گامبهگام تشریح شده است.
این ویدیو پیش از قطعی اینترنت تولید شده است. :)
در اولین مرحله، دادهها نقش ستون اصلی را ایفا میکنند. میلیونها سند، متن، مقاله، مکالمه و منابع نوشتاری با دقت گردآوری میشوند تا مدل بتواند الگوهای زبان طبیعی را بیاموزد. سپس این دادهها پاکسازی و نرمالسازی میشوند؛ یعنی عناصر تکراری، نویزها، دادههای ناکامل و محتواهای نامعتبر حذف میشود تا مدل با اطلاعات درست و ساختارمند آموزش ببیند.
پس از آمادهسازی داده، مرحله پیشپردازش آغاز میشود. در این بخش، متنها به توکن تبدیل میشوند؛ واحدهایی کوچکتر که مدل از طریق آنها ساختار زبان را درک میکند. سپس مدل وارد مرحله یادگیری میشود که هسته اصلی فرآیند است. در این مرحله، شبکه عصبی ترنسفورمر با استفاده از میلیاردها پارامتر، تلاش میکند روابط میان کلمات، معنا، جملهسازی و منطق زبانی را بیاموزد. این یادگیری از طریق محاسبه خطا و اصلاح وزنها انجام میشود؛ به گونهای که مدل بهتدریج در پیشبینی توکن بعدی و ساخت متن دقیقتر میشود.
مرحله بعد، تنظیمهای پیشرفته و آموزش تکمیلی است. در این مرحله مدل با استفاده از دادههای تخصصیتر یا روشهایی مانند یادگیری تقویتی با بازخورد انسانی (RLHF) بهبود مییابد. این کار کمک میکند مدل نه فقط زبان را بفهمد، بلکه بتواند محتوایی سازگار با نیازها، ارزشها و دستورالعملهای انسانی تولید کند.
در پایان، مدل تحت آزمون، اعتبارسنجی و ارزیابی دقیق قرار میگیرد تا عملکرد آن در حوزههای مختلف سنجیده شود. این ارزیابیها شامل تستهای کیفیت متن، سازگاری معنایی، ایمنی و توانایی پاسخدهی است. نتیجه این مراحل، مدلی است که میتواند پاسخهای طبیعی، دقیق و سازگار ارائه دهد.
این ویدیو تمامی این مراحل را با زبانی روان اما کاملاً فنی توضیح میدهد تا مخاطب درک دقیقی از سازوکار شکلگیری یک مدل زبانی هوش مصنوعی داشته باشد.
دیدگاهها و نظرات خود را بنویسید
برای گفتگو با کاربران ثبت نام کنید یا وارد حساب کاربری خود شوید.

در حقیقت، هوش مصنوعی تنها چیزی که نیست هوشه! چون مفهوم درک درش وجود نداره!
یعنی ورودی اشتباه باعث خروجی اشتباه میشه.!
در حقیقت یه دایرةالمعارف پیشرفته است!
مرسی، آموزنده بود.
امروز برای اولین بار و در وبسایت آپارات این مطلب رو دیدم، و فقط از سر کنجکاوی دیدمش!
خیلی خوبه که زحمت کشیدید و این ویدئو رو ساختید! چه قبل از قطع شدن اینترنت چه حالا، کمی بعد از دیدنش حالم بد شد و مجبور شدم برای اولین بار به سایت شما بیام و اکانت بسازم که چند جمله در رد بخش زیادی از ادعاهای مطرح شده در این ویدئو حرف بزنم. فقط به این دلیل که شما به عنوان یک خبرگزاری یا چیزی در این حدود در بخش اینترنت فعال هستید و انتظار نداشتم که این همه غلط رو با اصرار در رابطه با یک فناوری که الان بلوپرینت هاش واضح هست به خورد مخاطب خودتون بدید!
این ویدوئی که شما ساختید یک داستان پر از غلط علمی و فنی هست و دارید به مخاطب دیتای غلط و دستکاری شده میدید! چه در تعاریف، چه در پردازش و ترانسفورمر ها و چه در بخش قابلیت ها.
شما که اینترنت دارید یک بار حداقل چند تا پادکست خوب ببینید و درست کپی کنید، پیشنهاد می کنم پادکست های لکس فرید من با آندرج کارپاتی رو ترجمه کنید بزارید که ارزشش از خزعبلاتی که سر هم کردید به مراتب بیشتره.
من که هیچ اشتباهی در تمام توضیحات ایشون ندیدم و نشنیدم، شاید شما انتظار داشتید در چند دقیقه برای مخاطب عام پروپوزال تخصصی ارایه بشه؟!
شما اگر هدفتون اصلاح یک توضیح اشتباه بود، باید با اشاره دقیق ضمن ارایه دلیل توضیحات صحیحی (از دید شما) رو مینوشید. نه اینکه .!
میگن یه علامه ای بوده که یک شب خواب میبینه که یه موجودی در گوشش الحمدالله میگه و فرداش سر جلسه ی معلمش حس میکنه هر چی معلم میخواد بگه این از قبل میدونه و تند تند میپره تو حرف معلم که جملش رو تموم کنه که نشون بده منم هستم. که بعد از مدتی معلم عصبی میشه بر میگرده بهش میگه : اقا جون اونی که دیشب در گوشت الحمدالله گفت، در گوش من تا والظالین ش رو هم خونده! حالا بشین سر جات و گوش بده!
دکتر یکم تخصصی صحبت کن متوجه شیم
قبلا ها فقط 7 ساعت میخوابیدم ولی الان به خاطر نبود اینترنت 12 ساعت میخوابم
و وقتی هم که بیدارم فکر میکنم که چرا این جا به دنیا اومدم چرا ؟
سلام
تک تاک رو تو آپارات گذاشتین ولی تو سایترمطلبش رو نذاشتین؛ ویو پایین میمونه اگه نذارین، از ما گفتن بود
کوروش و مانی کجان پس؟! :)
لطفا قابلیت لایک مطلب و دیسلایک کامنت هارو اضافه کنید
باتشکر از تیم دولپ دیجیاتو
اگه نت وصل بود از هوش مصنوعی میخواستم ویدئو رو برآم خلاصه کنه.
که نیاز به اینترنت داره
آقا تک تاک سه شنبه ی ما کوجاس
جای کوروش خالی که بگه " که نیاز به اینترنت داره "
امشب تک تاک داریم؟
یک سوال برای ساخته ساختار های داده یا همون ساخت llm ایران نمیخواد درست کنه یا نمیتونه؟ چون واژه نمیتونه یکم از ذهن دوره چون بلخره زبان همون زبانه کامپیوتر همون کامپیوتره...
جدای همه ی جواب های چرا در ایران که همه مشترک هستند
فکر میکنم کمبود منابع پاذسی یکی از دلایلش باشه!.
ولی شما رو همون پاسخ مشترک همه چراها در ایران حساب کن!
نمیتونه داداش یذار یه ایده بدم بهت. مدل DeepSeekV3 که خیلییی واقعا شق القمر کرده با کلیییی نوآوری که تو دنیا قبلا نبوده و... تونسته با 2 ماه وقت گذاشتن روی 2048 تا جی چی یو H800 (که الان هر کدوم 34 هزار دلار قیمت کارخونه داره یعنی مجموع 70 میلیون دلار) مدلشو بسازه. این تو حالتی بوده که دولت کاملا پشتشون بوده، محدودیت نت و داده براشون نذاشته بودن، و مهمتر از همه، تحریم نبودن و میتونستن جی چی یو ها رو به قیمتش بخرن و وارد کنن. اگه قرار بود تو ایران درست کنن یا غیرممکن بود یا چندین برابر باید پول و وقت میذاشتن. بازم میگم این با کلی نوآوری بود. مثلا GPt4 رو با 25000 تا جی پی یو 10 هزار دلاری (250 میلیون دلار) ساختن که اصلا تو ایران پولشم داشته باشی نمیتونی بسازی.
و اخرش که چی؟ براشون هیچ سودی نداره چون تو میتونی بری از هوش مصنوعی خیلی بهتر و آزادتر استفاده کنی. و اینکه بخوان یه هوش مصنوعی درست کنن که متخصص باشه توی فارسی به جای اینکه از اول بسازن میان یکی از مدل های اونا رو بر میدارن و اموزشش رو با یه سری داده فارسی ادامه میدن، و احتمالا خیلی کیفیت بالاتری هم از مدلی که از پایه برا فارسی ساخته شده داشته باشه.
اهاااا ممنونم واقعا برام سوال بود مرسی داداش
حتی هوش مصنوعی از اشتباهاتش درس میگیره اما عبرت نه
عشق مایی سیستانی
اینترنت میخواد
اصلا دوستانی که میان میگن چت بات داخلی🫥 رو درک نمیکنم میان میگن باز خوبه کار راه اندازه!!! 😑😑
میگی سلام میگه سلام یعنی فلان... هزار خط توضیح میده، خنگ که چی باز خنگ بودن هم خوب بود، داغونن
تو یه چت یه چیزی میگه تو چت جدید یه چیز دیگه
اونایی که از Deep Seek یا Chatgpt یا... استفاده کرده بودن قشنگ درک میکنن این موضوع رو
سلام دوستان خسته نباشید بابت مطالب
ولی متاسفانه تامین معاش زندگی باعث شده که از علایق دست بکشیم در این شرایط
فقط به قول مانی زندگی زورش از همه بیشتره ولی متاسفانه خیلی هامون زورمون تموم شده و توانی برای صبر کردن تا پیروزی زندگی نداریم
به امید دیدار
ما ملتی هستیم که گوگل رو برامون با سیف سرچ فعال باز کردند که یه وقت خدای نکرده سرچ بی ادبی نکنیم شما از نحوه تمرین هوش مصنوعی برامون میگید؟!!
همونم دوباره بسته شد
کم کم قطعی اینترنت به روز پنجاه و پنجم میرسه و این وصل مجدد نیمه جون و نصفه کاره هم بدرد نمیخوره،از همه پروژه های مطالعاتیم بر هوش مصنوعی هم عقب افتادم
واقعا دیگه نمیدونم چه بلایی میخاند سرمون بیارن
الان اتومات به عصر حجر برگشتیم با این قطعی اینترنت بین الملل دیگه لازم نیس کشورهای دیگه در حقمون انجام بدند واقعا که
نیمه جون؟
الان ۱ درصد وصله
اصلا وصل نیست 😐
قطع شده گوگل ساعت ۱٢ ظهر سهشنبه
همین کلیپ تو آپارات با نت ملی بیشتر از ۵۰۰ مگ پامون می افته. اگر یوتیوب بود پنجاه مگ هم نمیشد.