فرایادگیری (علم اعصاب)
 | این مقاله نیازمند ویکیسازی است. لطفاً با توجه به راهنمای ویرایش و شیوهنامه، محتوای آن را بهبود بخشید. |
 | این مقاله نیازمند تمیزکاری است. لطفاً تا جای امکان آنرا از نظر املا، انشا، چیدمان و درستی بهتر کنید، سپس این برچسب را بردارید. محتویات این مقاله ممکن است غیر قابل اعتماد و نادرست یا جانبدارانه باشد یا قوانین حقوق پدیدآورندگان را نقض کرده باشد. |
فرایادگیری یا دگریادگیری (به انگلیسی: Metalearning) یک اصطلاح علوم اعصاب است که توسط کنجی دویا معرفی شده‌است،[۱] به عنوان نظریه‌ای که نشان می‌دهد چگونه انتقال دهنده‌های عصبی سازوکارهای یادگیری توزیع‌شده را در غده‌های قاعده‌ای تسهیل می‌کنند. این نظریه در درجه اول شامل نقش انتقال دهنده‌های عصبی در تنظیم دینامیکی نحوه تعامل الگوریتم‌های یادگیری محاسباتی[۲] برای تولید انواع رفتار یادگیری قوی است که در حال حاضر منحصر به اشکال زندگی بیولوژیکی است.[۳] با اینکه اصطلاح فرایادگیری قبلاً در زمینه‌های روان‌شناسی اجتماعی و علوم رایانه به کار رفته‌است، اما در اینجا مفهومی کاملاً جدید را مطرح می‌کند که برای پر کردن شکاف‌ها بین شبکه‌های عصبی، علوم کامپیوتر و یادگیری ماشین نیاز بکار می‌رود.
گفته می‌شود که نظریه فرایادگیری بر پایه کارهای قبلی دویا در الگوریتم‌های یادگیری یادگیری تحت نظارت، یادگیری تقویتی و یادگیری بدون نظارت به ترتیب در مخچه، گانگلیون پایه و قشر مطرح شده‌است[۲] و از جمله تلاش‌هایی است که برای یکسان کردن فرایند انتخاب پویا برای این سه الگوریتم یادگیری به یک سازوکار تنظیمی قابل تقلیل به انتقال‌دهنده‌های عصبی منفرد انجام شده‌است.
فرایادگیری
[ویرایش]ایده اصلی فرایادگیری این است که یادگیری سراسری را می‌توان به عنوان تابعی از انتخاب کارآمد چهار پی‌ترازه (به انگلیسی: Neuromodulators) که در ادامه معرفی می‌شوند مدل‌سازی کرد. در حالی که هیچ مدل سازوکاررانه برای جایی که فرایادگیری درنهایت در سلسله مراتب نمایندگی وجود دارد ارائه نشده‌است، این مدل تاکنون پویایی لازم برای استنتاج وجود چنین عاملی را در یادگیری بیولوژیکی به عنوان یک کل نشان داده‌است. در حالی که مدل‌های محاسباتی و سیستم‌های اطلاعاتی هنوز با پیچیدگی یادگیری انسان فاصله دارند. فرایادگیری مسیر امیدوارکننده‌ای را برای تکامل آینده چنین سیستم‌هایی فراهم می‌کند زیرا آنها به‌طور فزاینده‌ای به پیچیدگی دنیای بیولوژیکی نزدیک می‌شوند.
نقش پی‌ترازه‌ها
[ویرایش]دوپامین
[ویرایش]دوپامین که به عنوان یک سیگنال «یادگیری سراسری» عمل کند و برای پیش‌بینی پاداش‌ها و تقویت عمل حیاتی است. به این ترتیب، دوپامین در یک الگوریتم یادگیری نقش دارد که در آن بازیگر، محیط و منتقد به یک تعامل پویا محدود می‌شوند که درنهایت به دنبال به حداکثر رساندن مجموع پاداش‌های آینده با تولید یک سیاست انتخاب کنش بهینه است. در این زمینه، منتقد و بازیگر به عنوان لبه‌های شبکه مستقلی شناخته می‌شوند که یک عامل پیچیده را نیز تشکیل می‌دهند. این عامل به‌طور جمعی بر وضعیت اطلاعات محیط تأثیر می‌گذارد، که برای محاسبات آینده به عامل بازخورد داده می‌شود. از طریق یک مسیر جداگانه، محیط نیز به شکل پاداش به دست آمده از طریق عمل داده شده به منتقد بازخورد داده می‌شود، به این معنی که می‌توان به تعادلی بین پاداش پیش‌بینی شده سیاست معین برای یک وضعیت معین و چشم‌انداز در حال تکامل پاداش‌های آینده دست یافت.
سروتونین
[ویرایش]سروتونین برای کنترل تعادل بین پیش‌بینی پاداش کوتاه‌مدت و بلندمدت، اساساً با «تخفیف» متغیر مبالغ پاداش آینده مورد انتظار که ممکن است برای دستیابی به هزینه‌های بیش از حد نیاز داشته باشد، پیشنهاد می‌شود. به این ترتیب، سروتونین ممکن است انتظار پاداش را در سطح شبه عاطفی تسهیل کند، و بنابراین، بسته به تقاضای کار، و طول مدت تداوم مورد نیاز، اصرار در رفتار پاداش جویانه را تشویق یا منع می‌کند. از آنجایی که پیش‌بینی پاداش جهانی از نظر تئوری ناشی از محاسبات مدوله‌شده سروتونین است که با محاسباتی که به‌طور مشابه توسط دوپامین مدوله شده‌اند، به حالت ثابتی می‌رسند. سیگنال دهی بالای سروتونرژیک ممکن است محاسبات دوپامین را نادیده بگیرد و الگوی متفاوتی از پاداش ایجاد کند که از نظر ریاضی به تنهایی از طریق محاسبات مدوله شده با دوپامین قابل دوام نیست.
نوراپی‌نفرین
[ویرایش]نوراپی‌نفرین برای تسهیل «کاوش گسترده» با انتخاب عمل تصادفی پیشنهاد شده‌است. انتخاب بین تمرکز بر استراتژی‌های شناخته شده و مؤثر یا انتخاب راهبردهای آزمایشی جدید درنظریه احتمال به عنوان مسئله اکتشاف- بهره‌برداری شناخته می‌شود.[۴] بنابراین، تأثیر متقابل بین فوریت‌های موقعیتی، و اثربخشی استراتژی‌های شناخته شده، بر معضل بین انتخاب قابل اعتماد برای بزرگ‌ترین پاداش پیش‌بینی شده و انتخاب اکتشافی خارج از پارامترهای شناخته شده تأثیر می‌گذارد. از آنجایی که آبشارهای شلیک عصبی (مانند آنهایی که برای چرخاندن کامل چوب گلف لازم است) بنا به تعریف ناپایدار و مستعد تغییر هستند؛ بنابراین نوراپی نفرین قابل اعتمادترین الگوی اجرایی شناخته شده را در سطوح بالاتر انتخاب می‌کند و امکان انتخاب تصادفی و غیرقابل اعتماد بیشتری را در سطوح پایین با هدف کشف استراتژی‌های بالقوه کارآمدتر در فرایند فراهم می‌کند.
استیل‌کولین
[ویرایش]استیل کولین برای تسهیل تعادل بین ذخیره‌سازی حافظه و تجدید حافظه،[۵] برای یافتن تعادل بهینه بین ثبات و اثربخشی الگوریتم‌های یادگیری برای کار محیطی خاص، پیشنهاد شده‌است؛ بنابراین استیل کولین انعطاف‌پذیری را در هیپوکامپ، قشر مغز و مخطط تعدیل می‌کند تا شرایط یادگیری ایده‌آل در مغز را تسهیل کند؛ بنابراین سطوح بالای استیل کولین امکان یادگیری بسیار سریع و بازسازی اتصالات سیناپسی را فراهم می‌کند و درنتیجه یادگیری موجود ممکن است لغو شود. به همین ترتیب، یادگیری حالت‌هایی که در یک وضوح زمانی طولانی اتفاق می‌افتد ممکن است قبل از رسیدن به یک سطح عملکردی نادیده گرفته شود، و بنابراین یادگیری ممکن است خیلی سریع اتفاق بیفتد که واقعاً به‌طور مؤثر انجام شود. در سطوح پایین‌تر نوراپی‌نفرین، تغییرات پلاستیکی بسیار آهسته‌تر اتفاق می‌افتد، به‌طور بالقوه در برابر شرایط یادگیری غیرمفید محافظت می‌کند یا اجازه می‌دهد تغییرات اطلاعاتی تفکیک زمانی بسیار وسیع‌تری را در بر بگیرد.
مسیرهای یادگیری در مغز
[ویرایش]محققان گروه روان‌شناسی تجربی، مرکز ولکام و گروه علوم اعصاب بالینی Nuffield، از اسکنر MRI، در حالی که داوطلبان وظیفه‌هایی را همراه با یک پاداش انجام می‌دادند، برای مشاهده تغییرات در بخش‌هایی از مغز در ارتباط با یادگیری و تجربیات آموخته شده استفاده کردند. آنها دریافتند که تغییراتی که در مسیرهای عصبی شرکت کنندگان در ارتباط با یادگیری مشاهده می‌شود، بسته به نحوه یادگیری مهارت جدید هر فرد متفاوت است. میریام کلین فلگ، از گروه روان‌شناسی تجربی، اذعان داشت: «ما می‌دانیم که انسانها می‌توانند به روشهای مختلف یاد بگیرند. بعضی اوقات ما فقط با مشاهده روابط در جهان، مانند یادگیری چیدمان یک شهر جدید یا روابط بین مردم، یادمی‌گیریم.» اما راه دیگر برای یادگیری تعیین اهداف خاص است، مانند کودکانی که یادمی‌گیرند اسباب بازی‌ها را از طریق آزمایش و خطا بشناسند و نحوه بازی با آنها را فرا بگیرند. آنها دریافتند تغییراتی که در مسیرهای عصبی شرکت کنندگان در ارتباط با یادگیری مشاهده می‌شود، بسته به نحوه یادگیری مهارت جدید هر فرد متفاوت است. این تحقیق نشان می‌دهد که ما چندین سازوکار و پتانسیل در مغز داریم که به ما کمک می‌کنند دانش یا تجربه‌های آموخته شده را ذخیره کنیم، به این معنی که آسیب به یک قسمت از مغز هنوز سازوکارهای جایگزین برای یادگیری باقی می‌گذارد.[۶][۷]
ما همچنین آموخته‌ایم که یادگیری برخی از این دانش‌ها بسیار پایدار است، و مغز آن را فراموش نمی‌کند، در حالی که دانش به دست آمده از طریق سازوکارهای یادگیری جایگزین، می‌تواند به راحتی به دانش جدید تغییر یابد. علاوه بر این نشان می‌دهد که مغز می‌تواند به روشهای مختلف یاد بگیرد و این سازوکارهای متعدد برای یادگیری، به تلاش هماهنگ شبکه‌های مختلف مغزی متکی هستند. به خوبی شناخته شده‌است که بهتر است مغز ما در طول زندگی به یادگیری چیزهای جدید ادامه دهد، به همین دلیل درک روشهای مختلف یادگیری و ذخیره دانش می‌تواند مفید باشد و به هریک از ما کمک کند. دریابید که کدام روش یادگیری برای ما مناسب است.[۸]
تاریخچه علوم اعصاب
[ویرایش]مصری‌های باستان تصور می‌کردند که جایگاه هوش در قلب است. به دلیل این اعتقاد، درپی فرایند مومیایی‌کردن، آنها مغز را از بدن خارج و قلب را در جای خود باقی می‌گذاشتند. یونانی‌های باستان اولین افرادی بودند که به مطالعه مغز پرداختند. آنها سعی کردند نقش مغز و چگونگی کارکرد آن را فهمیده و اختلالات عصبی را توضیح دهند. بر اساس مقاله‌ای در ساینس امریکن، ارسطو، فیلسوف یونانی، نظریه‌ای داشت مبنی بر این که مغز یک سازوکار خنک کنندهٔ خون بوده‌است.
دانشمندان در طول زمان نظریات مختلفی دربارهٔ مغز انسان و عملکرد آن ارائه کرده‌اند که برخی از آنها در ادامه ذکر شده‌اند.
- پیرپائول بروکا (Pierre Paul Broca) (1824-1880) ساختارشناس، جراح و فیزیکدان فرانسوی بود. او با بیمارانی کار می‌کرد که آسیب مغزی داشتند. وی به این نتیجه رسید که نواحی مختلف مغز در عملکردهای خاص درگیر هستند. قسمتی از مغز به نام ناحیهٔ بروکا مسئول گفتار و عملکردهای دیگر است. آسیب به این ناحیه در خلال سکته مغزی می‌تواند منجر به آفازی بروکا (Broca’s aphasia) بشود که در این حالت شخص نمی‌تواند سخن واضح یا منسجمی را تولید کند.
- در قرن نوزدهم، ون هلمونت (von Hemholtz)، پزشک و فیزیکدان آلمانی، سرعت تکانه‌های الکتریکی تولید شده توسط سلول‌های عصبی را اندازه گرفت.
- در سال ۱۸۷۳، گامیلو گلژی (Gamillo Golgi)، پزشک، آسیب‌شناس و دانشمند ایتالیایی، از نمک کرومات نقره استفاده کرد برای اینکه ببیند عصب‌ها شبیه چه چیزی هستند.
- اوایل قرن بیستم، سانتیاگو رامونی کاخال (Santiago Ramón y Cajal)، آسیب‌شناس، بافت‌شناس و دانشمند علوم اعصاب اسپانیایی این تئوری را ارائه داد که عصب‌ها واحدهای سلول عصبی مستقل هستند.
- در سال ۱۹۰۶، گلژی و کاخال به‌طور مشترک جایزهٔ نوبل فیزیولوژی یا پزشکی را به خاطر کارهایشان و طبقه‌بندی انواع سلول‌های عصبی مغز، دریافت کردند.
- از دههٔ ۱۹۵۰، تحقیق و تمرین در بیماری‌های اعصاب منجر به برداشتن گام‌های بزرگ و پیشرفت‌هایی در معالجهٔ سکته مغزی، بیماری قلبی-عروقی، MS و دیگر شرایط شده‌اند.
پیشرفت‌های علمی، دانشمندان علوم اعصاب را به مطالعهٔ ساختار، عملکردها، رشد و نمو، ناهنجاری‌های سیستم عصبی و راه‌هایی که می‌توانند منجر به تغییر آن بشوند، قادر ساخته‌است.[۹]
فرایادگیری در هوش مصنوعی و یادگیری ماشین
[ویرایش]فرایادگیری در یادگیری ماشینی معمولاً به الگوریتم‌های یادگیری ماشینی اشاره دارد که از خروجی سایر الگوریتم‌های یادگیری ماشین یادمی‌گیرند. درهر پروژه یادگیری ماشینی که در آن تلاش می‌کنیم بفهمیم (یادگیری) الگوریتمی که روی داده‌های ما بهترین عملکرد را دارد، می‌توانیم به الگوریتم یادگیری ماشینی فکر کنیم که حداقل تا حدودی جای ما را بگیرد. الگوریتم‌های یادگیری ماشینی از مجموعه داده‌های گردآوری شده یادمی‌گیرند.
به عنوان مثال، الگوریتم‌های یادگیری نظارت شده یادمی‌گیرند که چگونه نمونه‌هایی از الگوهای ورودی را به نمونه‌هایی از الگوهای خروجی برای رسیدگی به مشکلات مدل‌سازی پیش‌بینی طبقه‌بندی و رگرسیون نگاشت کنند. الگوریتم‌ها بر روی داده‌های تاریخی به‌طور مستقیم برای تولید یک مدل آموزش داده می‌شوند. سپس این مدل می‌تواند بعداً برای پیش‌بینی مقادیر خروجی، مانند یک عدد یا یک برچسب کلاس، برای نمونه‌های جدید ورودی استفاده شود.
- الگوریتم‌های یادگیری: از داده‌های تاریخی یاد بگیرید و با نمونه‌های جدیدی از داده‌ها پیش‌بینی کنید.
الگوریتم‌های فرایادگیری از خروجی سایر الگوریتم‌های یادگیری ماشینی که از داده‌ها یادمی‌گیرند، یادمی‌گیرند. این بدان معناست که فرایادگیری مستلزم حضور سایر الگوریتم‌های یادگیری است که قبلاً روی داده‌ها آموزش دیده‌اند. برای مثال، الگوریتم‌های فرایادگیری تحت نظارت یادمی‌گیرند که چگونه نمونه‌هایی از خروجی را از الگوریتم‌های یادگیری دیگر (مانند اعداد پیش‌بینی‌شده یا برچسب‌های کلاس) روی نمونه‌هایی از مقادیر هدف برای مسائل طبقه‌بندی و رگرسیون ترسیم کنند. به‌طور مشابه، الگوریتم‌های فرایادگیری با گرفتن خروجی از الگوریتم‌های یادگیری ماشینی موجود به عنوان ورودی و پیش‌بینی یک عدد یا برچسب کلاس، پیش‌بینی می‌کنند.
- الگوریتم‌های فرایادگیری: از خروجی الگوریتم‌های یادگیری یاد بگیرید و با پیش‌بینی‌های مدل‌های دیگر، پیش‌بینی کنید.
به این ترتیب فرایادگیری یک سطح بالاتر از یادگیری ماشین رخ می‌دهد. اگر یادگیری ماشین یاد بگیرد که چگونه از اطلاعات در داده‌ها برای پیش‌بینی به بهترین شکل استفاده کند، فرایادگیری یا فرا ماشین یادمی‌گیرد که چگونه از پیش‌بینی‌های الگوریتم‌های یادگیری ماشین به بهترین شکل برای پیش‌بینی استفاده کند.
هوش مصنوعی و علوم اعصاب
[ویرایش]علوم اعصاب و هوش مصنوعی (AI) سابقه طولانی همکاری مشترک دارند. پیشرفت‌های علوم اعصاب، در کنار جهش‌های عظیم در قدرت پردازش رایانه‌ای در چند دهه گذشته، باعث ایجاد نسل جدیدی از شبکه‌های عصبی سیلیکو با الهام از معماری مغز شده‌است. این سیستم‌های هوش مصنوعی اکنون قادر به انجام بسیاری از توانایی‌های ادراکی و شناختی پیشرفته سیستم‌های بیولوژیکی از جمله تشخیص اشیا و تصمیم‌گیری هستند، که همان‌طور که اشاره شد تا حدی با تقلید از نحوه انجام محاسبات خاص توسط مغز بدست آمده‌اند. در واقع هوش مصنوعی با استفاده از شبکه‌های عصبی که مشابه شبکه‌های نورون‌هایی هستند که مغز را تشکیل می‌دهند، به رایانه‌ها این توانایی را داده‌اند که تصویر یک گربه را از تصویر نارگیل و عابران پیاده را با دقت کافی برای هدایت خودروی خودران تشخیص دهند.
علاوه بر این، هوش مصنوعی اکنون به‌طور فزاینده‌ای به عنوان ابزاری برای تحقیقات علوم اعصاب استفاده می‌شود و درک ما از عملکردهای مغز را تغییر می‌دهد. به‌طور خاص، یادگیری عمیق برای مدل‌سازی چگونگی کنترل لایه‌های کانولوشن و اتصالات مکرر در قشر مغز مغز، عملکردهای مهمی از جمله پردازش بینایی، حافظه و کنترل حرکتی را کنترل می‌کند. همچنین، استفاده از هوش مصنوعی الهام گرفته از علوم اعصاب نیز برای درک اینکه چگونه تغییرات در شبکه‌های مغز منجر به آسیب‌شناسی‌های روانی می‌شود و حتی می‌تواند در رژیم‌های درمانی مورد استفاده قرار گیرد، نوید زیادی دارد.
منیش ساهانی، عصب‌شناس نظری و محقق یادگیری ماشینی در واحد علوم اعصاب محاسباتی گتسبی در دانشگاه کالج لندن، دربارهٔ ارتباط میان این دو رشته می‌گوید: «طبیعی است که این دو رشته با هم تطابق داشته باشند. ما به‌طور مؤثر در حال مطالعه همین موضوع هستیم. در یک مورد، ما می‌پرسیم که چگونه این مسئله یادگیری را به صورت ریاضی حل کنیم تا بتوان آن را به‌طور مؤثر در ماشین پیاده‌سازی کرد. در مورد دیگر، ما به تنها مدرک موجود برای حل شدن آن نگاه می‌کنیم - که مغز است.»
برنامه‌های کاربردی بالقوه
[ویرایش]بررسی فرایادگیری به عنوان یک مفهوم عصب‌شناسی دارای مزایای بالقوه برای درک و درمان بیماری‌های روان‌پزشکی و همچنین پر کردن شکاف‌ها بین شبکه‌های عصبی، علوم کامپیوتر و یادگیری ماشین است.[۱]
منابع
[ویرایش]- ↑ ۱٫۰ ۱٫۱ Doya, K. (2002). "Metalearning and neuromodulation". Neural Networks. 15 (4–6): 495–506. doi:10.1016/S0893-6080(02)00044-8. PMID 12371507. Retrieved 2013-08-04.
- ↑ ۲٫۰ ۲٫۱ Doya, K. (1999). "What are the computations of the cerebellum, the basal ganglia and the cerebral cortex?". Neural Networks. 12 (7–8): 961–974. doi:10.1016/S0893-6080(99)00046-5. PMID 12662639.
- ↑ Doya, K. (2000). "Metalearning, neuromodulation, and emotion" (PDF). Affective Minds. Archived from the original (PDF) on 2007-02-21. Retrieved 2013-08-04.
- ↑ Usher (1999). "The Role of Locus Coeruleus in the Regulation of Cognitive Performance". Science. 283 (5401): 549–554. doi:10.1126/science.283.5401.549. PMID 9915705. Retrieved 2013-08-04.
{{cite journal}}: Unknown parameter|displayauthors=ignored (|display-authors=suggested) (help) - ↑ Hasselmo, Michael (1993). "Acetylcholine and memory". Trends in Neurosciences. 16 (6): 218–222. doi:10.1016/0166-2236(93)90159-J. PMID 7688162.
- ↑ admin (۲۰۱۹-۱۰-۲۷). «مسیرهای عصبی متفاوت در مغز برای یادگیری». انستیتو سلامت مغز دانا. دریافت‌شده در ۲۰۲۲-۱۲-۳۰.
- ↑ Klein-Flügge, Miriam C.; Wittmann, Marco K.; Shpektor, Anna; Jensen, Daria E. A.; Rushworth, Matthew F. S. (2019-10-23). "Multiple associative structures created by reinforcement and incidental statistical learning mechanisms". Nature Communications. 10 (1). doi:10.1038/s41467-019-12557-z. ISSN 2041-1723.
- ↑ admin (۲۰۱۹-۱۰-۲۷). «مسیرهای عصبی متفاوت در مغز برای یادگیری». انستیتو سلامت مغز دانا. دریافت‌شده در ۲۰۲۲-۱۲-۳۰.
- ↑ بی 10، برین (۲۰۱۸-۱۰-۱۷). «علوم اعصاب چیست و دانشمند علوم اعصاب کیست؟». BrainBee. دریافت‌شده در ۲۰۲۲-۱۲-۳۰.
پیوند به بیرون
[ویرایش]- واحد محاسبات عصبی در مؤسسه علم و فناوری اوکیناوا
- پروژه محاسبات عصبی در گروه آزمایشگاهی تحقیقاتی ارتباطات اطلاعات مغز ATR
[[رده:علوم اعصاب]]