মস্তিষ্ক দ্বারা এনকোড করা যাদের গভীর নৈতিক নেটওয়ার্কের মধ্যে বাক্য উপস্থাপনা সম্পর্কিত

ইন্ডিয়ান ইনস্টিটিউট অফ সায়েন্স (আইআইএসসি) এবং কার্নেগী মেলন ইউনিভার্সিটি (সিএমইউ) এর গবেষকরা সম্প্রতি গভীর নিউরাল নেটওয়ার্কগুলি এবং মস্তিষ্কের এনকোডেড যারা বাক্য উপস্থাপনার মধ্য দিয়ে সম্পর্কের সম্পর্কের অনুসন্ধানের সন্ধান করেছেন। আর্কাইভ-এ প্রাক-প্রকাশিত এবং এই বছরের এসোসিয়েশন ফর কম্পিউটানালাল ল্যাঙ্গুয়েস্টিক্স (এসিএল) কনফারেন্সে উপস্থাপিত তাদের কাগজ, গভীর স্নায়ুতন্ত্রের সক্রিয়তা এবং এমইজি মস্তিষ্কের ডেটা অ্যাক্টিভেশনগুলির মধ্যে সম্পর্কের উদ্বোধন করে যা আমাদের মস্তিষ্ক এবং গভীর শিক্ষা সম্পর্কে বর্তমান বোঝার সাহায্য করতে পারে। আলগোরিদিম প্রক্রিয়া ভাষা।

মস্তিষ্ক দ্বারা এনকোড করা যাদের গভীর নৈতিক নেটওয়ার্কের মধ্যে বাক্য উপস্থাপনা সম্পর্কিত
মস্তিষ্ক দ্বারা এনকোড করা যাদের গভীর নৈতিক নেটওয়ার্কের মধ্যে বাক্য উপস্থাপনা সম্পর্কিত



"গবেষণাটি আইএমএসসি-তে অধ্যাপক টম মিচেলের মস্তিষ্ক গবেষণা গ্রুপ এবং আইআইএসসি-তে অধ্যাপক পার্থ তালুকদারের ম্যাল ল্যাবের মধ্যে সহযোগিতার পণ্য।" গবেষক শর্মীফা জট, গবেষণায় অংশগ্রহনকারী টেকএক্সপ্লোরকে বলেন। "এই গোষ্ঠীর গবেষণায় কীভাবে মস্তিষ্ক ভাষা বোঝে তা প্রশ্নের উপর মনোনিবেশ করে। বর্তমান গবেষণার মূল লক্ষ্যগুলি হল মস্তিষ্কের ভাষা প্রক্রিয়া এবং অ্যালার্জি নেটওয়ার্ক ভাষা মডেলগুলির সাথে তুলনা করে এমন আলগোরিদিমগুলি বোঝা।"

জেট এবং তার সহকর্মীরা গভীর শিক্ষণ মডেল এবং মস্তিষ্কের অঞ্চলের লুকানো স্তরগুলির মধ্যে একটি চিঠিপত্র আছে কিনা তা তদন্ত করার জন্য সেট করেছেন, বিশেষ করে যখন ভাষা প্রক্রিয়াকরণ করা হয়। উপরন্তু, গভীর বুদ্ধি মডেলগুলি মস্তিষ্কের ডেটা সংশ্লেষ করার জন্য ব্যবহার করা যেতে পারে কিনা তা জানতে আগ্রহী ছিল, যা পরবর্তীতে অন্যান্য কাজে ব্যবহার করা যেতে পারে।

জেট বলেন, "আমরা সহজ বাক্য বোঝার স্নায়ু নেটওয়ার্ক থেকে আধুনিক ভাষা মডেল এবং মস্তিষ্কের বিভিন্ন বর্ণানুক্রমিক নেটওয়ার্ক মডেলগুলি দ্বারা শিখেছি সাধারণ বাক্যের উপস্থাপনার তদন্ত করেছি।" "সম্পর্কের তদন্তের প্রধান পদ্ধতি ছিল মডেল উপস্থাপনাগুলির থেকে মস্তিষ্কের উপস্থাপনাগুলি, মৌলিক নীতিমালা, যদি উভয় উপস্থাপনা একই তথ্য বহন করে তবে তাদের একে অপরের থেকে পূর্বাভাস দেওয়া উচিত।"

তাদের তদন্তে, জেট এবং তার সহকর্মীরা শব্দ উপস্থাপনার জন্য বেশ কয়েকটি নিউরাল নেটওয়ার্ক আর্কিটেকচার বিবেচনা করেছিলেন, যার মধ্যে দুটি সম্প্রতি প্রস্তাবিত মডেলগুলি এলএমও এবং বার্ট নামে পরিচিত। তারা এই বাক্যগুলিকে একই বাক্যগুলি পড়ার সাথে সাথে ম্যাগনেটোনেফফোগ্রাফি (এমইজি) ব্যবহার করে মানবিক বিষয়গুলি থেকে সংগৃহীত তথ্যগুলির সাথে নির্দিষ্ট বাক্যগুলি কীভাবে প্রক্রিয়া করে তা মস্তিষ্কে কার্যকলাপের ম্যাপিংয়ের জন্য একটি কার্যকরী নিউরোমাইজিং কৌশল। শুরুতে, তারা একটি সাধারণ সিনট্যাক্স এবং মৌলিক শব্দবিজ্ঞান সহ বাক্যগুলি ব্যবহার করার সিদ্ধান্ত নিয়েছে, যেমন "হাড়টি কুকুর দ্বারা খেয়েছিল।"

আগ্রহজনকভাবে, গবেষকরা দেখেছেন যে বিইআরটি মডেলের সক্রিয়তাগুলি এমইজি মস্তিষ্কের তথ্যগুলির সাথে সর্বাধিক সম্পর্কিত। তাদের গবেষণায় আরও বলা হয়েছে যে গভীর নিউরাল নেটওয়ার্ক উপস্থাপনাটি নতুন বাক্যগুলির সাথে যুক্ত সিন্থেটিক মস্তিষ্কের তথ্য উৎপন্ন করার জন্য ব্যবহার করা যেতে পারে, বিদ্যমান মস্তিষ্কের তথ্য বৃদ্ধি করা।

"ভাষা মডেলগুলি মস্তিষ্কের কার্যকলাপকে যথাযথ নির্ভুলতার সাথে পূর্বাভাস দেয়, যা খুবই উৎসাহজনক", জেট ব্যাখ্যা করেন। "সাম্প্রতিক ট্রান্সফরমার ভিত্তিক উপস্থাপনাগুলি (বিইআরটি) মস্তিষ্ক এনকোডিংগুলির সাথে সর্বোত্তমভাবে সাদৃশ্যপূর্ণ, যা সেই দিকের আরও গবেষণার জন্য উৎসাহ দেয়। আমাদের কী ধরনের তথ্য (বিশেষ্য, ক্রিয়া, বিশেষণ, নির্ধারণকারী) কোন ধরণের নেটওয়ার্ক উপস্থাপনাগুলির মধ্যে এনকোড করা হয়েছে সে সম্পর্কে একাধিক পর্যবেক্ষণ ছিল। আমাদের আশা 'গোপন সস' নিখুঁত ভাষা মডেলিং অ্যালগরিদম উন্মোচন করা হয়। "

জাত এবং তার সহকর্মীদের মতে, এটি প্রথম গবেষণায় দেখাতে পারে যে এমইজি রেকর্ডিং মানুষের মতই একটি বাক্য পড়ছে যে বাক্যটি আগের বাক্যটি নির্ধারণ করতে ব্যবহার করা যেতে পারে। তাছাড়া, তারা সফলভাবে সিন্থেটিক মস্তিষ্কের তথ্য উৎপন্ন করার জন্য গভীর নিউরাল নেটওয়ার্ক উপস্থাপনাগুলি ব্যবহারকারী প্রথম ব্যক্তি হতে পারে।

জাট এবং তার সহকর্মীদের সাম্প্রতিক গবেষণায় কিছু অত্যাধুনিক নিউরাল নেটওয়ার্কগুলিতে কীভাবে বাক্যগুলি উপস্থাপন করা হয় এবং কীভাবে তারা মানব মস্তিষ্কের দ্বারা এনকোড করা হয় তা সম্পর্কে নতুন মূল্যবান অন্তর্দৃষ্টি প্রদান করে। তাদের পর্যবেক্ষণ শীঘ্রই নতুন ভাষা প্রক্রিয়াকরণ অ্যালগরিদমগুলির বিকাশকে অবহিত করতে পারে, কিন্তু মস্তিষ্ক এবং গভীর শিক্ষণ মডেলগুলি কীভাবে প্রক্রিয়া প্রক্রিয়া করে তা সম্পর্কিত লিঙ্কগুলি অনুসন্ধানের আরও গবেষণায় অনুপ্রাণিত করে।

"ভবিষ্যতে, আমরা নিউরাল নেটওয়ার্ক মডেল ব্যবহার করে মানুষের মস্তিষ্কের ভাষা বোঝার মূল প্রশ্নগুলি অধ্যয়নরত (যেমন, বাক্য বোঝার, শব্দ গঠন মডেল, ইত্যাদি) চালিয়ে যাওয়ার পরিকল্পনা করি।"

0 Comments: