LLMs માં વૈજ્ઞાનિક બુદ્ધિનું પરીક્ષણ

સંશોધકો એ જાણવા માંગે છે કે શું Large Language Models પાસે વૈજ્ઞાનિક બુદ્ધિ છે.

મોટાભાગના પરીક્ષણો સાદા તથ્યો પર ધ્યાન કેન્દ્રિત કરે છે. આ અભ્યાસ વાસ્તવિક વૈજ્ઞાનિકો જે રીતે કામ કરે છે તેની સાથે સુસંગત વર્કફ્લોનો ઉપયોગ કરે છે.

સંશોધકોએ મોડેલ્સ જટિલ વૈજ્ઞાનિક તર્ક કેવી રીતે સંભાળે છે તેનું પરીક્ષણ કર્યું.

મુખ્ય તારણો:

  • વર્તમાન મોડેલ્સ લાંબા વૈજ્ઞાનિક વર્કફ્લો સાથે સંઘર્ષ કરે છે.
  • બહુ-પગલાંની પ્રક્રિયાઓ દરમિયાન તર્કની ભૂલો થાય છે.
  • વૈજ્ઞાનિક પદ્ધતિઓ સાથેનું સંરેખણ ચોકસાઈમાં સુધારો કરે છે.

સંશોધનમાં AI ની મર્યાદાઓને સમજવા માટે તમારે આ વર્કફ્લો જોવા જોઈએ. પ્રમાણભૂત બેન્ચમાર્ક સંપૂર્ણ ચિત્ર દર્શાવતા નથી.

સ્ત્રોત: https://dev.to/paperium/probing-scientific-general-intelligence-of-llms-with-scientist-aligned-workflows-26el

વૈકલ્પિક લર્નિંગ કોમ્યુનિટી: https://t.me/GyaanSetuAi