I nte rna t io na l J o urna l o f   E v a lua t io n a nd   Resea rc h in E du ca t io ( I J E RE )   Vo l.   14 ,   No .   1 Feb r u ar y   2 0 2 5 ,   p p .   598 ~ 611   I SS N:  2 2 5 2 - 8 8 2 2 DOI : 1 0 . 1 1 5 9 1 / ijer e . v 1 4 i 1 . 3 0 4 2 3          598       J o ur na l ho m ep a g e h ttp : //ij ere. ia esco r e. co m   Ev a lua tion o Ch a tG PT   resea rch   i n STE AM   ed uca t io n       B ina K urnia   P ra ha ni 1 ,   K ho irun Nis a 2 ,   Su l iy a na h 1 ,   Ut a m a   Ala n De t a 1   1 D e p a r t me n t   o f   P h y si c s,  U n i v e r si t a N e g e r i   S u r a b a y a ,   S u r a b a y a ,   I n d o n e s i a   2 D e p a r t me n t   o f   E d u c a t i o n   a n d   H u m a n   P o t e n t i a l s   D e v e l o p me n t ,   N a t i o n a l   D o n g   H w a   U n i v e r si t y ,   H u a l i e n ,   T a i w a n       Art icle  I nfo     AB S T RAC T   A r ticle  his to r y:   R ec eiv ed   Feb   28 2 0 2 4   R ev is ed   Oct   12 2 0 2 4   Acc ep ted   No v   16 2 0 2 4       Re se a rc h   fo c u o re v iew tren d a n d   re se a rc h   o n   im p lem e n ti n g   Ch a tG P in   sc ien c e ,   tec h n o lo g y ,   e n g i n e e rin g ,   a rts,   a n d   m a th   ( S TE AM )   le a rn in g .   It   e m p h a siz e th e   imp o r tan c e   o f   d e e p   lea rn i n g   a n d   2 1 st - c e n tu r y   sk il ls   in   e d u c a ti o n ,   h i g h l ig h ti n g   t h e   li m it a ti o n o C h a tG P in   a c c u ra c y   a n d   c re d ib il it y .   T h e   a u t h o rs  a n a l y z e d   2 0 4   S TE A M   e d u c a ti o n   d o c u m e n ts,   re v e a li n g   t h a 6 5 %   f o c u se d   o n   tec h n o l o g y   e d u c a ti o n   a n d   les th a n   3 %   o n   a rt   a n d   m a th e m a ti c e d u c a ti o n .   T h e   a rti c les   writt e n   in   tec h n o lo g y   sc o p e   a re   th e   m o st  wid e l y   c irc u late d .   Th e   m o st  p r o d u c ti v e   re g io n   is  t h e   U n it e d   S tate s wh ich   h a th re e   p r o d u c ti v e   a u th o rs.  T h e   m o st  p ro d u c ti v e   a u t h o r a re   Ra y   ( In d ia )   a n d   Wan g   ( M a c a o ) ,   wh o   h a v e   t h e   h i g h e st   h - i n d e x .   T h e   U n it e d   S tate s   a n d   U n it e d   K i n g d o m   a re   th e   m o st  p ro d u c ti v e   a ffil iatio n s.  M a n y   ty p e o f   re se a rc h   o n   C h a tG P in   S TE A M   e d u c a ti o n   i n c lu d e   a   su r v e y   with   se v e ra l   p a rti c ip a n ts   o d iffere n t   e d u c a ti o n   lev e ls.   S o c ial   sc ien c e   is  th e   m o st  p o p u lar  su b jec a re a .   T h e   Jo u rn a Na t u r e   is  th e   p rima ry   so u rc e   f o t h is   re se a rc h .   S e v e ra l   re se a rc h   h ig h li g h te d   a rt ifi c ial  in tell ig e n c e ,   C h a tG P T,   a n d   h u m a n   k e y wo r d s.  Th is  st u d y   h i g h li g h t th e   p o ten ti a o Ch a tG P in   S TE AM,   su g g e sti n g   fu rt h e re se a rc h   o n   stu d e n t   b e h a v io r,   lea rn i n g   d e sig n s,   a n d   c re d ib il it y   c o n c e rn s.  It   su g g e sts  c o ll a b o ra ti o n   with   G o o g le  S c h o l a o Web   o S c ien c e   d a ta f o i n - d e p t h   a n a l y sis.   K ey w o r d s :   B ib lio m etr ic   C h atGPT   E d u ca tio n   R ev iew   STE AM   T h is i a n   o p e n   a c c e ss   a rticle   u n d e r th e   CC B Y - SA   li c e n se .     C o r r e s p o nd ing   A uth o r :   B in ar   Ku r n ia  Pra h an i   Dep ar tm en t o f   Ph y s ics,  Facu lty   o f   Ma th e m atics a n d   Natu r al  Scien ce ,   Un iv er s itas   Neg er Su r ab ay a   D1   B u ild in g ,   J l.  Ketin tan g ,   6 0 2 3 1 ,   Su r ab ay a,   I n d o n esia   E m ail:  b in ar p r a h an i@ u n esa. a c. id       1.   I NT RO D UCT I O N   T h er ar g r an d   ch allen g es  f ac in g   to d a y s   s o ciety   th at  ca l f o r   q u ick   ac tio n   esp ec ially   ed u ca tio n .   Gr an d   ch allen g es  in   ed u ca tio n   h av b ee n   f o u n d   to   f o s ter   d ee p   lear n in g   a n d   s tu d en ts   2 1 s ce n tu r y   s k ills .   L ea r n in g   in teg r ate d   tech n o lo g y   ( tech - lear n in g )   ca n   s ig n if ica n tly   im p r o v e   th q u ality   an d   m ea n in g   o f   lear n in g   ex p er ien ce s   an d   lear n in g   o u tc o m es  [ 1 ] ,   [ 2 ] T ec h - lear n in g   s ig n if ican tly   im p ac ts   s tu d en ts   ac ad em ic  s u cc ess   an d   s u p p o r lo n g - ter m   m em o r y   [ 3 ] .   I n ter est  ed u ca tio n   f o r   ar tific ial  in tellig en ce   ( AI )   h as  r ec en tly   ad v an ce d   in   v ar io u s   s co p [ 4 ] .   AI   ca n   h el p   in cr ea s ef f icien cy   an d   r ed u ce   h u m an   e r r o r   a n d   s p ee d   u p   r esp o n s tim es  in   cr itical  s itu atio n s .   AI   g u id es  s tu d en ts   th r o u g h   s y s tem   an d   a s s es s   p er f o r m an ce   th r o u g h   i n t eg r ated   test   [ 5 ] .   AI   is   u s ed   to   m o d if y   m ater ials ,   clar if y   m is u n d er s tan d in g ,   a n d   f ac ilit ate  lear n in g .   T h er e   ar e   m an y   ty p es  o f   AI   C h atb o t te ch n o lo g ies ,   s u ch   as  Go o g le  B ar d ,   Mic r o s o f t Bi n g ,   an d   C h atGPT .   C h atGPT   u s n atu r al  lan g u ag p r o ce s s in g   [ 6 ] .   I h as  b ee n   wid ely   u s ed   in   ac ad em ia  with   m o d els  3   an d   3 . 5   r elea s ed   in   2 0 2 2   an d   2 0 2 3   [ 7 ] .   C h atGPT   ca n   h elp   s tu d en ts   to   u n d er s tan d   c o m p le x   s u b ject  m atter   an d   in cr ea s lear n in g   e f f ec tiv en es s .   C h atGPT   is   an   alter n ativ f o r   teac h e r s   in   f ac ilit atin g   s tu d en ts   in   lear n in g   ac tiv ities   [ 4 ] .   Ho wev er ,   th i m p lem en tatio n   o f   C h atGPT   also   h as  s h o r tco m in g s ,   o n o f   w h ich   is   th ac cu r ac y   an d   cr e d ib ilit y   o f   t h in f o r m a tio n   o b tain e d .   Ov er all,   th im p lem en tatio n   o f   C h atGPT   o f f er s   o p p o r tu n ities   to   f ac r ea l lif ch allen g es.   Evaluation Warning : The document was created with Spire.PDF for Python.
I n J   E v al  &   R es E d u c     I SS N:   2252 - 8 8 2 2       E va lu a tio n   o f Ch a t GP T res ea r ch   in   S TEA M e d u ca tio n   ( B in a r   K u r n ia   P r a h a n i )   599   On   an o th er   h a n d ,   s cien ce ,   tech n o lo g y ,   en g i n ee r in g ,   ar ts ,   an d   m ath   ( STE AM )   lear n in g   is   ab le  to   s u p p o r 2 1 s ce n t u r y   s k ills   lear n in g   [ 8 ] .   STE AM   lear n in g   cr ea tes  co n tex tu al   lear n in g   at m o s p h er e   th at  u s es  s ev er al  th em atic - in teg r ativ l ea r n in g   m o d els  [ 9 ] .   I n   STE A M,   th ese  ch allen g es  en co u r a g s tu d en ts   to   tack le   d iv er s ch allen g es  an d   in teg r ate  id ea s   to   cr ea te  f in al  s o lu tio n .   Ma n y   r esear ch   was  elab o r ated   AI   with   STE AM   lear n in g   [ 1 0 ] .   T s ai  et  a l [ 1 1 ]   e x p lo r es  th u s o f   L L Ms  o r   C h atGPT   in   ch em ical  en g in ee r i n g   ed u ca tio n   as  th eir   p r o b lem - s o lv in g   to o l.  H o wev er ,   th e r e   ar lim ited   r eso u r ce s   r ep o r ted   C h atGPT   wit h   STE AM   lear n in g .   I em p h asizes  th n ee d   f o r   s cien ce ,   tec h n o lo g y ,   e n g in ee r i n g ,   an d   m ath em atics  ( STE M )   ex p er tis to   ef f ec tiv ely   u tili ze   AI   tech n o lo g y   esp ec ially   C h at GPT.   I n   ad d itio n ,   d ig ital  e d u ca tio n   t o o ls   - AI -   ca n   h elp   ed u ca t o r s   q u ick ly   s h ar e   k n o wled g e   an d   m ater ial  in   h ig h er   ed u ca tio n .   AI   an d   ST E AM   ed u ca tio n   ar two   p o i n ts   ess en tial  in   2 1 s t - ce n tu r y   lear n in g .   STE AM   ed u ca tio n   h as  an   en o r m o u s   s co p an d   is   also   r elate d   to   C h atGPT ,   wh ich   ca n   b ap p lie d   in   v ar io u s   s co p es.   C h atGPT   ca n   en h an ce   ed u c atio n   b y   cr ea tin g   p er s o n alize d   lear n in g   m ater ials ,   r ev o l u tio n izin g   ex a m s ,   p r o v id i n g   r ea l - tim f ee d b ac k ,   an d   ass is tin g   ed u ca to r s   in   g r ad in g   ass ig n m en ts   [ 1 2 ] .   I t   ca n   also   im p r o v s tu d en ts '   ac ad em ic  p er f o r m a n ce ,   teac h er s '   les s o n   p lan s ,   lan g u ag lear n in g ,   test   p r ep ar atio n ,   an d   o n lin e   tu to r in g   b y   an al y zin g   s tu d e n ts '   lear n in g   p r ef er en ce s .   I t   p r o v i d es  tim ely   s u p p o r t,  c o n s id er in g   s tu d e n ts ac ad em ic  ab ilit ies  an d   p r e f er e n ce s   [ 1 3 ] .   AI   also   o p tim izes  lear n in g   e n v ir o n m en ts   th r o u g h   lear n in g   a n aly tics .   I o r g a n izes  cu r r icu l u m   s eq u en ce s ,   d esig n s   in s tr u ctio n ,   a n d   m a n ag es  s tu d en b ig   d ata.   Ho wev er ,   m o r e   r esear ch   is   n ee d e d   to   ex p lo r C h atGPT 's  p o ten tial  in   ed u ca tio n   f u lly .   I n   a d d itio n ,   C h atGPT   ca n   ass is t   en g in ee r in g - STE AM   ed u ca tio n .   C h atGPT   is   to o th at  ca n   g en er ate  co d s n ip p ets  b ased   o n   u s er   in p u t,   o p tim ize  co d b y   an aly zin g   l an g u ag e ,   alg o r ith m s ,   a n d   d ata   s tr u ctu r es,  an d   ass is in   d eb u g g in g   b y   p r o v id in g   r ec o m m en d atio n s   f o r   e f f icien co d in g   er r o r s .   I also   ai d s   in   co d e   d o cu m en tatio n   b y   a n aly zin g   lan g u a g e,   s tr u ctu r e,   an d   f u n ctio n   r eq u ir e m en ts   an d   in   co d r ev iew  b y   an aly zin g   d ata  o n   p r o g r am m i n g   lan g u ag e,   co d in g   s tan d ar d s ,   an d   b est  p r ac tices  [ 1 4 ] .   T h ese  to o ls   ca n   h elp   d ev elo p er s   im p r o v c o d q u ality   an d   r eliab ilit y ,   en s u r in g   ef f icien t a n d   ef f ec tiv d ev elo p m en t.   b ib lio m etr ic  an aly s is   is   co n d u cted   to   id e n tify   r esear ch   t r en d s ,   r esear ch   g ap s ,   an d   n e f in d in g s   r elate d   to   C h atGPT   in   ed u ca tio n   [ 1 5 ] .   Pre v io u s   au th o r s   u s b ib lio m etr ics  s tu d y   to   id en tifi es  r esear ch   to p ics,   h ig h lig h ts   n ew  d ev elo p m en t,   an d   s u g g est  p o ten tial  d ir ec tio n s   f o r   f u tu r r esear ch   [ 1 6 ] ,   [ 1 7 ] .   T h is   an aly s is   p r o v id es  v alid   q u ality   r ev iew s   an d   co m p r eh en s iv d ata  v is u aliza tio n   [ 1 8 ] .   T h is   r esear ch   r ev iews  th tr en d s   an d   r esear c h   o f   im p le m en tatio n   C h atGPT   in   STE AM   lea r n in g   wh ich   f o c u s es  o n   ea ch   s c o p e.   I n   t h last   two   y ea r s ,   s tu d en ts   h av e   u s ed   C h atGPT   d u r in g   th ei r   lear n in g   ac tiv ities .   E x am in in g   th ad v an ta g es  an d   d is ad v an tag es  o f   im p lem e n tin g   C h atGPT   in   th clas s r o o m   is   es s en tial  f o r   ed u ca to r s   lo o k in g   to   d esig n   n ew   an d   m o r ef f ec tiv e   lear n in g   o p p o r tu n ities   [ 1 9 ] ,   [ 2 0 ] .   T h is   r e s ea r ch   ca n   h el p   r esear ch er s   in   f u tu r s tu d ies.  T h e   r esear ch   an aly ze s   th r esear c h   ac tiv ities   an d   th eir   AI - C h atGPT   r elate d   ed u ca tio n   co n ten t.     i)   W h at  wer th lo ca tio n ,   w r iter s ,   an d   r esear c h   tech n i q u es  o f   C h atGPT   in   STE AM   ed u ca tio n   r esear ch   r eg ar d in g   r esear ch   c h ar ac ter is tics   an d   f ea tu r es?   ii)   I n   th e   co n tex o f   STE AM   ed u ca tio n   r esear ch ,   wh o   wer e   th e   p ar ticip an ts   an d   s am p le   s izes  o f   C h atGPT   i n   ter m s   o f   th in ter ac tio n   b etwe en   th em ?   iii)   W h at  co n tr ib u tio n s   d id   th le ad in g   STE AM   f ield s   m ak t o   STE AM   ed u ca tio n   d is cip li n es  in   ter m s   o f   ap p licatio n ?       2.   M E T H O D   T h m etad ata  s o u r ce d   f r o m   S co p u s   b ec au s it  h as  th lar g e s co llectio n   o f   ac ad em ic  liter atu r [ 2 1 ] T h er ar e   2 0 4   STE AM   ed u ca tio n   d o c u m en ts .   T h er wer e   6 5 o f   tech n o lo g y   ed u ca tio n   d o cu m en ts   an d   less   th an   3 d o cu m e n ts   in   ar an d   m ath em atics  ed u ca tio n .   T h au th o r s   in p u th k ey wo r d s   o n   titl e,   ab s tr ac t,  an d   k ey wo r d s   as:  T I T L E - AB S - KE ( ch atg p t) .   Data   wer e   co l lecte d   with   th n ewe s d ata  d o cu m en ted   in   . csv   an d   . r is   f o r m at.   T h au th o r   s elec ted   th s u b ject  STE AM   an d   ed u ca tio n   a n d   th e n   ex p o r ted   d ata  o n   ea c h   STE AM   ed u ca tio n   s co p e.   At  th s elec tio n   s tag e,   4 4 o f   d o cu m en ts   h a d   a   STE AM   s co p e ,   f o llo we d   b y   3 8 %   o f   STE AM   ed u ca tio n   d o c u m e n ts .   T h d etail  s elec tio n   o f   d ata  p r o ce s s   is   s h o wn   in   Fig u r 1 .   Vo s v iewe r   u s ed   . r is   m etad ata  to   co n s tr u ct  an d   v iew  v is u aliza tio n   o f   th n etwo r k   [ 8 ] ,   [ 2 2 ] [ 2 4 ] .   Data   in   . csv   f o r m at  a n d   Mic r o s o f t E x ce l is u s ed   to   ca t eg o r ize  an d   p lo t th e   d ata.       3.   RE SU L T S AN D I SCU SS I O N   I n   th is   s ec tio n ,   th er ar th r ee   im p o r tan t p o in ts   o f   d is cu s s io n ,   n am ely : i)   R esear ch   ch ar ac te r is tics   an d   f ea tu r es,  in clu d in g   d is cu s s io n   o f   r esear ch   d is tr ib u tio n   b ased   o n   y ea r ,   r eg io n ,   af f iliatio n ,   an d   au t h o r ;     ii)  I n ter ac tio n   b etwe en   p ar ticip an ts   an d   C h atGPT   in clu d es  d is cu s s io n   o f   th e   u s o f   s am p le  s ize  an d   d em o g r a p h ic  in f o r m atio n   a n d   m eth o d s   u s ed   d u r i n g   r esear ch an d   iii)  Ap p licatio n s   d is cu s s es  th s o u r ce s ,   s u b ject  ar ea   an d   c o n tr ib u tio n   o f   C h atGPT   to   STE AM   ed u ca tio n   b ased   o n   k ey w o r d   clu s ter   an aly s is .   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 2 5 2 - 8 8 2 2   I n J   E v al  &   R es E d u c ,   Vo l .   14 ,   No .   1 Feb r u a r y   20 25 598 - 611   600       Fig u r 1 .   C o g n itiv p r o ce s s   d im en s io n       3 . 1 .     T he  y ea r - wis dis t ributi o n   T h GPT  m o d els  h av b ee n   cr ea ted   b y   Op en AI   in   2 0 1 8   [ 1 4 ] .   GPT  m o d els  r elate d   to   n atu r al  lan g u ag p r o ce s s in g .   T h f i r s g en er atio n   o f   GPT  m o d els  is   GPT - 1 ,   wh ich   is   m o d est  i n   s ize.   GPT - 1   ca n   class if icatio n   test ,   an aly ze   s en tim en t,  an d   d o   tr an s latio n   [ 2 5 ] .   Ne x t,  GPT - 2   h as  1 , 5   b il lio n   p ar am eter s   an d   r elea s ed   in   2 0 1 9 .   GPT - 2   ca n   g iv b etter   r esu lts ,   g en e r alize   n ew  task s ,   an d   p r o d u ce d   m o r ex ten d ed   an d   m o r e   co h esiv s eq u en ce s   th an   GP T - [ 2 6 ] .   Fig u r 2   r e p r esen ts   C h atb o - AI   d ev elo p m en ts -   o v er   th last   th r ee   y ea r s ,   b u C h atGPT   h as  b ee n   wid ely   s tu d ied   b y   in ter n atio n al  r esear ch er s   f r o m   2 0 2 2   u n til  n o w.   T h th ir d   g en er atio n   was  GPT - 3   was  lau n ch ed   in   2 0 2 0   wh ich   p r o d u ce s   ex ce llen t   n atu r al   lan g u ag wr itin g   an d   an ticip ates  th wo r d   th at   will  co m n e x in   s tr in g   o f   tex t   [ 4 ] .   GPT - 3   is   m o r ad ap tab le  f o r   v a r io u s   n atu r al  lan g u ag e   p r o ce s s in g   ap p licati o n s   th an   p r e v io u s   m o d els  [ 2 7 ] .   T h e   last   g en er atio n   is   C h at GPT.   C o m p ar ed   to   GPT - 3 ,   C h atGPT   p r o v id es  b e tter   co n tex tu al  co m p r eh e n s io n ,   lo g ical - r ea lis tic  d is cu s s io n ,   r esp o n s cr ea tio n ,   an d   o v er all  co h er en ce   an d   is   in ten d ed   f o r   co n v e r s atio n - b a s ed   ap p licatio n s   [ 2 8 ] .   C h atG PT  is   tex t - b ased   co n v er s atio n al  m o d el  th at  im p r o v es  th q u ality   o f   in ter ac tio n s   b y   u n d e r s tan d in g   co n tex an d   p r o d u cin g   p r ec is e,   g r am m atica lly   co r r ec t,  an d   co h e r en t r esp o n s es  [ 2 9 ] .   C h atGPT   ca n   f ix   s ev er al  task s ,   lik s u m m ar izin g   an d   cr ea tin g   co n ten t.   C h atGPT   is   m u ltil in g u al  an d   is   u s ed   i n   v ar io u s   ap p licatio n s   [ 3 0 ] .   C h atGPT   is   an   Op en AI   p r o d u ct  with   o n e   m illi o n   u s er s   in   f i v d a y s .   C h atGPT   h as  b ee n   v er y   p o p u la r   s in ce   its   r elea s in   No v em b er   2 0 2 2   [ 3 1 ] ,   [ 3 2 ] .   Half   o f   C h a tGPT  r esear ch   was   r ep o r ted   in   tech n o lo g y   s co p e   with   1 3 3   d o cu m e n ts .   Scien ce   s co p g ets  s ec o n d   p lace   wit h   3 4   d o cu m en ts .   B esid es,  m ath em atics  an d   ar n ee d ed   to   b ex p lo r ed   with   i n ter n atio n al  au th o r s   b ec au s o f   lim ited   p u b licatio n   in   th is   s u b ject.   Acc o r d in g   to   Fig u r 3 ,   f u tu r r esear ch   ca n   f o cu s   o n   m ath e m atics  an d   ar ed u ca tio n   th at  ca n   b c o m b in ed   with   th e   im p lem en tatio n   o f   C h atGPT   in   ed u ca tio n .           Fig u r 2 .   T h d e v elo p m e n t o f   AI   d u r in g   th last   th r ee   y ea r s   [ 1 6 ]   Evaluation Warning : The document was created with Spire.PDF for Python.
I n J   E v al  &   R es E d u c     I SS N:   2252 - 8 8 2 2       E va lu a tio n   o f Ch a t GP T res ea r ch   in   S TEA M e d u ca tio n   ( B in a r   K u r n ia   P r a h a n i )   601       Fig u r 3 .   C h atGPT   r esear ch   in   STE AM   s u b ject       3 . 2 .     Do cu m ent   t y pes   Acc o r d in g   to   Fig u r 4 ,   h al f   o f   th d o cu m e n ty p e   in   C h atG PT  r esear ch   wer e   ar ticle.   E d it o r ial  h as  s m all  n u m b er   o f   d o cu m en ty p es  in   ea ch   STE AM   ed u ca tio n   s co p e.   Fig u r 5   s h o ws  th at  in ter n atio n al   r esear ch er s   p u b lis h   m o r e   wo r k   o n   tech n o lo g y   s co p e   th an   o t h er s   ac r o s s   all  d o cu m en ts .   T h ed ito r ial  d o es  n o t   r ep o r o n   C h atGPT   in   tec h n o lo g y ,   en g i n ee r in g ,   an d   ar t.   Alm o s all  STE AM   ed u ca t io n   d o cu m en ts   ar e   p u b lis h ed   in   v ar io u s   s o u r ce s ,   ex ce p m ath   ed u ca tio n   d o cu m en ts ,   wh ich   ar o n ly   p u b lis h ed   in   jo u r n als,  wh ich   is   2 d o cu m en ts ,   as  s h o wn   in   Fig u r 5 ( a) .   Mo s STE AM   ed u ca tio n   r esear ch   is   p u b lis h ed   in   jo u r n als  wh er e   tech n o lo g y   d o m in ates.  T h e r e   ar s am p e r ce n tag o f   a r ed u ca tio n   r esear ch   p u b licat io n   in   c o n f e r en ce   p r o ce ed in g s   an d   b o o k ,   as  s h o wn   in   Fig u r 5 ( b )   an d   5 ( c ) .   I n   ad d itio n ,   th co m p ar is o n   o f   p u b licatio n s   in   f ield s   o f   s cien ce ,   en g in ee r in g ,   an d   tech n o lo g y   in   tr a d jo u r n al  r ea ch ed   1 :1 : 2 th er was  n o   r esear ch   r elate d   to   s cien ce   an d   m ath em atics,  as  s h o wn   in   Fig u r e   5 ( d ) .   E d u ca tio n al  tech n o l o g y   d o c u m en ts   als o   d o m in ate  v a r io u s   ty p es o f   s o u r ce s .           Fig u r 4 .   T h ty p es o f   d o c u m e n ts               ( a)   ( b )   ( c)   ( d )     Fig u r 5 .   T h ty p es o f   s o u r ce s   o f   ( a)   jo u r n al,   ( b )   co n f er en ce   p r o ce ed in g s ,   ( c)   b o o k ,   ( d )   tr a d jo u r n al   ( No te:  lig h t b lu e = s cien ce ,   o r a n g e = tech n o lo g y ,   g r e y = en g in e er in g ,   y ello w = a r t,   an d   d ar k   b l u e = m ath em atics )   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 2 5 2 - 8 8 2 2   I n J   E v al  &   R es E d u c ,   Vo l .   14 ,   No .   1 Feb r u a r y   20 25 598 - 611   602   3 . 3 .     T he  pro du ct iv a utho r,   a f f ilia t io n,  a nd   co un t ry   o f   C ha t G P T   in ST E A M   educa t io n r esea rc h   T h to p   a u th o r s   in   ev er y   ST E AM   ed u ca tio n   s co p ar lis ted   in   T ab le   1 .   I n d ia,   C h in a ,   a n d   Un ited   States   ar all  r esear ch - in ten s i v co u n tr ies  with   m an y   p u b lic atio n s .   T o p   th r ee   a u th o r s   f r o m   n in co u n tr y   wer e   p ar ticip ated   in   C h atGPT   STE AM   ed u ca tio n   r esear ch .   R ay   f r o m   Sik k u m   Un iv e r s ity ,   I n d ia  h as  s ev en   p u b licatio n s   in   s cien ce   an d   tech n o lo g y   m ajo r .   C h in h as  elev en   d o cu m en ts   an d   f o u r   p r o d u ctiv au th o r s   in   tech n o lo g y ,   en g in ee r in g ,   a n d   ar m ajo r   s u ch   as  Ag ath o k leo u s ,   C h en g ,   Gu ,   He,   an d   Gu o .   B is was,  L u ,   W u ,   an d   C ah an   ar US - r esear ch e r s   wh o   p u b lis h ed   th eir   r esear ch   o n   tech n o lo g y ,   e n g in ee r i n g ,   a n d   m ath em atics  m ajo r .   I n   ad d itio n ,   Ag ath o k leo u s   f r o m   C h in a n d   L ee   f r o m   So u th   Ko r ea   h av e   th e   h ig h est  p er ce n tag o f   C h atGPT - STE AM   ed u ca tio n   r esear ch .   B o th   p lay   r o le  i n   s cien ce - STE AM   ed u ca tio n   p u b licatio n s .   E v en   th o u g h   th ar t   s co p h as f ew  p u b lis h ed   d o c u m en ts ,   th is   s co p h as Wan g   with   th h ig h est H - in d ex .   C h in an d   th US  h av th r ee   p r o d u ctiv au th o r s ,   m ak i n g   th US  th co u n tr y   with   th m o s p u b licatio n s ,   an d   C h in g ets  th s ec o n d   n u m b e r .   Ho wev er ,   th d if f er en ce   in   th eir   p u b licatio n s   is   q u ite   s ig n if ican t,  u p   to   f o u r   tim es.  Fig u r 6   s h o ws  th to p   5   co u n tr ies  with   th m o s p u b licatio n s ,   b u o n l y   C an ad d o es  n o t   h a v to p   a u th o r s .   I n d ia  an d   th UK  h av e   also   b ee n   c o lo r ed   lig h t   b lu e,   in d i ca tin g   th at   STE AM   ed u ca tio n   r esear ch   is   s till   l ittl d ev elo p ed .   Alm o s all  n o n - co lo r ed   r eg i o n s ,   esp ec ially   E u r o p e,   R u s s ia,   Asi a,   So u th   Am er ica,   an d   Af r ica,   m u s ex p lo r C h atGPT   STE AM   ed u ca tio n .   T h Un ited   States   d o m in ates  all   f ield s   o f   STE AM   ed u ca tio n   ex ce p m ath em atics,  with   th f ield   o f   tech n o lo g y   p u b lis h in g   as  m an y   as  1 1 2   d o cu m e n ts .   T h f ield   o f   s cie n ce   STE AM   ed u ca tio n   h as  y et  to   b p u b lis h ed   i n   I n d ia,   C h in a,   Au s tr alia,   o r   o th er   to p   co u n tr ies.  Pu b licatio n s   in   tech n o lo g y ,   en g i n ee r in g ,   m ath em atics,  an d   ar ar al s o   n o p u b lis h ed   in   Au s tr alia,   C an ad a,   an d   s ev e r al  co u n tr ies.  STE AM   ed u ca tio n   m ath   p u b licatio n s   also   p u b lis h   in   s ev er al   co u n tr ies with   o n l y   1   d o cu m e n t e ac h .       T ab le  1 .   T h p r o d u ctiv a u th o r s   in   C h atGPT - STE AM   ed u ca tio n   r esear ch   S u b j e c t   A u t h o r   TD   %P   HI   A f f i l i a t i o n   C o u n t r y   S c i e n c e   A g a t h o k l e o u s,  E.   2   3 3 . 3 3   35   N U I S T   C h i n a   Le e ,   J.  Y .   2   3 3 . 3 3   2   H a n y a n g   U n i v e r si t y   S o u t h   K o r e a   R a y ,   P .   2   1 . 6 7   25   S i k k i m   U n i v e r si t y   I n d i a   Te c h n o l o g y   P r a t i m   5   4 . 1 7   25   K a r a k o se ,   T .   3   6 . 3 8   14   D u ml u p i n a r   U n i v e r s i t y   Tu r k e y   K l a n g ,   E.   3   1 . 6 0   30   Te l - A v i v   U n i v e r si t y   I sr a e l   En g i n e e r i n g   C h e n g ,   K .     3   0 . 1 2 5   8   Zh e n g z h o u   U n i v e r s i t y   C h i n a   Lu ,   K . Y .   3   0 . 1 5   9   D u k e   U n i v e r si t y   U n i t e d   S t a t e s   W u ,   H .   3   2 . 0 8   29   Art   G u o ,   C .   2   1 3 . 3 3   5   C h i n e se   A c a d e m y   o f   S c i e n c e s   C h i n a   W a n g ,   F .   Y .   2   0 . 3 4   1 2 6   M U S T   M a c a o   A n g g a r w a l ,   N .   1   0 . 24   1   D e .   B R .   A mb e d k a r   N a t i o n a l   I n st i t u t e   o f   Te c h n o l o g y   I n d i a   M a t h e ma t i c s   Al - A l i ,   R .   1   4 . 3 4   4   K i n g   F a i sa l   U n i v e r si t y   S a u d i   A r a b i a   C a h a n ,   P .   1   1 . 4 0   31   Jo h n   H o p k i n s   U n i v e r si t y   U n i t e d   S t a t e s   D e l a r d a s,   O .   1   1 4 . 2 8   4   P r o mo t i o n   o f   E n g i n e e r i n g   a n d   E v a l u a t i o n   R e sea r c h   S o c i e t y   U n i t e d   K i n g d o m   N o t e :   TD = t o t a l   d o c s ;   %P = p e r c e n t a g e   o f   C h a t G P T - S TEA M   e d u c a t i o n   r e sea r c h ;   H I = H - I n d e x           Fig u r 6 .   T h d is tr ib u tio n   o f   C h at - GPT - STE AM   ed u ca tio n   i n   th wo r ld       T ab le  2   ex p lain s   th at  s ev er al   co u n tr ies  ar n o in clu d e d   in   th to p   ten   a f f iliates   in   th C h atGPT   STE AM   ed u ca tio n   r esear ch .   Ap ar f r o m   th e   Un iv er s ity   o f   B ir m in g h am ,   Du k Un iv e r s ity ,   an d   J o h n s   Ho p k in s   Un iv er s ity   as  to p   a f f iliates   in   C h atGPT   r esear ch   in   tech n o lo g y   s co p e,   th US  a n d   UK  h av o th er   af f iliatio n s T h Un iv er s ity   o f   Ma n ch ester   an d   th Un iv e r s ity   o f   L o u is v i lle  f o r   s cien ce   s co p a n d   Pr o m o tio n   o f   E m er g in g   Evaluation Warning : The document was created with Spire.PDF for Python.
I n J   E v al  &   R es E d u c     I SS N:   2252 - 8 8 2 2       E va lu a tio n   o f Ch a t GP T res ea r ch   in   S TEA M e d u ca tio n   ( B in a r   K u r n ia   P r a h a n i )   603   an d   E v alu atio n   R esear ch   So c iety   ( UK)   f o r   m ath em atics  s co p e.   I n   s cien ce ,   f o u r   a f f iliates   f r o m   Ger m an y ,     th UK,   th e   US,  an d   C an ad a   s u p p o r C h atGPT   STE AM   e d u ca tio n   r esear c h E n g in ee r in g - STE AM   ed u ca tio n   h as  1   US  af f iliate  an d   two   f r o m   C h in a.   Me an wh ile,   r esear ch   o n   ar s co p h as  af f iliatio n s   f r o m   C h in an d   Ger m an y I n d ia,   th UK,   an d   th US  f o r   tech - STE AM   ed u ca tio n   r esear ch ,   an d   th e   UK  an d   Ger m an y   f o r   m ath - STE AM   ed u ca tio n   r esear ch .       T ab le  2 .   T o p   co u n tr y   an d   a f f il iatio n   C o u n t r y   S   T   E   A   M   To p   a f f i l i a t i o n     TP   U n i t e d   S t a t e s   20   1 1 2   22   10   -   D u k e   U n i v e r si t y ,   J o h n s   H o p k i n s Un i v e r si t y   3   U n i t e d   K i n g d o m   12   27   -   4   -   U n i v e r si t y   o f   B i r mi n g h a m   4   A u st r a l i a   9   23   6   3   -       C a n a d a   7   -   -   -   -   U n i v e r si t y   o f   T o r o n t o   2   G e r man y   7   -   4   -   1   F a u   Er l a n g e n   2   I n d i a   -   27   4   5   -   S i k k i m   U n i v e r si t y   5   C h i n a   -   26   8   5   -   Ti a n j i n   M e d i c a l   U n i v e r si t y ,   Z h e n g z h o u   U n i v e r si t y   3   H o n g k o n g   -   -   -   -   1       Jo r d a n   -   -   -   -   1       O man   -   -   -   -   1       S a u d i   A r a b i a   -   -   -   -   1           3 . 4 .     T he  re s ea rc h m et ho ds   a nd   pa rt icipa nts in  Cha t - G P T - ST E A M   educa t io n r esea r ch   R esear ch   r eg ar d in g   th im p l em en tatio n   o f   C h atGPT   in   ev er y   f ield   o f   STE AM   ed u ca tio n   h as  s im ilar ities .   R esear ch er s   o f te n   d ev elo p   q u esti o n n air es  to   co n d u ct  s u r v e y s .   Su r v ey s   wer co n d u cted   to   f in d   o u u s er   r esp o n s es  an d   im p a ct  im p lem en tin g   C h atGPT   in   lear n in g .   A p ar f r o m   s u r v e y s ,   r esear ch er s   also   co m b in th em   with   in ter v ie ws.  T h in ter v iew's  m ain   f o cu s   was  o n   th p ar ticip an ts '   tech n o lo g ical  u s ag e   ex p er ien ce s .   Par ticip a n ts   wer ask ed   t o   p r o v i d d etails  o r   r em ar k s   o n   th e   s u b ject  u n d er   d is cu s s io n   [ 3 3 ] An o th er   m eth o d   is   liter atu r r ev iew  in   wh ich   5 3 . 5 o f   in ter n atio n al  liter atu r r e v iews  f r o m   1 9 9 0 - 2 0 1 7   d is cu s s ed   AI   [ 1 2 ] .   Fiv m et h o d s   wer u s ed   in   t h r esear ch ,   all  o f   wh ich   aim   to   i n v e s tig ate  th q u ality ,   cr ed ib ilit y ,   co m f o r t,  an d   ea s o f   u s o f   C h atGPT   in   ed u ca t io n .   T ab le  3   s u m m ar izes  m eth o d   an d   p ar ticip a n t   in f o r m atio n   f r o m   s ev er al  s tu d i es.        T ab le  3 .   R esear ch   m eth o d s   an d   p ar ticip an ts   C a t e g o r y   D e scri p t i o n   S   T   E   A   M   R e se a r c h   d e s i g n / met h o d o l o g y   S u r v e y   [ 3 4 ]   [ 3 5 ]   [ 3 6 ]   [ 3 7 ]   [ 7 ]   Ex p l o r a t o r y   [ 3 8 ]     [ 1 6 ]   [ 3 9 ]     C a se   st u d y   [ 4 0 ]   [ 4 1 ]   [ 4 2 ]   [ 4 3 ]     I n t e r v i e w   [ 4 4 ]   [ 4 5 ]       [ 4 6 ]   Li t e r a t u r e   R e v i e w   [ 4 7 ]           P a r t i c i p a n t s’   d e mo g r a p h i c s   U n i v e r si t y   st u d e n t s   [ 4 4 ]   [ 4 8 ]   [ 3 6 ]       S t u d e n t s       [ 4 9 ]   [ 5 0 ]   [ 4 6 ]   S o c i e t y   [ 3 4 ]     [ 5 1 ]       S a mp l e   s i z e   < 1 0 0   [ 4 4 ]   [ 5 2 ]   [ 3 1 ]   [ 5 3 ]   [ 4 6 ]   1 0 0 - 500   [ 5 4 ]     [ 3 6 ]       > 5 0 0       [ 5 5 ]           T h er a r s ev er al   s im ilar ities   in   tak in g   p a r ticip an ts   in   r esea r ch .   M o s s u r v ey s ,   in ter v iews ,   an d   ca s s tu d y   r esear ch   in v o lv p ar tici p an ts   f r o m   v a r io u s   lev els o f   e d u ca tio n   an d   s o ciety .   Mo s t stu d ies u s in g   in ter v iew  m eth o d s   in v o lv less   th an   5 0   p ar ticip an ts .   Su r v ey   r esear ch   h as  lar g er   s am p le  s ize,   m o r th an   5 0   o r   ev e n   u p   to   1 , 2 0 0   p eo p le.   Qu o tas  wer em p lo y ed   to   attain   r e p r esen t atio n   o f   cr itical  d em o g r ap h ic  ch ar ac ter is tics   [ 5 6 ] T h p ar ticip an ts '   d em o g r a p h ic s   v ar ied ,   in clu d i n g   teac h er s ,   a ca d em ic  s taf f ,   an d   lib r ar ian s ,   f r o m   elem en ta r y   to   u n iv er s ity   s tu d en ts .   I n   a d d itio n ,   R elm asira   et  a l [ 5 0 ]   u s co n s tr u ctiv is t,  tr an s f o r m atio n al  lear n in g   th e o r ies,   an d   co n s tr u ctio n is t to   s tu d y   th im p lem en tin g   o f   AI   f o r   s tu d en ts   in   elem en tar y   s ch o o ls .     3 . 5 .     T he  s o urce s   pu bli s hi ng   a nd   s ub j ec t   a re a   o f   Cha t G P T   in S T E A M   ed uca t io n r esea rc h   Fig u r 7   s h o ws  th to p   f iv s u b ject  ar ea s   in   C h atG PT - STE A ed u ca tio n   r esear ch .   Scien ce - STE AM   ed u ca tio n   co v er ed   f i v s u b j ec ts   p r ed o m in an tly   in   m ed i cin e,   T ec h n o l o g y   a n d   Ma th - STE AM   ed u ca tio n   r esear ch   wer d o m in ate d   b y   s o cial  s cien ce s ,   E n g in ee r in g   in   en g in ee r in g   s co p e,   an d   Ar in   co m p u ter   s cien ce s .   T h th r ee   s co p es  in   STE AM   ed u ca tio n   d o   n o in clu d m u ltid is cip lin ar y   r esear ch .   R esea r ch   in   en g in ee r i n g   an d   m ath em atics o n l y   co v er s   th th r ee   to p   s u b ject  ar ea s .   Ap ar f r o m   th ese  f iv s u b ject  ar ea s ,   th C h atGPT   in   STE AM   lear n in g   r esear ch   also   d is c u s s es  B M A   in   tech n o lo g y   s co p ( 2 4   d o c s ) ,   Ma th em atics  an d   Ph y s ics  in   E n g in ee r in g   s co p ( 1 2   d o cs),   an d   ar ts   an d   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 2 5 2 - 8 8 2 2   I n J   E v al  &   R es E d u c ,   Vo l .   14 ,   No .   1 Feb r u a r y   20 25 598 - 611   604   h u m an ities   f o r   ar e d u ca tio n   ( 4   d o cs).   All  f ield s   ar r elate d   to   ea ch   o th er ,   wh ich   allo ws  f o r   m o r t h an   o n e   s u b ject  in   ea ch   d o cu m en t.   T h s o cial  s cien ce s   f ield   in   th e   C h atGPT   in   STE AM   ed u ca tio n   r esear ch   is   r elate d   to   ed u ca tio n ,   e - lear n in g ,   an d   in f o r m atio n   tech n o lo g y   r esea r ch .   C o m p u ter   s cien ce   is   also   r elate d   t o   h u m an   in ter ac tio n ,   AI ,   co m p u ter   n et wo r k s   an d   co m m u n icatio n ,   an d   s o f twar e.   AI   ca n   b co m b in ed   with   I o T   to   c r ea te  AI o T ,   with   C h atGPT   b ei n g   a   p r o m is in g   AI   tech n o l o g y .   T h s u b ject  o f   en g in ee r in g   is   r el ated   to   b io m ed ica l   en g in ee r in g th is   is   wh at   m ak es  th n u m b er   o f   p u b licatio n s   o n   th s u b ject  o f   m ed icin r elativ ely   h ig h .   T h e   f ield   o f   co m p u ter   s cien ce   a n d   s o cial  s cien ce s   h as  m an y   p u b lis h ed   d o c u m en ts .   T ab le   4   p r o v id es  in f o r m atio n   th at  m o s t to p   s o u r ce s   h av to p   s u b ject  ar ea s .     Acc o r d in g   to   Fig u r es  4   a n d   5 ,   in ter n atio n al   r esear ch er s   p u b l is h   th eir   ar ticles  in   jo u r n al   f o r m .   T h er e   ar 1 1   to p   s o u r ce s   co n s is tin g   o f   1   b o o k ,   f o u r   p r o ce e d in g   p a p er s ,   an d   s ix   jo u r n als  in   T ab le  4 .   T h to p   s u b ject   ar ea s   o f   th ese  to p   s o u r ce s   ar e   s o cial  s cien ce s   an d   co m p u te r   s cien ce ,   b o t h   o f   wh ich   ar e   in clu d ed   i n   th to p   s u b ject  ar ea s ,   wh ich   ar ex p lain ed   in   Fig u r 7 .   T h f ield   o f   s cien ce - STE AM   ed u ca tio n   is   wid ely   p u b lis h ed   in   n atu r jo u r n als  with   th Natu r Pu b lis h in g   Gr o u p   in   th UK.   Ma n y   UK  r esear ch er s   p u b lis h ed   th eir   C h atGPT   r esear ch   in   th is   jo u r n al  a n d   m ad th UK  th to p   c o u n tr y   af ter   th US.  R esear ch er s   in   tech n o lo g y - STE AM   ed u ca tio n   p u b lis h   th r o u g h   j o u r n als  an d   co n f er en ce s ,   in clu d in g   th jo u r n al  An n als  o f   B io m ed ical  E n g in ee r i n g   with   p u b lis h er   Sp r in g er   in   th Neth er lan d s   ( 1 8   d o cs).   T h i s   jo u r n al  also   p u b lis h es  1 7   e n g in ee r in g - STE AM   ed u ca tio n   r esear ch   d o cu m e n ts .   T h US,  as  th to p   co u n tr y ,   also   co n tr ib u ted   to   p u b lis h ed   co n f er e n ce   d o cu m e n ts   in   tech n o lo g y   a n d   ar STE AM   ed u ca tio n .   C an ad h as  th p u b lis h er   J MI R ,   wh i ch   co n tain s   ar ticles  ab o u t te ch n o lo g y   an d   m ath em atics ST E AM   ed u ca tio n .           Fig u r 7 .   T h s u b ject  ar ea       T ab le  4 .   T o p   s o u r ce   N a me  s o u r c e s   Ty p e s   To p   s u b j e c t   a r e a   TP   S   T   E   A   M   N a t u r e   Jo u r n a l   M   12   8       3   A n n a l o f   B i o me d i c a l   En g i n e e r i n g   E   3   18   17   2     Li b r a r y   H i   T e c h   N e w s   CS       9       JM I R   M e d i c   Ed u   SC     7       1   Le c t u r e   N o t e s   i n   C o m p   S c i e   B o o k   CS   6           C EU R   W o r k sh o p   P r o c e e d i n g s   C o n f e r e n c e   p a p e r   CS     4     2     Jo u r n a l   o f   A p p l i e d   Le a r n i n g   a n d   T e a c h i n g   Jo u r n a l   SC     5         I Ti C S E   C o n f e r e n c e   p a p e r   SC   4           A C M   I n t e r   C o n f .   P r o c e e d i n g   S e r i e s   CS     2     1     C H I   P r o c e e d i n g s   CS     2         Ed u   a n d   i n f o r mat i o n   t e c h .   Jo u r n a l   SC         2     N o t e :   CS = C o m p u t e r   sc i e n c e ;   S C = S o c i a l   sc i e n c e ;   M = M u l t i d i s c i p l i n a r y ;   E = En g i n e e r i n g       3 . 6 .     T o p c it ed  do cum ent s   a n d v is ua liza t io n o f   co - o cc urre nce  k ey wo rds   o f   Cha t G P T   i n ST E A M   T ab le  5   co n tain s   in f o r m atio n   o n   to p   citatio n s   o f   a r ticle  ab o u C h atGPT   in   ea ch   f ield   i n   STE AM   ed u ca tio n .   E v en   th o u g h   r esear ch   o n   C h atGPT   in   ed u ca tio n   i s   v er y   n ew  an d   is   h o to p ic  b ein g   d is cu s s ed   b y   r esear ch er s ,   m an y   ar ticles  h av r ec eiv ed   m o r t h an   1 0 0   cit atio n s .   So m o f   th ese  d o cu m en p u b licatio n s   ar e   s u r v ey   r esear ch ,   in ter v iews,  o r   liter atu r s tu d ies.  All  d o cu m en ts   will  also   b p u b lis h ed   in   th 1 s to   2 n d   q u ar ter   o f   2 0 2 3 .   Evaluation Warning : The document was created with Spire.PDF for Python.
I n J   E v al  &   R es E d u c     I SS N:   2252 - 8 8 2 2       E va lu a tio n   o f Ch a t GP T res ea r ch   in   S TEA M e d u ca tio n   ( B in a r   K u r n ia   P r a h a n i )   605   T ab le  6   p r o v i d es  in f o r m atio n   ab o u ten   k ey wo r d s   o f te n   ap p ea r in g   in   C h atGPT   r esear ch   in   STE AM   ed u ca tio n .   Fo u r   to p   k e y wo r d s   o f ten   ap p ea r ,   n am ely   AI ,   C h atGPT ,   C h atb o t,  an d   h u m a n ,   an d   th ey   ar o f ten   u s ed   in   STE AM   ed u ca tio n   te ch n o lo g y   r esear ch .   So m k ey wo r d s   ar e   also   u s ed   in   th te ch n o lo g y   f ield .   T h e   k ey wo r d s   m ac h in lear n i n g   an d   h u m a n s   ar also   o f te n   u s ed   i n   STE AM   lear n in g   s cien ce   r esear ch .       T ab le  5 .   T o p   h i g h est cited   C h atGPT   in   ed u ca tio n   PY   TC   R e c o mm e n d a t i o n   R e f .   2 0 2 3   2 2 5   F u r t h e r   r e s e a r c h   s h o u l d   f o c u s   o n   i d e n t i f y i n g   n e c e s sary   sk i l l s,   e x a m i n i n g   b i a ses,   d e t e r mi n i n g   o p t i m a l   A I - h u m a n   c o m b i n a t i o n s,  a ssess i n g   t e x t   a c c u r a c y ,   a n d   a d d r e ssi n g   e t h i c a l   a n d   l e g a l   i ss u e s.   [ 5 7 ]   2 0 2 3   2 0 2   C h a t G P h a p o t e n t i a l   f o r   sma l l   g r o u p   e d u c a t i o n   p a r t i c u l a r l y   f o r   p r o b l e m - b a se d   l e a r n i n g .   I t s a c c u r a t e   d i a l o g i c   r e sp o n s e s s u p p o r t   p r o b l e m - s o l v i n g   a n d   r e f l e c t i v e   p r a c t i c e .   R e s e a r c h e r s   c a n   u se  t h e   m o s t   r e c e n t   v e r si o n   o f   C h a t G P t o   o b t a i n   a n   a c c u r a t e   d e p i c t i o n .   [ 5 8 ]   2 0 2 3   2 0 0   Th e   r a p i d   g r o w t h   o f   l i t e r a t u r e   o n   C h a t G P a p p l i c a t i o n s   n e c e s si t a t e s f u r t h e r   st u d i e a n d   r e v i e w s.   Th e   r e v i e w 's  si n g l e   a u t h o r   s c r e e n i n g   a n d   i n t e r p r e t a t i o n   m a y   l i mi t   i n t e r p r e t a b i l i t y .   [ 2 9 ]   2 0 2 3   1 9 1   La r g e   l a n g u a g e   mo d e l i n   e d u c a t i o n   c a n   e n h a n c e   l e a r n i n g   b u t   mu s t   b e   e v a l u a t e d   f o r   l i mi t a t i o n s,  b i a ses ,   a n d   e t h i c a l   r e q u i r e me n t s.  H u ma n   m o n i t o r i n g   a n d   c r i t i c a l   t h i n k i n g   a r e   c r u c i a l ,   a n d   f u r t h e r   r e s e a r c h   i n e e d e d .   [ 5 9 ]   2 0 2 3   1 2 2   H i g h e r   e d u c a t i o n   m u s t   f o c u o n   a c a d e mi c   i n t e g r i t y ,   d i g i t a l   l i t e r a c y ,   w r i t i n g   sk i l l s ,   a n d   c r i t i c a l   t h i n k i n g .   T h i a p p r o a c h   c a n   e n h a n c e   e m p l o y a b i l i t y ,   g e n e r a t e   n e w   i d e a s,  a n d   so l v e   r e a l - w o r l d   p r o b l e ms.   T h i s   a p p r o a c h   w i l l   h e l p   st u d e n t s ,   t e a c h e r s,  a n d   i n st i t u t i o n b u i l d   t r u s t   a n d   e n s u r e   a   s t u d e n t - c e n t r i c   a p p r o a c h   t o   A I   t o o l s .   S t u d e n t s   m u st   b a l a n c e   t h e i r   2 1 s t - c e n t u r y   s k i l l s   b e f o r e   u s i n g   A I   l a n g u a g e   t o o l s l i k e   C h a t G P T.   T h e n ,   t h e y   s h o u l d   p r a c t i c e   u si n g   A I   l a n g u a g e   t o o l t o   s o l v e   r e a l - w o r l d   p r o b l e ms.   [ 6 0 ]       T ab le  6 .   T o p   1 0   k e y wo r d s   K e y w o r d s   To t a l   d o c s   O c c u r r e n c e s   Li n k   s t r e n g t h   S   T   E   A   M   S   T   E   A   M   S   T   E   A   M   AI   66   1 6 4   23   12   5   19   71   10   3   3   41   2 7 6   19   45   5   C h a t G P T   53   1 8 2   39   14   5   21   89   17     4   44   2 8 7   24     6   H u ma n   31   63   30   12       27           1 8 4         M a c h i n e   l e a r n i n g   20         4   .                     La n g u a g e   mo d e l       22   5     0                     H u ma n s   16           12           41           B i o me d i c a l   e n g i n e e r i n g       15                           C h a t b o t s     61   13         13           68         N a t u r a l   l a n g u a g e   p r o c e ss i n g           3     11       3     67       5   M a t h - C o m p u t i n g           3                           Nu m er o u s   s tu d ies  claim   th at   C h atGPT   h as  b en ef icial  a n d   h ar m f u u s es  in   th e   ac ad e m ic.   T h p r o ject  b y   C ar d en as  et  a l [ 6 1 ]   o f f er s   AI   lear n in g   f o r   STE AM   ch allen g es,  s o   s tu d en ts   lear n   co d in g   an d   m ac h i n e   lear n in g   u s in g   r o b o o r   m ic r o co n tr o ller s   to   b u ild   t h eir   cr ea t iv s o lu tio n s   an d   p r o to ty p es.  Ma ch in lear n in g   is   b r an ch   o f   AI   th at  en ab les  c o m p u ter s   to   a n aly ze   d ata  a n d   in cr ea s ef f icien cy   a n d   ac cu r ac y   as  m o r d ata  is   en ter ed   [ 6 2 ] ,   [ 6 3 ] .   T h i n teg r atio n   o f   m ac h in e   lear n in g   in   STE AM   ed u ca tio n   a f f ec ts   th e   teac h in g   an d   d ep th   o f   STE AM   co n ce p [ 6 4 ] .   W h ile  C h atGPT   is   b en ef icial  i n   lear n in g   a p p licatio n s ,   it  also   r aises   is s u es  with   o v er s im p lific atio n ,   eth ical  u s ag e,   s tu d e n ts   ass ess m en t,  an d   s tu d en ts   r eq u ir e d   t o   lear n   s cie n tific   ter m in o lo g y   f o r   STE AM   ed u ca tio n .   Ma n y   s tu d en ts   f ac d if f icu lties   with   s p ec if ic  co m p eten cies.  T h in tr o d u ctio n   o f   C h atGPT   an d   s im ilar   to o ls   m ay   im p ed e   th t h o r o u g h   ass im ilatio n   o f   m eth o d s   an d   o u tc o m es,  im p air in g   th e   lear n in g   p r o ce s s   [ 7 ]   T h er ar e   th r ee   p o in ts   in   C h atGPT ,   s u ch   as  n atu r al   lan g u ag p r o ce s s in g ,   C h atb o t,   an d   m ac h in e   lear n in g   [ 6 5 ] .   I m ak es  v ir tu a in ter ac tio n   ea s y ,   s o   s tu d e n ts   g et  f ee d b ac k   an d   ex p lan atio n s   [ 6 6 ] .   Ho wev er ,   s tu d en ts   r esp o n d   to   ac cu r ate  r esp o n s es  an d   f ee less   th o u g h tf u [ 3 6 ] .   b ala n ce d   a p p r o a ch   is   n ec ess ar y   f o r   s u cc ess f u in teg r atio n ,   en h an c in g   h u m a n   s u p er v is io n   an d   e n g ag em e n t.  E d u ca to r s   h av t o   ex p lo r C h atGPT   an d   teac h   th eir   s tu d en ts   h o w   to   u s it.  Fig u r 8   v is u aliz es  h o s ev er al  k ey wo r d s   ar co n n ec ted .   L in k s   b etwe en   k ey wo r d s   in   tech n o l o g y   an d   en g in ee r i n g   r esear ch   h av th s am p atter n   an d   a r m o r n u m er o u s   th an   o th e r   s co p es.   T h e   s am p atter n   o cc u r s   i n   th e   s co p o f   ar t   an d   m ath em atics,  wh ic h   s h o ws  th at  m o r e   r esear ch   is   n ee d ed   i n   th is   s co p e.   B ased   o n   Fig u r 8 ( a) ,   r esear ch   o n   im p lem en tin g   C h atGPT   in   s cien ce   ed u ca tio n   f o cu s es o n   s o lu tio n s ,   ef f ec tiv en ess ,   an d   r esp o n s es.  Su g g est  teac h in g   AI   eth ics  th r o u g h   ca s s tu d y ,   i n ter ac tiv s em in ar s ,   s elf - g u id ed   lear n in g   an d   FGD,   co n s id er i n g   th e   im p licatio n s   o f   AI   in   m e d ical  ed u ca tio n   [ 4 0 ] ,   [ 4 7 ] .   Sán ch ez - R u iz  et  a l [ 7 ]   ex p lo r es h o C h atGPT   ca n   a f f ec t stu d en ts   cr itical  th in k in g ,   p r o b lem - s o lv in g ,   an d   c o llab o r atio n .     T h f in d in g s   L ian g   et  a l [ 3 8 ]   s h o w ed   th at  C h atGPT   ca n   s o lv s cien ce   p r o b lem s   b y   ex p lain in g   f o r   s o lu tio n s   an d   r eso lv in g   s o m s cien ce   co m p u tatio n   is s u es.  Ho wev er ,   h ig h   f ailu r r at es  ar ca u s ed   b y   C h atGPT ' s   d if f icu lty   co n v er ti n g   f ig u r es  in to   wo r d s   an d   tab le - b ased   q u esti o n s .   I o n ly   p r o v id es  s atis f ac to r y   q u iz  r esp o n s es  an d   g ets  s o m e   q u esti o n s   wr o n g   [ 6 7 ] .   I t   ca n n o co n d u ct   p r ac tical  e x p er im e n ts   o r   tak t h r o le   Evaluation Warning : The document was created with Spire.PDF for Python.
                      I SS N :   2 2 5 2 - 8 8 2 2   I n J   E v al  &   R es E d u c ,   Vo l .   14 ,   No .   1 Feb r u a r y   20 25 598 - 611   606   o f   s tu d en ts ,   b u it  ca n   an s wer   n u m er ical  p r o b lem s   an d   g iv d etailed   ex p lan atio n s .   W h en   co m b in e d   with   r ef lectiv ex er cises ,   it c o u ld   i m p r o v e   wr itin g   an d   ex p er im e n tatio n   u n d er s tan d in g .   Acc o r d in g   to   Fig u r 8 ( b )   a n d   8 ( c) ,   r esear ch   in   tech n o lo g y   a n d   en g i n ee r in g   is   m ain ly   o f   th R n an d   ca s s tu d y   ty p e,   f o cu s in g   o n   d ig ital  tech n o lo g y   p r ac tice,   s tu d en ts   r esp o n s e,   a n d   p r a ctice   u s co d e.   B y   o f f er in g   in d i v id u alize d   f ee d b ac k ,   C h atGPT ' s   ca p ac ity   to   co m p r eh e n d   an d   p r o d u ce   h u m an   lan g u ag e   ca n   im p r o v s o f twar en g in ee r in g   ed u ca tio n   [ 6 8 ] .   So ,   C h at GPT  h as  th p o ten tial  to   h elp   p r o g r a m m er s   in   g en er atin g   c o d [ 6 9 ] .   B u to   av o id   u n s u p er v is ed   u s th at  m ig h h av d etr im en tal  ef f e ct  o n   lear n in g ,   it  is   cr itical  to   m o d if y   cu r r icu la  t o   ac co u n f o r   s h if tin g   en g i n e er   p r o f iles   an d   o f f er   d ir ec tio n   f o r   g en er ativ e   AI   in teg r atio n .   I m p lem en tin g   C h atGPT   g iv es  n ew  ch allen g es  f o r   en g in ee r in g   ed u ca tio n ,   s o   we  m u s d ev elo p   ess en tial  s k ills   f o r   f u tu r e   en g i n ee r s   [ 7 ] .   C h atGPT   h as  th e   p o ten tial  to   b an   in v al u ab le  r e s o u r ce   f o r   s tu d e n ts   wh o   wan to   lear n   h o to   s o lv co d e   d if f ic u lties   d if f er en tl y   an d   g et  p ast  th eir   p r o g r a m m in g   o b s tacle s   [ 7 0 ] T ea ch er s   ca n   cr ea te  c o d in g   t ask s   th at  r ed u ce   th e   p o s s ib ilit y   o f   ch ea tin g   wh ile  r etain in g   th eir   v alid ity   as  ev alu atio n   to o ls   b y   b ein g   awa r o f   th eir   lim its .   Fig u r 8 ( d )   s h o ws  th at  im p le m en tin g   C h atGPT   in   ar ts   f o cu s es  o n   cr ea tiv ity ,   co m p u ter   g a m es,  d ig ital  d ev ices,  g am es  an d   b e h av io r a to o ls ,   cu ltu r al  h er itag e,   t h ea ter ,   an d   elem en tar y   s ch o o ls .   A I   C h atGPT   ca n   b e   b en ef icial  to   s cr ee n   m ed ia  p r o g r am s ,   ex p an d i n g   ac ce s s   an d   d iv er s ity   f o r   u n d er r e p r esen ted   s tu d en ts   an d   ad d r ess in g   th tr a d itio n al  is s u es  f o r   s tu d en ts   s tu d y i n g   m e d i p r o d u ctio n .   I n teg r atin g   C h at GPT  in to   s tu d en ts ar p r o jects  en h a n ce s   em p lo y m en o p p o r tu n ities ,   p r o m o tes   cr ea tiv m in d s et,   e n h an ce s   ac ce s s ib ili ty   an d   in clu s iv ity   f o r   m ed ia  ar ts   co u r s es,  an d   em p h asizes  ae s th etic  ju d g m en t,  cr itical  u n d er s tan d i n g ,   an d   th e o r etica u n d er s tan d i n g   [ 4 3 ] .   I m p lem en tin g   Min ec r af i n   th ea tr ed u ca tio n   en r ic h es  s tu d en ts '   cu ltu r al  h er itag k n o wled g e,   en co u r a g es  ac tiv p ar ticip ati o n ,   an d   f ac ilit ates  ex p er ien ti al  lear n in g   [ 3 7 ] .   T h ese  g am e s   allo s tu d en ts   to   ex p r ess   th em s elv es,  u n leash   im ag in atio n ,   a n d   u n d er s tan d   h i s to r y .   Gam b ased   lear n in g   is   s tr ateg y   th at  ca n   im p r o v th eir   a b ilit ies,  o p tim ize  lear n in g ,   s u p p o r b e h av io r   ch an g e,   an d   s o cialize   [ 7 1 ] .   I n co r p o r atin g   d ig ital   v is u al  m ed ia  in   ed u ca tio n al  p r o g r am s   is   ess en tial  f o r   ac h iev in g   an d   p r o m o tin g   ess en tial  k n o wled g r at h er   th an   s u p e r f icial  in f o r m atio n .   Gen - AI ' s   im p ac o n   s cr ee n   m e d ia  an d   cr ea tiv e   ar ts   ed u ca tio n   is   s ig n if ican t,   as  it   en h an ce s   co n te n g en er atio n ,   d ig ital  liter ac y ,   ac ce s s ib ilit y ,   d iv er s ity ,   ae s th etic  tast e,   an d   cr itical  v is u al   liter ac y .   I n teg r atin g   Gen - AI   in to   s cr ee n   p r o d u ctio n   ' id ea tio n '   s e s s io n s   ca n   im p r o v e   s tu d en ts '   cr ea tiv e   in ten tio n s .   Ma n y   C h atGPT   r esear ch   o n   m ath em atics  s u b jects  u s GP T   s er ies  3   an d   4 .   Fig u r 8 ( e)   s h o ws  th at  C h at  GPT  in   m ath em atics  ed u ca tio n   h av co n n ec tio n   k ey wo r d   with   ass ess m en t.  C h at  G PT   4   n ee d s   h elp   with   m u ltip le - ch o ice   an d   in f o g r ap h ic  q u esti o n s .   C h atGPT   is   g o o d   in   ar ith m etic   an d   alg eb r aic  co m p u tatio n s   b u t   s tr u g g les  with   lo n g er   q u er ies.  T h e   co m p lex ity   o f   th e q u ati o n s ,   th e   in p u d ata,   a n d   th i n s tr u ctio n s   all  af f ec t   C h atGPT ' s   ac cu r ac y   an d   e f f ic ac y ,   b u t   it  s h o u ld   g et  b etter   at  tack lin g   ch allen g in g   m ath   p r o b lem s   [ 4 6 ] ,   [ 7 2 ] .   I r esp o n d s   to   u n an s wer ed   q u es tio n s ,   o f f er s   clea r   in s tr u ctio n s ,   an d   p r o v id es  ac cu r ate,   tr u s two r th y   d ir ec tio n s   d esp ite  its   u n r eliab ilit y   f o r   ca l cu latio n s .   I m p lem e n tin g   C h at GPT  d u r in g   m at h - co m p u ter   s c ien ce   ed u ca tio n   ca n   en h an ce   s tu d en ts   cr itical  th in k in g ,   co m m u n icatio n ,   an d   p r o b lem - s o lv in g   [ 7 3 ] ,   [ 7 4 ] .   Desp ite  th eir   u p b ea t   b en ef its ,   C h atGPT   h as  s ev er a lim itatio n s   f o r   its   p er f o r m a n ce   in   r ad i o lo g y ,   m ed ici n e,   an d   n u clea r   m ed icin e   [ 7 5 ] .   T h ef f ec tiv en ess   d ep en d s   o n   s tu d en ts   k n o wled g e ,   s o   C h atGPT   is   n o t th s o le  lear n in g   r eso u r ce .         ( a)   Evaluation Warning : The document was created with Spire.PDF for Python.
I n J   E v al  &   R es E d u c     I SS N:   2252 - 8 8 2 2       E va lu a tio n   o f Ch a t GP T res ea r ch   in   S TEA M e d u ca tio n   ( B in a r   K u r n ia   P r a h a n i )   607     ( b )       ( c)         ( d )   ( e)     Fig u r 8 .   C o m p a r in g   k ey wo r d s   v is u aliza tio n   o f   C h atGPT   in   ( a)   s cien ce ,   ( b )   tech n o lo g y ,   ( c)   en g in ee r in g ,     ( d )   ar t,  a n d   ( e)   m ath em atics e d u ca tio n   in   th e   wo r ld       Evaluation Warning : The document was created with Spire.PDF for Python.