I n t e r n at ion al   Jou r n a l   of   I n f o r m at ics   an d   Com m u n icat ion   T e c h n ol ogy  ( I J - I CT )   Vo l .   1 4 ,   N o .   1 A pr i l   20 2 5 ,   pp.   42 ~ 49   I S S N:  2252 - 8776 DO I 10 . 11591/i ji c t . v 1 4 i 1 . pp 42 - 49             42       Jou r n al  h o m e page ht tp: // ij ict . iaes c or e . c om   R e al  t im e  h a n d  ge st u r e  d e t e c t io n  b y  u si n g c on v ol u t io n al  n e u r al   n e t w or k  f or  i n - ve h ic le  i n f or t a in m e n t  sy st e m s       Wan   M o h d   Yaak ob   Wan   B e j u r i 1 ,   S it i   Az i r As m ai 1 ,   Raj a   Rin a   Raj I k r a m 1 ,   Nur   Raid ah   Rahi m 1 Naj wan  K h am b ar i 1 ,   M oh d   S an u s Az m i 1 ,   Yus   S h ol va 2   1 F a kul ti   T e kn o l o gi  M a kl uma da n K o mun ik a s i,  U ni ve r s it T e kn ik a M a la y s ia  M e la ka , D ur ia T ungga l,  M a la y s ia   2 F a kul ta s  T e kni k, U ni ve r s it a s   T a ngj ungpur a P o nt ia na k,  I nd o n e s ia       Ar t ic l e   I n f o     AB S T RA CT   A r ti c le  h is tor y :   R e c e i ve A ug  21,   2024   R e vi s e Oc t   19,   2024   A c c e pt e N o v   24,   2024       N o w a d a y s ,   v ar i e t y   o t ech n o l o g i e s   o n   au t o n o mo u s   v eh i cl e s   h av e   b een   e x t e n s i v e l y   d e v el o p e d ,   i n cl u d i n g   i n - v e h i c l i n fo t ai n me n t   (I V I ) .   I t   h av e   b ee n   n o t ed   as   o n e   o t h e   k ey   s e r v i ce s   i n   t h e   a u t o m o b i l e   i n d u s t ry .   I n   t h n e ar   fu t u re,   p e o p l w i l l   b ab l e   t o   w at ch   s o me  v i rt u al   r e al i t y   (V R)   m o v i e s   t h ro u g h   t h s t re ami n g   s e rv i ce   p ro v i d ed   i n   t h v eh i cl e .   H o w ev e r,   p e rs o n   s o me t i me   n o t   t en d   t o   b e   j o y   w h i l e   w at ch i n g   e s p ci al l y   w h en   t h e   r em o t c o n t ro l l e o a u d i o   s en s o r y   co n t ro l l e r   l a ck   o b at t e r y   o t o o   far  fr o m   I V I   p an e l .   T h u s ,   t h e   p u rp o s e   o t h i s   re s e ar ch   i s   t o   d e s i g n   a   s c h eme   o r e al   t i me  h an d   g e s t u re  d e t ec t i o n   f o i n - v e h i c l i n fo t ai n me n t   s y s t em ,   i n   o r d e t o   c r e at h u m an   c o m p u t e e x p e r i e n ce .   I n   t h i s   r e s e ar ch ,   t h i m a g e   o h u m an   p al m   h an d   w i l l   b e   t ak e n   b y   u s i n g   c a me ra   fo r eco g n i z e   t h h an d   g e s t u re   a c t i o n .   T h i s   p ro p o s e d   s c h eme  w i l l   r eco g n i z h u m an   g e s t u r e   a n d   c o n v e rt   t o   b co m p u t e r   i n t ru c t i o n ,   t h at   c an   b e   u n d e rs t o o d   b y   IV I   d ev i ce.   A s   re s u l t ,   i t   s h o w   o u r   p ro p o s e d   s ch eme   c a n   b t h e   mo s t   c o n s i s t e n t   i n   t e r m   o a ccu ra cy   an d   l o s s   c o m p ar e d   t o   o t h e rs   me t h o d .   O v e ra l l ,   t h i s   r e s e ar ch   r e p re s en t s   s i g n i fi c a n t   s t e p   t o w ard   i m p ro v i n g   b e t t e r   u s e r   e x p e ri e n ce.   F u rt h erm o r e,   t h p ro p o s ed   s c h eme  i s   a n t i c i p at ed   t o   c o n t ri b u t s i g n i fi c an t l y   t o   t h I V f i e l d ,   b e n e f i t i n g   b o t h   ac a d em i a n d   s o c i e t al   o u t c o me s .   K e y w o r d s :   C o n v u l ut i o nl   ne ur a l   n e t wo r k   Ha n ge s t ur e   de t e c t i o n   Hu m a n   c o m put e r   i n t e r a c t i o n   In - v e hi c l e   i n f o r t a i nm e n t   V i r t ua l   r e a l i t y   Th i s   i s   a n   o p en   a c ces s   a r t i c l u n d e r   t h CC  B Y - SA   l i cen s e.     C or r e s pon din A u th or :   W a n   M o h Ya a ko b   W a n   B e j ur i   F a ku l t i   T e k n o l o g i   M a k l u m a t   da n   K o m u ni ka s i ,   Univ e r s i t i   T e k ni ka l   M a l a y s i a   M e l a ka   Dur i a n   T un gga l ,   M a l a y s i a     E m a i l y a a ko b@ ut e m . e du. m y       1.   I NT RODU C T I ON   In - v e hi c l e   i nf o t a i nm e n t   ( I VI )   s y s t e m s   r e pr e s e n a   s o phi s t i c a t e i n t e gr a t i o n   o f   v a r i o us   v e hi c u l a r   f u n c t i o n s   i n t o   a   uni f i e d,   s c r e e n - b a s e i n t e r f a c e ,   o f f e r i ng  us e r s   e s s e n t i a l   i n f o r m a t i o n   a n e n t e r ta i nm e n t   f e a t ur e s   [ 1] - [ 10 ] .   T h e s e   s y s t e m s   t y p i c a l ly   c o n s o l i da t e   m u l t i p l e   s e c o n da r y   f u n c t i o n s   o f   t h e   v e hi c le  i n t o   a   s i n g l e ,   a c c e s s i b l e   d i s p l a y ,   pr o m i ne n t l y   po s i t i o ne d   o n   t h e   v e hi c l e ' s   f r o n t   pa n e l .   B y   l e v e r a g i ng  a   c om b i na t i o n   o f   s e ns o r y   i nput   m e c ha ni s m s   a n pr o c e s s i ng  s u bs y s t e m s ,   I VI   s y s t e m s   a r e   de s i g n e t o   e n h a nc e   t he   dr i vi ng  e x pe r i e n c e   t h r o ugh   i n t e r a c t i v e   c a pa bi li t i e s .   T hi s   i nv o l vi ng  s uc h   a s   r e m o t e   c o n t r o l s ,   to uc h s c r e e ns ,   a n v o i c e   c o m m a n d s .   T h e   m a i pur po s e   o f   I VI   s y s t e m   ba s i c a l ly   i s   t f a c i li t a t e   e f f e c t i v e   us e r   i n t e r a c t i o n   by   c o nv e r t i n g   c o m m a n d s   o r   s a f e t y   c a m e r a   s i g n a l   i n t o   a c t i o n a bl e   da t a ,   whi c h   i s   t h e n   pr o c e s s e a n s to r e i n   a   c e nt r a l   da t a   r e po s i t o r y   [1 1 ] - [1 5 ] .   T h us ,   i m pr o vi ng  t h e   us e r   e xpe r i e n c e   o f   I VI   s y s t e m s   i s   c r uc i a l   f o r   pa r t i c u l a r l y   dur i ng   e x t e n de j o ur n e y s .   A   we ll - de s i g n e s y s t e m   a l s o   c a n   s i g nif i c a n t l y   c o n t r i b ut e   to  d r i ve r   c o m f o r a n s a t i s f a c t i o n   [1 6 ] - [ 2 1] .   De s pi t e   t h e   s i g ni f i c a n t   a dv a n c e m e n t s   h a v e   b e e n   m a de   i n   pr e vi o us   s t ud i e s   [ 21] - [ 23] ,   t h e   pr i m a r y   f o c us   ha s   o f t e n   b e e n   o n   t o uc h s c r e e n   us e r   e x p e r i e nc e   w hi c h   o v e r l o o ki n t h e   b r o a de r   a s pe c t s   o f   us e r   i n t e r a c t i o n   t h a t   a r e   e s s e n t i a l   f o r   o p t i mi z i ng  i n - v e hi c l e   i nf o t a i nm e n t   s y s t e m s .   I n   t hi s   pa pe r ,   we   a i m   t Evaluation Warning : The document was created with Spire.PDF for Python.
I n t   J   I n f   &   C o m m u n   T e c hn o l     I S S N:   2252 - 8776       R e al  ti me   hand   ge s tur e   de tec ti on  by   us ing  c onv olut ional   ne ur al  ne t w or k   …  ( W an  M ohd  Y aak ob  W an  B e jur i )   43   de s i g n   a   r e a l - t i m e   h a n ge s t ur e   r e c o gni t i o n   s c h e m e   w i t hi n   t h e   I VI   e n vi r o nm e n t .   T hi s   f r a m e wo r c o m pr i s e s   t w ke y   c o m po n e n t s   whi c h   a r e   de t e c t i o n   a n c o m m a n e x e c ut i o n .   I i s   i de n t i f i e s   a n d   i n t e r pr e t s   di s t i n c t   h a n d   s ha pe s   i r e a l - t i m e   a n e n a bli ng  v a r i o us   c o m m a n ds   e x e c ut i o n .   T hi s   i s   i nv o vi ng  s uc h   a s   p l a y ,   p a us e ,   o r   v o l u m e   a d j us t m e n t .   T hi s   a ppr o a c h   n o t   o nl y   e nh a n c e s   pa s s e n ge r   e nj o ym e n t   pa r t i c u l a r ly   dur i n l o ng  dr i ve s ,   b ut   a l s o   i m pr o v e s   o v e r a l l   h u m a n - c o m put e r   i n t e r a c t i o n   w i t hi n   t he   v e hi c l e   a n t h e   s a m e   t i m e   pr ovi d i ng  a   c o m pr e h e ns i ve   a n us e r - f r i e n d l y   I VI   e x pe r i e nc e .   T hi s   pa pe r   i s   s t r uc t ur e d   a s   f o l l o w s ;   S e c t i o n   pr e s e n t s   t h e   pr o p o s e m e t h o d.   S e c t i o n   pr e s e n t s   t h e   r e s u l t s   a n d i s c us s i o n   o f   t h e   pr o po s e m e t h o d,   whil e   s e c t i o n   c o n c l ude s   w i t h   r e c o m m e n da t i o n s   f o r   f ut ur e   r e s e a r c h   a n pot e n t i a l   im pr o v e m e n t s   to   t h e   s y s t e m .       2.   RE AL T I M E   HAND   GE S T UR E   DE T E C T I ON   M a ny   r e s e a r c h   e x p l o r e   t h e   s u i t a bil i t y   o f   t h e   i n put   de vi c e   f o r   i n t e r a c t i ve   e n t e r t a i nm e n t   wi t h   a   f o c u s   o n   us a bi li t y ,   us e r   e n ga ge m e n t ,   a n pe r s o n a l   mot i o n   c o n t r o l   s e n s i t i v i t y .   B a s i c a l ly ,   i t   i s   b a s e o n   t h r e e   e s t a bli s h e i n t e r a c t i o n   m o da li t i e s   s uc h   a s ,   r e m o t e   c o n tr o l s ,   to uc h   s c r e e n s ,   a n v o i c e   c o m m a n d s .   F i r s t l y   is   r e m o t e   c o n tr o l s ,   i t   i s   pr o vi d i ng  a   t a c t i l e   a n f a mi li a r   i n t e r f a c e .   Ho we v e r ,   i t   i s   c o n s t r a i n e by   i s s u e s   s uc h   a s   li mi t e b a t t e r y   li f e   a n t h e   p hy s i c a l   r e a c h   r e qu i r e t o pe r a t e   t h e m .   I t   i s   po t e n t i a ll y   d im i n i s hin t h e i r   us a bi li t y   [ 22] - [ 26] .   S e c o n i s   t o uc h   s c r e e ns ,   i t   h a ve   e m e r ge a s   a   pr e v a l e n t   a l t e r n a t i v e   by   o f f e r i n a   d y n a mi c   a n i n t u i t i v e   i n t e r f a c e   whi c h   s uppo r t s   m u l t i - t o uc h   ge s t u r e s .   H o we v e r ,   t h e i r   i n t e gr a t i o n   i n t I VI   s y s t e m s   h a s   i n t r o duc e c o n c e r n s   o f   dr i v e r   d i s t r a c t i o n   a n t h e   c h a ll e n ge   o f   m a i n t a i n i ng  us a bil i t y   u n d e r   dr i vi n c o n d i t i o n s   [ 27] - [ 29 ] .   L a s t l y   i s   v o i c e   c o n t r o l   s y s t e m s .   I i s   f a c i li t a t e   h a n ds - f r e e   o pe r a t i o n   a n d   r e pr e s e n t   a   s i g nif i c a n t   a dv a nc e m e n t   by   r e duc i n phy s i c a l   i n t e r a c t i o n;   n o n e t h e l e s s .   T h e y   gr a pp l e   w i t h   c h a ll e n ge s   r e l a t e to  s pe e c r e c o gni t i o n   a c c ur a c y   a n t h e   i n t e r f e r e n c e   o f   a m b i e n t   n o i s e   [ 30] - [3 3 ] .   T h e   f i e l i s   n o w i t ne s s i ng  a   b ur ge o ni ng  i n t e r e s t   i n   h a n ge s t ur e   r e c o gni t i o n   a s   a   n o v e l   i n t e r a c t i o n   pa r a d i g m .   T hi s   e m e r g i ng  a p pr o a c pr o m i s e s   to  o v e r c o m e   t h e   l i mi t a t i o ns   o f   e xi s t i n c o n t r o l   m e t h o ds   by   pr o vi d i ng  a   m o r e   i n t u i t i v e   a n s e a m l e s s   m o de   o f   i n t e r a c t i o n .   I n   t hi s   r e s e a r c h ,   a s   m e n t i o ne b e f o r e ,   we   a i m   t de s i g n   a   s c h e m e   o f   r e a l   t i m e   h a nd   ge s t ur e   de t e c t i o n   f o r   i n - v e hi c l e   i nf o t a i nm e n t   s y s t e m ,   i n   o r de r   to  c r e a t e   h u m a n   c o m put e r   e x pe r i e n c e .   A c c o r d i n t t hi s   F i gur e   1,   i t   i s   o ut l i ne s   a   s y s t e m   f l o o f   de v e l o p i ng  a n de p l o yi ng  a   m a c hi ne   l e a r ni ng   m o de l   w i t hi n   a   we b   a pp l i c a t i o n .   I t   i s   b e g i nn i ng  w i t h   ge s t ur e   r e c o gni t i o n   p h a s e   a n a   c o m m a n e x e c ut i o ph a s e .   T h e   ge s t ur e   r e c o gni t i o n   m o du l e   pr o c e s s e s   t h e s e   i m a g e s   us i ng  a d v a n c e c o m put e r   vi s i o n   a n m a c hi n e   l e a r ni ng  t e c hni que s .   I t   i s   i nc l ud i ng  f e a t ur e   e x t r a c t i o n   m e t h o ds   l i ke   hi s t o g r a m   o f   o r i e n t e gr a d i e n t s   ( HO G)   a n c o n v o l ut i o n a l   ne ur a l   ne t wor ks   ( C NN s )   whi c h   i s   a c c ur a t e l y   c l a s s if y   h a n ge s t ur e s .   On c e   a   g e s t ur e   is   r e c o gni z e d,   t h e   c o m m a n e x e c ut i o n   m o du l e   t r a n s l a t e s   i t   i n t s pe c i f i c   I VI   s y s t e m   c o m m a n ds   s uc h   a s   n a vi ga t i n a   p l a yl i s t   o r   a dj us t i n v o l u m e .   T h e   s ys t e m   i s   o pt i mi z e f o r   r e a l - t i m e   pr o c e s s i ng  w i t h   mi n im a l   l a t e n c y   by   u s i ng  l i g h t we i g h t   m o de l s   a n de d i c a t e c o m put i n r e s o ur c e s   l i ke   GPUs .   R i go r o us   e v a l ua t i o n   a n d   v a li da t i o n   w i ll   b e   c o n duc t e to   e n s ur e   r o b us t n e s s   a n hi g h   pe r f o r m a n c e   u n de r   v a r y i ng  c o n d i t i o n s .   I i s   i nc l ud i ng  d i f f e r e n t   l i g h t i n g,   h a n s i z e s ,   a n ba c kgr o un ds .   T h e   pr o p o s e m e t h o a ddr e s s e s   pot e n t i a l   c h a ll e n g e s ,   s uc h   a s   v a r y i ng  e nvi r o nm e n t a l   c o n d i t io n s   a n pa s s e n ge r   m o ve m e n t s   t h r o ugh   a da pt i v e   a lgo r i t hm s   a n d y na m i c   f e e d b a c m e c ha ni s m s .   T hi s   a ppr oa c h   o f f e r s   a   s i g ni f i c a n t   a dv a n c e m e n t   i n   I VI   s y s t e m s   b y   e nh a nc i n h u m a n - c o m put e r   i n t e r a c t i o n   a n u l t i m a t e l y   i m pr o vi ng  t h e   o v e r a l l   us e r   e x pe r i e n c e   i n   a ut on o m o us   v e hi c l e s .           F i gur e   1.   T h e   o v e r vi e o f   e n t i r e   s c h e m e   Evaluation Warning : The document was created with Spire.PDF for Python.
                                I S S N :   2252 - 8776   I n t   J   I n f   &   C o m m u n   T e c hn o l Vo l .   1 4 ,   N o.   1 A pr i l   20 2 5 :   42 - 49   44   2. 1.     Han d   ge s t u r e   d e t e c t ion   T h e   pr o p o s e m e t h o f o r   h a n ge s t ur e   de t e c t i o n   i n   I VI   s y s t e m s   e m p l o y s   a   C NN ,   s pe c i f i c a ll y   t h e   VGG - 16  a r c hi t e c t ur e .   I t   i s   t o   r e c o gni z e   a n c l a s s if y   ha n ge s t ur e s   i n   r e a l   t i m e .   T h e   pr o c e s s   b e g i ns   w i t h   t h e   im a ge   a c qu i s i t i o n   m o du l e   w hi c h   c a pt ur e s   i m a ge s   o f   t h e   us e r 's   h a n us i ng  a   hi g h - r e s o l ut i o c a m e r a   po s i t i o n e w i t hi t h e   v e hi c l e   c a bi n.   T h e s e   i m a ge s   a r e   pr e pr o c e s s e t s t a n da r d i z e   i nput   di m e ns i o n s   t y p i c a ll r e s i z i ng  to   224   x   224   pi x e l s   a n n o r m a li z i ng  p i x e l   va l u e s   to  e nh a n c e   m o de l   pe r f o r m a n c e .   T h e   VG G - 16  n e tw or k   c o n s i s ts   o f   13   c o n v o l u t i o n a l   l a y e r s   wi t h   s m a l l   3   x   3   f i l t e r s   a n d   th r e e   f u l l y   c o n n e c ted   l a y e r s ,   de s i gn e d   to  e x tr a c h i e r a r c hi c a l   f e a tu r e s   f r o m   t h e   i n pu i m a ge s .   T h e   c o n v o l u t i o n   op e r a t i o n ,   m a t h e m a t i c a l l y   de f i n e a s   ( 1 ) :     ( ) ( , ) = ( + , + ) .   ( , ) = =   ( 1)     w h e r e   ( , )   i s   t h e   i np ut   i m a ge ,   ( , )   i s   t h e   ke r n e l   ( f il t e r )   m a t r i x   a n   ( i s   us e t o   de t e c e dge s ,   t e x t u r e s ,   a n pa tt e r n s   c o r r e s po n d i n to  di f f e r e n t   h a n ge s t ur e s .   T h e   a c t i v a t i o n   f u n c t i o n   R e c t i f i e L i ne a r   Uni t   ( R e L U)   de f i ne a s   ( 2) .      ( ) =  ( 0 , )   ( 2)     I i s   i n t r o duc e s   n o n - l i ne a r i t y   by   a ll o w i ng  t h e   m o d e l   t o   l e a r n   c o m p l e x   pa t t e r n s   ( wh e r e     i s   t h e   o ut pu f r o m   t h e   c o nv o l ut i o n a l   l a y e r ) .   T h e   o ut pu t   f r o m   t h e   f i na l   c o nv o l ut i o n a l   l a y e r   i s   f l a t t e n e a n f e in t o   f u l ly  c o n n e c t e l a y e r s   wh e r e   t h e   s o f t m a x   f u n c t i o n   c o nve r t s   t h e   l o g i t s   i n t pr o b a bil i t i e s   a s   ( 3) .     ( = | ) =   = 1   ( 3)     T hi s   i s   to   c l a s s i f y   t h e   ge s t ur e s .   T h e   m o de l   i s   t r a i ne us i n a   l a r ge   da t a s e t   o f   h a n ge s t ur e   i m a g e s   to   mi n im i z e   t h e   c r o s s - e n t r o py   l o s s .   T h e   o p t i mi z a t i o n   i s   pe r f o r m e us i ng  a l go r i t h m s   li ke   s to c h a s t i c   gr a di e n t   de s c e n t   ( S GD ) .   T hi s   a ppr o a c h   e ns ur e s   hi g h   a c c u r a c y   a n e f f i c i e n c y   i n   r e c o gni z i ng  h a n ge s t ur e s   t h e r e by   e nh a nc i n us e r   i n t e r a c t i o n   w i t h   I VI   s y s t e m s   by   pr o vi d i n a   na t ur a l ,   i n t u i t i ve   i n t e r f a c e   f o r   c o n t r oll i ng  i n - v e hi c l e   f u n c t i o na l i t i e s   w i t h o ut   r e l yi ng  o n   t r a di t i o na l   i n put   de vi c e s .     2. 2.     Ac t ion   e x e c u t ion   T h e   A c t i o n   r e c o gni t i o n   p h a s e   t r a n s l a t e s   de t e c t e h a n ge s t ur e s   i n t a c t i o n a bl e   c o m m a n ds   f o r   I VI   s y s t e m s ,   s uc h   a s   " P l a y , "   " P a us e , "   " S to p, "   " Vo l u m e   Up, "   " Vo l u m e   Do wn , "   a n " M ut e . "   A f t e r   h a n ge s t ur e s   a r e   c l a s s if i e by   t h e   C NN   us i ng  VG G - 16,   t h e   s y s t e m   m a ps   e a c h   ge s t ur e   to   a   s pe c i f i c   c o n t r o l   a c t i o n   b a s e o pr e de f i ne m a pp i ngs .   F o r   i n s t a n c e ,   a   " S w i pe   R i g h t "   m i g h t   c or r e s po n to   " P l a y , "   whil e   a   " P i nc h   O ut "   c o ul d   t r i gge r   " Vo l u m e   Up. "   T hi s   m a pp i ng  pr o c e s s   e ns ur e s   t h a t   e a c h   r e c o gn i z e ge s t ur e   i s   a c c ur a t e l y   a s s o c i a t e w i t h   t h e   c o r r e c c o m m a n d,   whi c h   i s   t h e n   e x e c ut e by   i n t e r f a c i ng  w i t h   t h e   I VI   s y s t e m ' s   A P I .   T h e   c o m m a n d   e x e c ut i o n   i s   c a r r i e o u t   i n   r e a l - t i m e   by   pr o vi d i ng  im m e d i a t e   f e e d b a c k,   s uc h   a s   vi s ua l   o r   a udi t o r y   c ue s .   T hi s   i s   to   c o nf i r m   t h a t   t h e   a c t i o n   h a s   b e e n   pe r f o r m e d.   T h e   s y s t e m ' s   e f f e c t i v e n e s s   i s   e v a l ua t e t h r o ugh   us e r   t e s t i n by  f o c us i ng  o n   m e t r i c s   li ke   r e c o gni t i o n   a c c ur a c y ,   r e s po n s e   t i m e ,   a n o v e r a ll   us e r   s a t i s f a c t i o n .   T h e   a d jus t m e n t s   m a de   a s   n e c e s s a r y   t o   e n h a nc e   pe r f o r m a n c e   a n us e r   e x pe r i e n c e .   T hi s   p h a s e   i s   c r uc i a l   f o r   c r e a t i n a n   i n t u i t i ve   a n e f f i c i e n t   i n t e r f a c e   t h a t   a l l o ws   us e r s   t c o n t r o l   I VI   f u n c t i o n s   t h r o ugh   s i m p l e   h a n ge s t ur e s .       3.   RE S UL T S   AN DI S CU S S I ON     T hi s   s e c t i o n   o ut l i ne s   t h e   f i nd i ng s   o f   o ur   s t ud y   a n pr e s e n t s   a   de t a i l e d i s c us s i o n .   F o r   o u r   im p l e m e n t a t i o n ,   we   ut i li z e M i c r o s o f t   Vi s ua l   S t ud i o   a n J up y t e r   No t e b oo a s   o u r   c o di n e nvi r o nmen t s .   T h e   li b r a r i e s   e m p l o y e i n c l ud e   Ana c o n da   Na vi ga t o r ,   T e n s o r F l o w,   F l a s k,   K e r a s ,   a n a dd i t i o n a l   li b r a r i e s   s uc h   a s   Ope nC V2  a n Ke y b o a r f o r   A P I   f u n c t i o n a li t ies .   T h e   s u b s e qu e n t   s e c t i o n s   w il l   be   d i vi de in t o   t w o   s ubs e c t i o ns ,   da t a   a c qu i s i t i o n   a n t e s t   r e s ul t s   w i t h   a n a ly s i s .     3. 1.     Dat a   ac q u is it ion   T hi s   s u b s e c t i o n   de s c r i be s   t h e   m e t h o do l o g y   f o r   p r e pa r i n t h e   e x pe r i m e n t a l   da t a .   T h e   da t a   a n r e l a t e d   i n f o r m a t i o n   we r e   s o ur c e f r o m   o nl i ne   r e po s i t or i e s   s pe c if i c a ll y   t h e   J e s t e r   da t a s e t .   I i s   f o c us e s   o n   ge s t ur e   r e c o gni t i o n   ( r e f e r   to  F i gur e   f o r   a   s a m p l e   da t a s e t) .   T h e   da t a s e wa s   o b t a i n e t h r o ugh   we b   s c r a p i n f r o m   t h e   J e s t e r   we bs i t e   f o r   e n s ur i ng  da t a   i n t e gr i t y .   I t   e n c o m pa s s e s   a   v a r i e t y   o f   ge s t ur e   c l a s s e s   i nc l ud i ng  s li d i n do wn ,   s w i p i ng  l e f t ,   dr um mi ng  f i n g e r s ,   s w i p i ng  r i g h t ,   th u m b   up,   s l i d i ng  f i nge r s   up,   a m o n ot h e r s .   E a c h   c l a s s   i s   a s s i g n e a   s pe c i f i c   n u m be r   o f   t r a i ni ng  s a m p l e s   a n t h e   t r a i ni ng  i s   c o n duc t e a c c o r di n to  t h e s e   pr e de f i ne d   c l a s s e s .   Upo n   s e tt i n up  t h e   e nvi r o nm e n t ,   t h e   R E S NE T   m o de l   wa s   t r a i n e us i ng  t h e   pr e pa r e da t a s e t   a n i t s   Evaluation Warning : The document was created with Spire.PDF for Python.
I n t   J   I n f   &   C o m m u n   T e c hn o l     I S S N:   2252 - 8776       R e al  ti me   hand   ge s tur e   de tec ti on  by   us ing  c onv olut ional   ne ur al  ne t w or k   …  ( W an  M ohd  Y aak ob  W an  B e jur i )   45   pe r f o r m a n c e   wa s   e v a l ua t e t h r o ugh   a c c ur a c y   a n l o s s   gr a phs .   T h e   vi de o   l a b e l s   we r e   e x t r a c t e d   f r o m   t h e   da t a   f r a m e   a n d i c t i o n a r i e s   we r e   c r e a t e d   to  m a l a b e ls   to  i n t e ge r   v a l ue s   a n vi c e   v e r s a .   T h e s e   da t a   di c t i o n a r i e s   f a c il i t a t e   t h e   c o n v e r s i o n   b e t we e n   i nde x   n u m be r s   a n t h e i r   c o r r e s po n d i n c l a s s   n a m e s .           F i gur e   2.   T h e   da t a s e t       3. 2.     S ys t e m   im p l e m e n t at ion   an d   t e s t in g   I n   t hi s   s u b s e c t i o n ,   t h e   r e s u l t   o f   t h e   o u r   p r o p os e s c h e m e   w i ll   be   s h o we d.   I s h o we s y s t e c o m p l e t e l y   do n e   by   r e f e r r i n t o   F i gur e   3.   Af t e r   don e   s o m e   a c t i va t i o n   c o m m a n by   us i ng  h a n ge s t ur e ,   i t   c a pa us e ,   p l a y   o r   d ot h e r   t a s s uc h   i n c r e a s i ng  v o l u m e   a n de c r e a s i ng  v o l u m e .   I n   o r de r   v e r i f y   w he t h e r   t h e   s y s t e m   c a n   b e   u s e i n   r e a l   e nvi r o nm e n t ,   t h e   t e s t   a c c e pt a n c e   h a s   b e e n   c o n duc t e d.   T h e   a c c e pt a n c e   w i ll   do n e   t h r o ugh   t we n t y   ( 20)   us e r .   B y   r e f e r r i n to  T a bl e   1,   i t   d i s p l a y s   t h e   t e s r e s ul t s   a n a na ly s i s   f r o m   e a c h   e n d - us e r   f o r   e a c h   t e s t   c y c l e   a s   we ll   a s   t h e i r   s a t i s f a c t i o n .   F r o m   t h e r e ,   i t   i s   c l e a r ly   s h o a l l   t h e   u s e r   s t a t i s f y   w i t h   t h e   im p l e m e n t a t i o n   o f   t h e   s y s t e m .       T a bl e   1.   T e s t   r e s ul t   a n a na l y s i s   f o r   e a c h   e n d - us e r   S y s t e m   U s e r s   T e s c y c l e   R e s ul t   S a ti s f i c a ti o n   M a nua im pl e me nt a ti o n   P r o je c A dmi n   1   S U C C E S S   S A T I S F I E D   2   3   W e a ppl ic a ti o n s y s t e m   E nd - U s e r   1   S U C C E S S   S A T I S F I E D   2   3   E nd U s e r   1   S U C C E S S   S A T I S F I E D   2   3           F i gur e   3.   A c t i v a t i o n   c o m m a n by   h a n ge s t ur e   Evaluation Warning : The document was created with Spire.PDF for Python.
                                I S S N :   2252 - 8776   I n t   J   I n f   &   C o m m u n   T e c hn o l Vo l .   1 4 ,   N o.   1 A pr i l   20 2 5 :   42 - 49   46   3. 3.     P e r f o r m an c e   e val u at ion   T h e   pe r f o r m a n c e   e v a l ua t i o n   o f   t h e   ge s t u r e   r e c o gni t i o n   m o de l s R E S NE T ,   VG G - 16,   a n VG G - 19   a s   s h o w n   i n   F i gur e   4 .   B a s i c a ll y ,   i t   wa s   c o n duc t e by   t r a i ni ng  e a c h   m o de l   f o r   50  e p o c h s   w i t h   200  s t e ps   pe r   e po c h   a n f o l l o we by   v a li da t i o n   o v e r   5000  s teps .   T h e   a c c ur a c y   pe r f o r m a n c e   gr a phs   i n d i c a t e   t h a t   t h e   R E S NE T   m o de l   a c hi e v e r a p i l e a r ni ng  a n r e a c hi ng  n e a r   pe r f e c t   t r a i ni ng  a c c ur a c y   b ut   i t s   t e s t   a c c ur a c y   s t a bi li z e a r o un 0. 8.   T hi s   s ugg e s t s   t h a t   whi l e   R E S NE T   e f f e c t i v e ly   l e a r n s   f r o m   t h e   t r a i ni ng  da t a ,   i t   m a y   b e   pr o n e   to  o v e r f i t t i n a s   e vi de n c e by   i t s   r e duc e g e n e r a li z a t i o n   a bil i t y   o n   uns e e n   da t a .   C o n ve r s e ly ,   th e   VG G - 16  m o de l   de m o n s t r a t e d   a   m o r e   b a l a n c e pe r f o r m a n c e   w i t h   a   t e s a c c ur a c y   o f   a ppr o xi m a t e l y   0. t h a c l o s e l y   mi r r o r e i t s   tr a i ni ng  a c c ur a c y .   T hi s   a l i g n m e n t   i n d ica t e s   t h a VG G - 16  h a s   s upe r i o r   ge n e r a l i z a t i o n   c a p a bil i t i e s   a n i s   l e s s   a f f e c t e by   o v e r f i t t i n c o m pa r e to  R E S NE T .   T h e   VG G - 19  m o de l   e xhi bi t e a   s l o we r   c o n v e r ge n c e   r a t e   wi t h   t r a i ni ng  a n t e s a c c ur a c i e s   pl a t e a u i ng  a r o un 0. 75   a n 0. r e s pe c t i v e ly .   T his   s l o we r   l e a r ni ng  c ur v e   mi g h t   r e f l e c t   a   m o r e   gr a dua l   b ut   pot e n t i a ll y   m o r e   r o b us t   ge n e r a l i z a t i o n   i e a r l i e r   e p o c h s .   T h e   VGG - 16  m o de l   e m e r ge a s   t h e   m o s t   e f f e c t i v e   i t e r m s   o f   b a l a nc i ng  l e a r ni ng  e f f i c i e n c y   a n ge n e r a l i z a t i o m a k i ng  i t   t h e   pr e f e r r e c h o i c e   f o r   t hi s   da t a s e t .   A s   t h e   e n d,   f ut ur e   r e s e a r c h   s h o u l e x p l o r e   a dv a n c e r e gu l a r i z a t i o n   t e c h ni que s   a n da t a   a ugm e n t a t i o n   m e t h o ds .   T h e s e   i m pr o v e m e n t s   c o ul e nh a n c e   m o de l   r o b us t n e s s   a n pe r f o r m a n c e   a c r o s s   di v e r s e   r e a l - wo r l s c e na r i o s .   T hi s   i s   to  a ddr e s s   t h e   o v e r f i t t i n o b s e r v e i R E S NE T   a n i m pr o v e   t h e   c o n v e r ge n c e   s p e e o f   V GG - 19  a s   o v e r a l l .           F i gur e   4.   M o de l   t r a i n   a n t e s t   c o m pr i s o n       4.   CONC L USI ON     T hi s   pa pe r   pr e s e n t s   a   n o v e l   a ppr o a c h   to  e n h a nc i n I VI   s y s t e m s   t h r o ugh   a   r e a l - t i m e   h a n ge s t ur e   r e c o gni t i o n   s c h e m e .   I VI   s y s t e m s ,   whi c h   i n t e gr a t e   v a r i o us   v e hi c l e   f u nc t i o ns   i n t a   uni f i e s c r e e n - b a s e d   i n t e r f a c e ,   a r e   p i v o t a l   i i m pr o vi ng  us e r   c o m f o r a n s a t i s f a c t i o n   dur i ng  v e hi c l e   o pe r a t i o n .   T r a d i t i o n a l   m e t h o ds   o f   i n t e r a c t i o n ,   i n c l ud i ng  to uc h s c r e e n s ,   r e m o t e   c o n tr o l s ,   a n v o i c e   c o m m a n d s ,   h a v e   be e n   e xt e n s i ve l y   s t udi e d.   Ho we v e r ,   t h e y   o f t e n   o v e r l o o m o r e   i nt ui t i v e   a n n a t ur a l   i n t e r a c t i o n   m e t h o ds   t h a t   c a n   f ur t h e r   o p t i mi z e   us e r   e x pe r i e n c e .   Our   pr o p o s e s c h e m e   i n t r o duc e s   a   dua l - c o m po n e n t   f r a m e wo r e n c om pa s s i ng   ge s t ur e   de t e c t i o n   a n c o m m a n e x e c ut i o n .   B y   e na bli ng  us e r s   t o   c o n tr o l   I VI   f u n c t i o n s   s u c h   a s   p l a y ,   pa us e ,   a n v o l u m e   a d j u s t m e n t   t h r o ugh   d i s t i n c t   h a n g e s t ur e s ,   t hi s   s y s t e m   e nh a n c e s   b o t h   us e r   e n ga ge m e n t   a nd   c o n v e ni e nc e .   T h e   i n t e gr a t i o n   o f   h a n ge s t ur e   r e c o gni t i o n   n o o nl y   e n r i c h e s   t h e   dr i vi ng  e x pe r i e n c e   b ut   a l s o   a l i g n s   w i t h   t h e   b r o a de r   g o a l   o f   a d v a n c i ng  h u m a n - c o m put e r   i n t e r a c t i o n   w i t hi v e hi c u l a r   e nvi r o nm e n t s .   T h e   r e s u l t s   i n d i c a t e   t h a t   t h e   pr o p o s e m e t h o s i g ni f i c a n t l y   im pr o v e s   a c c ur a c y   a n u s e r   s a t i s f a c t i o n   c o m pa r e t t r a di t i o na l   i n t e r a c t i o n   m e c h a ni s m s .   Ho we v e r ,   t h e   pr o j e c t   a l s o   e n c o un t e r s   c h a ll e n ge s ,   i n c l ud i ng  t h e   n e e f o r   hi g h - pe r f o r m a n c e   c o m put i n r e s o ur c e s   a n r o b us t   i n t e r n e t   c o n n e c t i vi t y   f o r   s e a m l e s s   da t a   t r a n s m i s s i o n .   A dd i t i o n a ll y ,   t h e   s y s t e m 's   im p l e m e n t a t i o n   i n   r e a l - ti m e   s c e n a r i o s   ne c e s s i t a t e s   s o phi s t i c a t e s c r i pt i n a n us e r - c e n t r i c   de s i g n   to  e n s ur e   a c c e s s i b il i t y   a n e a s e   o f   us e .   I n   c o n c l u s i o n ,   t hi s   r e s e a r c h   r e pr e s e n t s   a   s ub s t a n t i a l   a dv a nc e m e n t   i n   I VI   s y s t e m   i n t e r a c t i o n ,   o f f e r i ng   a   pr o m i s i ng  a l t e r n a t i v e   to  c o n v e n t i o n a l   m e t h o ds .   F ut u r e   r e s e a r c h   s h o ul e x p l o r e   f ur t h e r   o p t i mi z a t i o ns   a n pot e n t i a l   a pp li c a t i o n s   o f   ge s t ur e   r e c o gni t i o n   t e c hno l o g y   to  e nh a nc e   i n t e r a c t i v e   e x pe r i e n c e s   a c r o s s   v a r i o us   pl a t f o r m s .   T h e   f i nd i n gs   un de r s c o r e   t h e   p ot e n t i a l   f o r   ge s t u r e - b a s e s y s t e m s   t t r a n s f o r m   us e r   i n t e r f a c e s ,   c o n t r i b ut i n to  b ot h   t e c hn o l o g i c a l   i nn o v a t i o n   a n im pr ov e us e r   s a t i s f a c t i o n .   Evaluation Warning : The document was created with Spire.PDF for Python.
I n t   J   I n f   &   C o m m u n   T e c hn o l     I S S N:   2252 - 8776       R e al  ti me   hand   ge s tur e   de tec ti on  by   us ing  c onv olut ional   ne ur al  ne t w or k   …  ( W an  M ohd  Y aak ob  W an  B e jur i )   47   AC K NOWL E DGE M E NT S   T hi s   pa pe r   i s   f u n de by   U ni ve r s i t i   T e k i k a l   M a l a ys i a   M e l a ka .   T h e   pr o j e c t   i s   b a s e o n   s t ude n t   f i na l   y e a r   pr o j e c t   ( Ha r i ha r a n   M o ha n ) .       RE F E R E NC E S     [ 1]   G R L a w r e nc e A C R /NE M A   di gi ta im a ge   in t e r f a c e   s ta nda r ( a il lu s tr a t e p r o t oc o ove r v i e w ,”   in   C om put e r   A s s is te d   R adi ol ogy   C om put e r g e s tz te   R adi ol ogi e H L e mk e M L R ho de s C C J a f f e e a nd  R F e li x E ds .,  B e r li n,  H e id e lb e r g:   S pr in ge r , 1985, pp. 285 296. d o i:  10.1007/978 - 3 - 642 - 52247 - 5 _46.   [ 2]   L Z he ng  e al . D y na mi c   ha nd  ge s tu r e   r e c o gni ti o in   in - ve hi c l e   e n v i r o nme nt   ba s e o n   F M C W   r a da r   a nd  tr a ns f o r m e r ,”   Se ns or s vo l.  21, n o . 19, Ar t.  n o . 19, J a n. 2021, d o i:  10.3390/s 21196368.   [ 3]   M C o ll e y P .   J a ns e n,  E R uk z i o a nd  J G ug e nh e im e r S w iV R - C a r - S e a t:   e x pl or in ve hi c l e   m o ti o n   e f f e c ts   o in t e r a c ti o qu a l it y   in  v i r tu a r e a li t y  a ut o ma t e d d r i v in g us in g a  m o t o r iz e d s w i ve s e a t,   P r oc  A C M  I nt e r ac M ob  W e ar abl e  U bi qui to us  T e c hnol vol . 5,  no . 4, p. 150:1 - 150 :2 6, D e c . 2022, d o i:  10.1145/3494968.   [ 4]   Z Y a nd  D J in D e t e r mi na nt s   of   us e r s   a tt it ud e   a nd  in t e nt io t o   in t e ll ig e nt   c o nn e c t e ve hi c le   in f o ta in m e nt   in   th e   5 G - V 2X   mo bi l e   e c o s y s t e m, ”  I nt e r nat io nal   J our nal   of   E nv ir onm e nt al   R e s e ar c and  P ubl ic   H e al th vo l.   18,  n o .   19,  A r t.   n o 19,  J a n.  2 021,   do i:  10.3390/i je r ph181910069.   [ 5]   J B R o s o l e m,  F R B a s s a n,   M P .   de   O li ve ir a A B dos   S a nt o s a nd  L M W o ll in ge r D e m o ns tr a ti o of   a in - f l ig ht   e nt e r ta in m e nt  s y s t e m us in g p o w e r - ove r - f ib e r ,”   P hot oni c s vo l.   11, no . 7, Ar t.  n o . 7, J ul . 2024, d o i:  10.3390/ph o t o n ic s 1107062 7.   [ 6]   N. - A L e - K ha c D J a c o bs J N i jh of f K B e r t e ns a nd  K . - K .   R C ho o S ma r ve hi c le   f or e ns ic s C ha ll e ng e s   a nd  c a s e   s tu d y ,”   F u tu r e  G e ne r at io n C om put e r  Sy s te m s v o l.  109, pp. 500 510,  A ug. 2020, do i:  10.1016/j . f ut ur e .2018.05.081.   [ 7]   H L ia ng  a nd  L T ia n,  R e s e a r c o th e   d e s ig a nd  a ppl ic a ti o n   of   3D   s c e n e   a ni ma ti o ga me   e nt e r ta in me n s y s t e ba s e o u s e r   mo ti o n s e ns in g pa r ti c ip a ti o n,”   E nt e r ta in m e nt  C om put in g , vo l.  5 0, p. 100683, M a y  2024, d o i 10.1016/j . e nt c om.2024.100683.   [ 8]   P K M ur a li M K a b o li a nd  R D a hi y a I nt e ll ig e nt   in - v e hi c le   in t e r a c ti o t e c hn ol o gi e s ,”   A dv anc e I nt e ll ig e nt   Sy s te m s ,   v o l 4,    no . 2, p. 2100122, 2022, d o i:  10.1002/ais y .202100122.   [ 9]   Z Y u,  D J in X .   S o ng,  C Z ha i,   a nd   D W a ng,  I nt e r ne of   ve hi c l e   e mp o w e r e mo b il e   m e di a   s c e na r i o s in - ve hi c l e   in f o ta in me nt   s o lu ti o ns   f o r  t h e  m o bi li t y  a s  a  s e r v i c e  ( M a a S ) ,”   Sus ta in abi li ty vo l.  12, n o . 18, Ar t.  n o . 18, J a n. 2020, d o i:  10.3390/s u1218744 8.   [ 10]   G J D im it r a ko p o ul o s   a nd  I E P a na gi o to p o ul o s I n - v e hi c l e   i nf o ta in m e nt   s y s t e ms us in ba y e s ia ne twor ks   to   m o de c o gni t iv e   s e le c ti o of   mus ic   g e n r e s ,”   I E E E   T r ans ac ti ons   on  I nt e ll ig e nt   T r ans por ta ti on  Sy s te m s ,   v o l.   22,  n o 11,  pp.  6900 6909,  N ov 2 021,  do i:  10.1109/ T I T S .2020.2997003.   [ 11]   H G r a hn  a nd  T K uj a la I mpa c ts   of   t o u c s c r e e s i z e us e r   in te r f a c e   d e s ig n,  a nd  s ubt a s bo unda r ie s   o in - c a r   ta s k’ s   v i s ua l   de ma nd  a nd  dr i ve r   di s tr a c ti o n,”   I nt e r nat io nal   J our nal   of   H um an - C om put e r   St udi e s ,   v o l.   142,  p.   102467,  O c t.   2020,  do i:   10.1016/j .i jh c s .2020.102467.   [ 12]   K P a r a nd  Y .   I m,  E r go n o mi c   gui de li n e s   of   h e a d - up  di s pl a y   us e r   in te r f a c e   dur in s e mi - a ut o ma t e dr i v in g,”   E le c tr oni c s v o l 9,   no . 4, Ar t.  n o . 4, Ap r . 2020, d o i:  10.3390/ e le c t r o ni c s 9040611.   [ 13]   H T a n,  J S un,  W W e nj ia a nd  C Z hu,  U s e r   e x p e r ie n c e   a nd   us a bi li ty   of   dr i v in g:   a   bi bl i o m e t r i c   a na l y s is   of   2000 - 20 19,”   I nt e r nat io nal   J our nal   of   H um an C om put e r   I nt e r ac ti o n ,   vo l.   37,  n o 4,   pp.  297 307,  F e b.  2021,  do i:   10.1080/10447318.2 020.1860516.   [ 14]   I R hi u,  Y M K im W K im a nd  M H Y un,  T h e   e v a lu a ti o o f   us e r   e x pe r i e nc e   of   a   huma w a lk in a nd  a   dr iv in s im ul a ti on  in   th e   v ir tu a r e a li t y ,”   I nt e r nat io nal   J our nal   of   I ndus tr ia E r gonomic s v o l.   79,  p.  103002,  S e p.  2020,  do i:   10.1016/j .e r g o n.2020.103002.   [ 15]   P H oc k,  S B e n e di kt e r J G ug e nhe im e r a nd  E R ukz i o C a r V R e na bl in in - c a r   v i r tu a r e a li t y   e nt e r ta in m e nt ,”   in   P r oc e e di ngs   o th e   2017  C H I   C on fe r e nc e   on  H um an   F ac to r s   in   C om put in Sy s te m s in   C H I   17.  N e w   Y o r k,  N Y U S A A s s o c ia ti o n   f o r   C o mput in g M a c hi n e r y , M a y  2017, pp. 4034 4044 ,   d o i:  10.114 5/ 3025453.3 025665.   [ 16]   D K im   a nd  H L e e E f f e c ts   of   us e r   e x pe r ie n c e   o us e r   r e s is ta nc e   t o   c ha ng e   t o   th e   vo i c e   us e r   in te r f a c e   of   a in ve hi c l e   in f ot a in me nt   s y s t e m:   I mpl i c a ti o ns   f o r   pl a t f o r a nd  s ta nda r ds   c o mp e ti ti o n,”   I nt e r nat io nal   J our nal   of   I nf or m at io M anage m e nt ,   vo l.  36, n o . 4, pp. 653 667, Aug. 2016, d o i:  10.1016/j . ij in f o mgt .2016.04.011.   [ 17]   P S i v a kuma r R S S .   D e vi A N .   L a ks hmi B V in o th K uma r ,   a nd  B V in o d,  A ut o m o ti ve   g r a de   l in u x   s of twa r e   a r c hi t e c tu r e   f or   a ut o m o ti ve   in f o ta in m e nt   s y s t e m,”   in   2020  I nt e r n at io nal   C onf e r e nc e   on   I nv e nt iv e   C om put at io T e c hnol ogi e s   ( I C I C T ) F e b.  2 020,   pp. 391 395,   do i:  10.1109/ I C I C T 48043.2020.9112556.   [ 18]   C P a r a nd  S P a r k,  P e r f o r ma nc e   e v a lu a ti o of   z o n e - ba s e in - ve hi c l e   ne tw or a r c hi t e c tu r e   f o r   a ut o n o m o us   ve hi c l e s ,”   Se ns or s vo l.  23, n o . 2, Ar t.  n o . 2, J a n. 2023, d o i:  10.3390/s 23020669.   [ 19]   S A bba s i,   A .   M .   R a hma ni ,   A B a la do r a nd  A S a ha f i,   I nt e r n e of   v e h ic l e s a r c hi t e c tu r e s e r vi c e s a nd  a ppl ic a t io ns ,”   I nt e r nat io nal  J our nal  of   C om m uni c at io n Sy s t e m s , v o l.  34, n o .   1 0, p. e 4793, 2021, d o i:  10.1002/da c .4793.   [ 20]   A V e tt e r P O be r g f e ll H G ui s s o uma D G r im m,  M R ume z a nd  E S a x D e ve l o pm e nt   pr oc e s s e s   in   a ut o m o ti ve   s e r v i c e - o r i e nt e a r c hi t e c tu r e s ,”   in   2020  9t M e di te r r ane an  C on fe r e n c e   on  E m be dde C om put in ( M E C O ) ,   J un.  2020,  pp.  1 7,   do i:   10.1109/M E C O 49872.2020.9134175.   [ 21]   Q Z e ng,   Q D ua n,  M S hi X H e a nd   M M H a s s a n,  D e s ig f r a m e w o r a nd   in t e ll ig e nt   in - v e h ic l e   in f o r ma ti o n   s y s t e f or   s e ns o r - c l o ud p la t f o r m a nd a ppl i c a ti o ns ,”   I E E E  A c c e s s , v o l.  8, p p. 201675 2 01685, 2020, do i:  10.1109/AC C E S S .2020.303565 4.   [ 22]   J M o ur uj ä r vi V o i c e - c o nt r o ll e in - ve hi c l e   in f o ta in m e nt   s y s t e m,”   la tu r i. o ul u. f i.   A c c e s s e d:   A ug.  31,  2024.  [ O nl in e ] A v a il a bl e :   ht tp s :/ /o ul u r e p o . o ul u. f i/ ha ndl e /1 0024/15164 .   [ 23]   K P S r in i v a s a n,  T M ut hur a ma li nga m,  a nd  A H .   E ls he ik h,  A   r e v i e w   of   f l e x ib l e   pr in t e s e ns o r s   f or   a ut o m o ti ve   in f o ta in m e nt   s y s te ms ,”   A r c hi v e s  o f  C iv il  and M e c hani c al  E ngi ne e r in g , v o l.  2 3, no . 1, p. 67, J a n. 2023, do i 10.1007/s 43452 - 023 - 00604 - y.   [ 24]   S J e o ng,  M R y u,  H K a ng,  a nd  H K K im I n f ot a in me n s y s te ma tt e r s und e r s ta ndi ng  th e   im pa c a nd  im pl ic a ti o ns   of   in - ve hi c le   in f ot a in me nt   s y s t e ha c ki ng  w it a ut o m o t i v e   gr a d e   li nux ,”   in   P r oc e e di ngs   of   th e   T hi r te e nt A C M   C on f e r e nc e   on   D at and  A ppl ic at io Se c ur it y   and  P r iv ac y in   C O D A S P Y   23.  N e w   Y o r k,  N Y U S A A s s oc ia ti o f o r   C o mput in M a c h in e r y A pr .   2023, pp. 201 212. do i:  10.1145/3577923.3 583650.   [ 25]   X T a ng  e al . A   ve hi c le   s im ul a ti o s tu d y   e x a mi ni ng  th e   e f f e c ts   of   s y s te in te r f a c e   d e s ig e l e m e nt s   o p e r f or ma nc e   in   di f f e r e nt   v ib r a ti o e n v i r o nme n ts  be l o w   3   H z ,”   H um F ac to r s , p. 00187208231213470, N ov . 2023, d o i:  10.1177/001872082 31213470.   [ 26]   S N ik ha de   a nd  W P a ti l,  “ A dv a nc e a ndr o id   ba s e in - ve hi c le   i nf o ta in m e nt   ( I V I )   s of twa r e   t e s ti ng,”   in   2023  3r d   A s ia C on f e r e nc e   on I nnov at io n i n T e c hnol ogy  ( A SI A N C O N ) , A ug. 2023, pp. 1 9,   do i:  10.1109/AS I A N C O N 58793.2023.10270081.   Evaluation Warning : The document was created with Spire.PDF for Python.
                                I S S N :   2252 - 8776   I n t   J   I n f   &   C o m m u n   T e c hn o l Vo l .   1 4 ,   N o.   1 A pr i l   20 2 5 :   42 - 49   48   [ 27]   A F a r oo q,  G E v r e in ov R R a is a mo a nd  A .   H ip pul a D e ve l o pi ng  in te ll ig e nt   mul t i m o da I V I   s y s t e ms   to   r e du c e   dr i ve r   di s tr a c ti o n ,”   in   I nt e ll ig e nt   H um an  Sy s te m s   I nt e gr at io 2019 W K a r w o w s ki   a nd  T A h r a m,  E ds .,  C ha m:   S pr in ge r   I nt e r na ti o na l   P ubl is hi ng, 2019, pp. 91 97,   do i:  10.1007/978 - 3 - 030 - 11051 - 2_ 14.   [ 28]   S N ik ha de ,   W P a ti l,   a nd   S S o r t e M o d e r c o nc e pt   of   A nd r o id   ve hi c le   in f o ta in m e nt   s y s t e m,”   A I P   C onf e r e nc e   P r oc e e di ngs   vo l.  3139, n o . 1, p. 030014, Aug.  2024, d o i:  10.1063/5.0225575 .   [ 29]   P G a nb o ld I O h,  Y K im a nd  K Y i m,  A r ti f a c e x tr a c ti o m e th o ds   f or   in - ve hi c l e   in f o ta in m e nt   s y s t e m,”   in   A dv anc e s   in   I nt e ll ig e nt   N e tw or k in and   C ol la bo r at iv e   S y s te m s L B a r o ll i,   E d.,  C ha m:   S pr in ge r   N a tu r e   S w it z e r la nd,  2023,  pp.  68 78 ,   do i:   10.1007/978 - 3 - 031 - 40971 - 4_7.   [ 30]   J L u   e al . A   r e v i e w   of   s e ns o r y   in te r a c t i o ns   be tw e e a ut ono m o us   ve hi c le s   a nd  d r i ve r s ,”   J our nal   of   Sy s te m s   A r c hi te c t ur e ,     vo l.  141, p. 102932, Aug . 2023, d o i:  10.1016/j .s y s a r c .2023.102 932.   [ 31]   D R y umi n,   A A xy on ov E R y umi na D I v a nko ,   A K a s he v ni k,   a nd  A K a r p ov A udi o v is ua s pe e c r e c o gni ti o n   ba s e o n   r e gul a t e tr a ns f or m e r   a nd  s pa ti o te mp o r a f us i o s tr a te g y   f o r   dr i ve r   a s s is ti v e   s y s t e ms ,”   E x pe r Sy s te m s   w it A ppl ic at io ns   vo l.  252, p. 124159, O c t.  2024, d o i:  10.1016/j . e s w a .2024.124159.   [ 32]   R K r s ta č i ć A Ž i ć a nd  T O r e h ov a č ki S a f e t y   A s p e c ts   of   in - ve hi c l e   in f o ta in m e nt   s y s t e ms a   s y s t e ma ti c   li te r a tu r e   r e v i e w   f r o m   2 012 to  2023,”   E le c tr oni c s , vo l.  13, n o . 13, Ar t.  n o . 13, J a n. 20 24, do i:  10.3390/ e l e c tr o ni c s 13132563.   [ 33]   V K a r a s D M S c hul le r a nd  B W S c hul l e r A udi ovi s ua a f f e c r e c o gni ti o f or   a ut o n o m o us   ve hi c le s a ppl i c a ti o ns   a nd  f u tu r e   a ge nd a s ,”   I E E E   T r ans ac ti ons   on  I nt e ll ig e nt   T r ans por ta ti o Sy s te m s v o l.   25,  n o 6,  pp.  4918 4932,  J un.  2024,  do i:   10.1109/ T I T S .2023.3333749.         B I OG RA P HI E S   OF   AU T HO RS       Wa n   M o h d   Y a a k o Wa Bej u ri           r ece i v e d   h i s   P h . D . ,   m as t e a n d   b ach e l o d e g r ee   i n   co m p u t e s c i en ce   fro U n i v e rs i t i   T ek n o l o g i   Mal a y s i i n   2 0 1 9 ,   2 0 1 2   an d   2 0 0 9 .   Pre v i o u s l y ,   h e   w as   rece i v e d   d i p l o m i n   el ec t ro n i c   en g i n ee r i n g   i n   2 0 0 5   fro m   Po l i t e k n i k   K u ch i n g   Sara w a k .   H e   i s   cu rr e n t l y   s en i o l e c t u r e at   U n i v e rs i t i   T e k n i k al   Mal a y s i M e l a k a.   H e   c a n   b e   co n t a c t ed   at   em ai l :   y aak o b @ u t em . ed u . my .         Si ti   A z i ra h   A s m a i           rece i v e d   h i s   Ph . D .   fro U n i v e rs i t i   T ek n i k a l   Ma l a y s i a   M e l a k a .   W h i l e   m as t e d e g r ee   fro U n i t e d   K i n g d o m ,   a n d   b a c h e l o d e g r ee   fro U n i v e rs i t i   T ek n o l o g i   Mal a y s i a.   S h e   i s   cu rr e n t l y   s e n i o l ec t u r e at   U n i v e rs i t i   T ek n i k a l   Mal a y s i a.   Sh e   c an   b c o n t ac t e d   at   em a i l :   az i rah @ u t em. e d u . my .         R a ja   R i n a   R a ja   I k ra m           r ece i v e d   h i s   Ph . D .   a n d   mas t e d e g r ee  fro m   U n i v e rs i t i   T e k n i k a l   Ma l a y s i a   M e l a k a.   W h i l e   b a c h el o r   d eg r ee   fr o U n i v e rs i t y   o M el b o u r n e ,   A u s t ral i a.   Sh e   i s   c u rr en t l y   s e n i o r   l ec t u r e at   U n i v e rs i t i   T ek n i k al   Mal a y s i a Sh c an   b e   c o n t ac t e d   at   em ai l :   raj a. r i n a @ u t em . e d u . my .         N u R a i da h   R a hi m           rece i v e d   h i s   Ph . D . ,   m as t e d eg r ee   w i t h   b ac h el o d e g r ee   fro m   U n i v e rs i t i   T e k n o l o g i   Mara  (U i T M).   Sh i s   c u rr en t l y   a   s e n i o r   l ec t u r e at   U n i v e rs i t i   T e k n i k al   Mal a y s i a.   S h e   c a n   b c o n t ac t e d   at   em ai l :   rai d ah @ u t em . ed u . my .   Evaluation Warning : The document was created with Spire.PDF for Python.
I n t   J   I n f   &   C o m m u n   T e c hn o l     I S S N:   2252 - 8776       R e al  ti me   hand   ge s tur e   de tec ti on  by   us ing  c onv olut ional   ne ur al  ne t w or k   …  ( W an  M ohd  Y aak ob  W an  B e jur i )   49         N a jw a n   Kh a m ba ri           re cei v ed   h i s   Ph . D .   fro m   U n i v e rs i t y   o Pl y mo u t h ,   U n i t e d   K i n g d o m .   W h i l e   m as t e a n d   b ach e l o d e g r ee   fr o m   U n i v e rs i t i   T e k n i k al   Mal a y s i M el ak a.   H i s   c u rr en t l y   a   s en i o l ec t u r e at   U n i v e rs i t i   T ek n i k a l   Ma l ay s i a .   H e   c a n   b c o n t ac t ed   at   em ai l :   n aj w a n @ u t em. e d u . my .         M o h Sa nu s i   A zm i           rece i v e d   h i s   Ph . D . ,   m as t e d e g r ee   an d   b ach e l o d eg r ee   fro U n i v e rs i t i   K e b an g s aan   Mal a y s i a .   H e   i s   c u rr en t l y   an   as s o ci at e   p ro f e s s o an d   a l s o   c u rr en t   d e a n   at   Facu l t y   o f   I CT ,   U n i v e rs i t i   T ek n i k a l   Ma l a y s i a   M el ak a.   H c an   b c o n t ac t e d   at   em ai l :   s an u s i @ u t em . ed u . my .         Y u s   S h o l v a           i s   a   p ro g ra m   l e ad e r   o f   i n fo r m at i e n g i n ee ri n g   at   Fak u l t as   T ek n i k ,   U N T A N .   Cu rr en t l y ,   h e   i s   an   as s o ci at e   p ro f e s s o at   U n i v e rs i t i   T an j u n g p u ra,   I n d o n e s i a.   H e   c an   b e   c o n t ac t e d   at   em a i l :   s h o l v ar i za@ u n t an . a c. i d .     Evaluation Warning : The document was created with Spire.PDF for Python.