I n d on e s i an   Jo u r n al   o El e c t r i c al   En gi n e e r i n g   an d   C o m p u te r   S c i e n c e   V o l .   3 9 ,   N o .   2 A ugus t   20 25 ,   pp .   1 261 ~ 1 268   IS S N :   2502 - 4752 ,   D O I :   10. 1 1591 / i j e e c s . v 3 9 .i 2 . pp 1 26 1 - 1 268             1261     Jou r n al   h o m e pa ge ht t p: / / i j e e c s . i a e s c or e . c om   E f f i c i e n t l y   t r a c k i n g   a n d   r e c o g n i t i o n   o f   h u m a n   f a c e i n   r e a l - t i m e   v i d e o   st r e a m   w i t h   h i g h   a c c u r a c y   a n d   p e r f o r m a n c e       I m r an   U l l a   K h an 1 , 2 ,   D .   R .   K u m ar   R aja 1   1 S c h o o l   o f   Co m p u t e S c i e n c e ,   RE V A   U n i v e r s i t y ,   Ba n g a l o r e ,   I n d i a   2 D e p a rt m e n t   o f   C S E ,   S ri   K r i s h n a   I n s t i t u t e   o T e c h n o l o g y ,   Ba n g a l o re ,   I n d i a       A r ti c l e   I n fo     A B S TR A C T   Ar t i c l e   h i s t or y :   R e c e i v e J a n   7 20 25   R e v i s e M a r   25 20 25   A c c e pt e J ul   2 2025       R e a l   t i m e   t r a c k i ng   a n r e c o g ni t i o o f   hum a f a c e s   i v i d e o   s t r e a m s   i s   a   c r i t i c a l   c ha l l e ng e   i c o m put e r   v i s i o n.   E xi s t i ng   s y s t e m s   o f t e s t r ug g l e   t o   ba l a nc e   a c c ur a c y   a nd  pe r f o r m a nc e ,   pa r t i c ul a r l y   i n   dy na m i c   e nv i r o nm e nt s   w i t h   v a r y i ng   l i g ht i ng   c o ndi t i o ns ,   o c c l u s i o ns ,   a nd   r a pi m o v e m e nt s .   H i g h   c om put a t i o na l   o v e r he a a nd   l a t e nc y   f ur t he r   h i nde r   t h e i r   de p l oy m e nt   i n   r e a l - w o r l a p pl i c a t i o ns .   T he s e   l i m i t a t i o ns   unde r s c o r e   t he   ne e f o r   a   r o bus t   s o l ut i o c a pa b l e   o f   m a i n t a i n i ng   hi g a c c ur a c y   a nd  r e a l - t i m e   e f f i c i e nc y   unde r   di v e r s e   c o ndi t i o ns .   T hi s   r e s e a r c a dd r e s s e s   t he s e   c ha l l e ng e s   by   de ve l o pi ng   a   de e p   l e a r n i ng - ba s e d   s y s t e m   t h a t   e f f i c i e nt l y   t r a c ks   a nd  r e c o g ni z e s   h um a n   f a c e s   i n   r e a l - t i m e   v i de o   s t r e a m s .   P r o po s e s y s t e m   i n t e g r a t e s   a dv a nc e f a c e   de t e c t i o m o de l s   y o o nl y   l o o o n c e   v e r s i o 5   ( Y O L O v 5 )   w i t s t a t e - of - t he - a r t   t r a c ki ng   a l g o r i t hm s ,   s uc a s   de e s i m p l e   o nl i ne   a n r e a l   t i m e   t r a c ki ng   ( S O R T ) ,   t o   e n s u r e   c o ns i s t e nc y   a nd   r o bus t ne s s .   B y   l e v e r a g i ng   g r a p hi c s   pr o c e s s i ng   u ni t   ( G P U )   a c c e l e r a t i o n,   t he   s y s t e m   a c h i e v e s   o pt i m a l   pe r f o r m a nc e   w hi l e   m i ni m i z i ng   l a t e nc y .   M u l t i - f r a m e   a na l y s i s   t e c hn i que s   a r e   i nc o r po r a t e t o   e n ha nc e   a c c ur a c y   i n   de t e c t i ng   a nd   r e c o g ni z i ng   f a c e s ,   e v e n   unde r   c ha l l e ng i ng   c o ndi t i o ns   s uc a s   p a r t i a l   o c c l us i o ns   a nd  m o t i o bl ur .   D e v e l o pe s y s t e m   ha s   b r o a a ppl i c a t i o ns   a c r o s s   m ul t i pl e   do m a i n s ,   i nc l ud i ng   s ur v e i l l a nc e   a nd   s e c ur i t y ,   w he r e   i t   c a n   e nh a nc e   r e a l - t i m e   m o ni t o r i ng   i n   c r o w de e nv i r o nm e n t s   f o r   s e a m l e s s   f a c e   t r a c k i ng   i n   i nt e r a c t i v e   s y s t e m s .   B y   f oc us i ng   o e f f i c i e nc y ,   r o bus t ne s s ,   a nd   a d a p t a b i l i t y   t h i s   w o r k   o f f e r i ng   a   sc a l a b l e   a nd   h i g h - pe r f o r m a nc e   s o l u t i o n   f o r   r e a l - t i m e   h um a n   f a c e   t r a c ki ng   a nd  r e c o g ni t i o n.   Ke y w or d s :   D e e S O R T   F a c e   r e c o gn i t i o n   G P U   a c c e l e r a t i o n   R e a l   t i m e   h u m a t ra c ki n g   Y O L O v 5   T hi s   i s   an   ope n   ac c e s s   ar t i c l e   u nde r   t he   C C   B Y - SA   l i c e ns e .     Cor r e s pon di n g   Au t h or :   Im r a U l l a   K ha n   S c h o o l   of   Co m put e S c i e n c e ,   R E V A   U n i v e r s i t y   B a n g a l o r e ,   I n d i a   E m a i l :   i m r a n161984 @ g m a i l . c o m       1.   I N TR O D U C TI O N   In  r e c e n t   y e a r s   t h e   ra p i a dv a n c e m e n t   i c o m put e r   v i s i o n   h a s   e na b l e s i g ni f i c a nt   b r e a kt hr o ug h s   i n   r e a l - t i m e   o b j e c t   de t e c t i o n   a nd  t ra c ki ng.   A m o n g   t h e s e ,   f a c e   de t e c t i o n   a n d   t ra c ki n ha v e   e m e r ge a s   c r i t i c a l   c o m po n e nt s   i a pp l i c a t i o n s   s uc a s   s u r v e i l l a nc e ,   s e c u ri t y ,   hu m a n - c o m p u t e i nt e ra c t i o n,   a nd  he a l t hc a r e   [ 1 ] ,   [2 ] .   S t a t e - of - t h e - a rt   f a c e   de t e c t i o n   m e t h o ds   l i ke   y o o n l y   l oo o n c e   (Y O L O ),   R e t i na F a c e ,   a n d   m ul t i - t a s k   c a s c a de c o n vo l ut i o n a l   n e u ra l   n e t w o r (M T CN N ha v e   a c h i e ve i m p r e s s i v e   a c c ur a c y   i n   di v e r s e   c o n di t i o n s ,   w h i l e   t ra c ki n g   a l go ri t hm s   s uc a s   s i m p l e   o nl i n e   a n d   r e a l   t i m e   t ra c ki n g   w i t h   a   de e a s s o c i a t i o m e t ri c   ( D e e p   S O R T )   a n d   K a l m a f i l t e r s   h a v e   e nha n c e t h e   c o n t i n ui t y   a n d   r o b us t n e s s   o f   f a c e   t ra c ki n g   [3] ,   [4] .   D e s pi t e   t h e s e   a dv a n c e m e n t s ,   i nt e g r a t i ng  r e a l - t i m e   f a c e   de t e c t i o n   a n d   t ra c ki n g   i dy n a m i c   e n v i r o n m e n t s   r e m a i n s   c h a l l e n gi ng  d ue   t o   i s s ue s   l i ke   o c c l us i o n ,   v a r y i n g   l i g h t i n g   c o ndi t i o n s ,   a nd  hi g c o m put a t i o na l   de m a n ds .     Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i V o l .   3 9 ,   N o .   2 ,   A ugus t   20 25 :   1 261 - 1 268   1262   E xi s t i n g   s y s t e m s   o f t e n   f a c e   a   t ra de - o ff   b e t w e e n   a c c ur a c y   a n d   r e a l - t i m e   pe r f o r m a n c e ,   e s pe c i a l l y   i c o m pl e s c e n a ri o s   i n v o l v i n f a s t   m o t i o n ,   pa rt i a l   o c c l us i o n s ,   a nd  c r o w d e e n v i r o n m e n t s .   T h e s e   l i m i t a t i o n s   hi n de r   t h e i de pl o y m e n t   i c ri t i c a l   r e a l - w o r l a ppl i c a t i o n s   s u c h   a s   s u r v e i l l a n c e ,   w h e r e   c o n s i s t e n t   a nd  a c c u r a t e   t r a c ki ng  i s   pa ra m o u n t .   H i g h   l a t e n c y   a n d   c o m put a t i o na l   o ve rh e a d   f urt h e e xa c e r b a t e   t h e s e   c ha l l e nge s ,   l i m i t i n t h e   s c a l a b i l i t y   a n e f f i c i e n c y   of   c ur r e n t   s o l ut i o n s .     In  t hi s   r e s e a r c h   w e   a r e   a dd r e s s i n g   t h e   a f o r e m e n t i o n e c h a l l e n ge s   b y   pr o po s i n a   r o b us t   s y s t e m   t h a t   i n t e g r a t e s   t h e   Y O L O v o bj e c t   de t e c t i o n   m o de l   w i t t h e   D e e S O R T   t ra c ki n g   a l go r i t hm   t o   a c hi e v e   e ff i c i e n t ,   r e a l - t i m e   f a c e   de t e c t i o n   a n d   t ra c ki n g   [5] .   Y O L O v pr o v i de s   a   po w e r f ul   a nd  l i g ht w e i gh t   f r a m e w o r f o r   h i g h - s pe e a nd  a c c ur a t e   f a c e   de t e c t i o n ,   w h i l e   D e e S O R T   e n s ur e s   r o b us t   f a c e   t ra c ki n g   by   c o m b i n i n g   m o t i o n   pr e di c t i o a nd   a p pe a r a n c e   e m b e ddi n gs .   B y   l e ve r a gi ng   g ra p h i c s   p r o c e s s i n g   u ni t   ( GPU )   a c c e l e ra t i o a n d   o pt i m i z i n g   c o m put a t i o n a l   pe r f o r m a n c e ,   t h e   p r o po s e s ys t e m   m a i nt a i n s   hi g h   a c c ura c y   a n d   r e a l - t i m e   e ff i c i e n c y   e ve n   i dy n a m i c   a nd  c h a l l e n g i n c o n d i t i o n s   [6] .   T h i s   a pp r o a c h   o f fe r s   n o v e l   c o n t r i b ut i o n s   i n   s c a l a b i l i t y ,   a da pt a b i l i t y ,   a nd  r o b us t n e s s ,   a dv a n c i ng   t h e   c u rr e nt   s t a t e   o f   t h e   a rt   i f a c e   de t e c t i o n   a n d   t r a c ki ng  s y s t e m s .   T h e s e   s t udi e s   p r e s e n t s   a   r e a l - t i m e   hum a n   de t e c t i o n   a n t ra c ki n s y s t e m   us i n i m a ge   p r o c e s s i n t e c hn i q ue s ,   s pe c i f i c a l l y   O pe nCV   a n d   hi s t o g r a m   o f   o r i e nt e g ra d i e nt s   (H O G ),   c o m b i n e d   w i t a   de e p   c o n vo l ut i o n a l   n e u ra l   n e t w o r k   (CN N ) .   T h e   s y s t e m   e f f i c i e nt l y   i de n t i f i e s   a n t r a c ks   h u m a n   f a c e s   i n   v i de s t r e a m s ,   ge n e r a t i n g   u ni que   1 28 - di m e n s i o na l   f a c i a l   e n c o di n gs   f o r   c o m pa r i s o a n d   l o ggi n g   de t e c t e i n di v i du a l s   w i t h   t i m e s t a m ps .   T h e   m e t h o do l o g y   i n v o l v e s   fa c e   de t e c t i o n ,   l a n d m a r k   e s t i m a t i o n,   a nd  f e a t u r e   e xt ra c t i o t o   e n s u r e   p r e c i s e   r e c o gn i t i o n.   T h e   da t a s e t   us e c o m pr i s e s   i m a ge s   up l o a de t o   a   de s i g n a t e f o l de r   fo r   t r a i n i ng   a nd  l i v e   v i de o   c o m pa ri s o n s .   K e y   l i m i t a t i o n s   i nc l ude   c ha l l e nge s   w i t c o m put a t i o na l   e f f i c i e n c y ,   v a r y i n l i g ht i ng  c o n d i t i o n s ,   a nd  o c c l us i o n s ,   w h i c h   c a i m p a c t   a c c ur a c y   a n d   p r o c e s s i n s pe e [7 ],   [8] .   T h i s   r e s e a r c h   p r o po s e s   a   r e a l - t i m e   f a c e   r e c o gn i t i o n,   t r a c ki n g,   c o unt i n g ,   a n d   t i m e - s pe n t   c a l c ul a t i o n   s y s t e m   us i n g   O pe n CV   a n t h e   c e n t r o i d   t ra c ke r   a l go r i t h m .   T h e   m e t h o do l o g y   i n v o l v e s   f a c e   de t e c t i o n   v i a   O pe n CV   l i b ra r i e s   a n d   D l i b ,   a s s i g ni n g   u ni que   ID s   t o   t r a c ke i ndi v i dua l s   us i n g   t h e   c e n t r o i d   t ra c ke r,   a nd  c a l c ul a t i n g   t h e   t o t a l   a n d   l i v e   c o un t s   o f   pe o pl e   i t h e   f ra m e .   A ddi t i o n a l l y ,   t h e   s y s t e m   m e a s u r e s   t h e   t i m e   e a c h   pe r s o s pe nds   i t h e   f ra m e   w h i l e   d i s pl a y i n r e a l - t i m e   a nd   d a t e   f o a c c u r a c y .   T h e   da t a s e t   c o m pri s e s   p r e - upl o a de i m a ge s   f o r   f a c e   r e c o gn i t i o n .   K e y   l i m i t a t i o n s   i n c l ude   di f f i c ul t i e s   i h a ndl i ng  o v e r l a p pi n g   o b j e c t s ,   t r a c ki ng  i ndi v i dua l s   a t   a   di s t a n c e ,   a n i n a c c u r a c i e s   due   t o   m o t i o n   b l u r .   D e s pi t e   t h e s e   l i m i t a t i o n s ,   t h e   s y s t e m   a c hi e v e s   94. 74%  a c c ura c y   i c o un t i n g   a n d   de m o n s t r a t e s   p ra c t i c a l   a ppl i c a t i o n s   f o r   s e c uri t y   m o n i t o r i ng  i n   pub l i c   a n d   p ri v a t e   i n s t i t ut i o n s   l i ke   b a n ks ,   s h o ppi ng  m a l l s ,   a nd  c a m pus e s   [9]   T h i s   s t udy   pr e s e nt s   a a pp l i c a t i o t ha t   de t e c t s   a nd  t r a c ks   hu m a b o d y   ke y   p o i n t s   i r e a l - t i m e   us i ng  O pe n CV   a n M e di a P i pe .   It   m o ni t o r s   a c t i o n s   a nd  c o rr e c t s   bo d y   p o s e s   by   a n a l y z i n g   a n g l e s   b e t w e e n   j o i n t s ,   s uc h   a s   s h o ul de r s   a n d   e l b ow s .   W hi l e   e f f e c t i v e   fo r   ge s t u r e   r e c o gn i t i o n ,   t h e   s y s t e m ' s   a c c ura c y   de pe n ds   h e a v i l y   o n   p r o pe c a m e ra   po s i t i o ni n g ,   l i m i t i ng  i t s   us a b i l i t y   i n   u n c o nt r o l l e e n v i r o n m e n t s   [10 ] .   T h e   a ut h o r s   p r e s e nt   a   s y s t e m   t ha t   b l u r s   de t e c t e f a c e s   i v i de o   s t r e a m s   us i n Y O L O v f a c e   a n R e t i n a F a c e   m o de l s   a n s t o r e s   m e t a d a t a   i a   g ra p h   da t a b a s e   f o r   e ff i c i e n t   r e t r i e v a l .   T h e   s y s t e m   a d h e r e s   t o   p ri v a c y   r e gul a t i o n s   l i ke   ge n e r a l   da t a   p r o t e c t i o n   r e gu l a t i o n   ( GDPR ) .   W hi l e   i t   de m o n s t r a t e s   h i gh  p r e c i s i o n   a n r e c a l l ,   t h e   r e l i a n c e   o n   r e a l - t i m e   pr o c e s s i n m a y   i n t r o duc e   l a t e n c y   i s s ue s   [11] .   T h i s   p a pe r   e x pl o r e s   t h e   us e   o f   H a a r Ca s c a de   a n l o c a l   b i na r y   pa t t e rn  h i s t o gra m   (L B P H fo r   f e a t u r e   e xt r a c t i o a nd  f a c e   r e c o gn i t i o n .   T h e   t e c hni que   i s   s i m pl e   a n e f f i c i e n t   b ut   h a s   l i m i t a t i o n s   i n   ha ndl i ng  v a ri a t i o n s   i l i g ht i ng,   po s e ,   a n d   c o m pl e b a c kgr o u n ds   [12] ,   [13] .   T hi s   p a pe r   pr o po s e s   a   r e a l - t i m e   f a c e   a n o n y m i z a t i o s y s t e m   us i n g   o b j e c t   de t e c t i o a n d   t r a c ki ng,   f o l l o w e by   S t y l e G A N 3   fo r   ge n e r a t i ng   s y n t h e t i c   f a c i a l   i m a ge s .   T h e   a pp r o a c w a s   v a l i d a t e d   o t h e   F F H Q   da t a s e t ,   a c h i e v i n g   e f fe c t i ve   pri v a c y   pr e s e r v a t i o n.   H ow e ve r ,   i t   m a y   s t r ugg l e   w i t h   c o m put a t i o na l   e f f i c i e n c y   i n   r e s o ur c e - c o n s t r a i n e e n v i r o n m e n t s   [14] .   O n e   m o r e   r e s e a r c h   us e s   O pe n CV ,   D l i b ,   a nd  CN N   f o r   r e a l - t i m e   f a c e   de t e c t i o n   a n d   r e c o gn i t i o n   t t r a c c l a s s r o o m   a t t e n d a n c e .   W h i l e   i t   i s   e f f i c i e n t   i n   c r o w de s e t t i n gs ,   t h e   de pe n de n c e   o n   a   p r e - e xi s t i n g   da t a b a s e   of   s t ude n t   i m a ge s   m a y   l i m i t   a d a pt a b i l i t y   i n   dy na m i c   s c e n a ri o s   [15] .   A   f a l l   de t e c t i o s y s t e m   l e v e r a gi n g   CN N s   a nd  o pt i c a l   f l o w   pr e - p r o c e s s i n g   i s pa t i a l   a n d   f r e que n c y   do m a i n s   w a s   i n t r o duc e d.   T h e   s y s t e m   e m pl oy s   t h e   V i o l a - J o n e s   a l go ri t hm   f o r   h um a n   a c t i o n   r e c o gn i t i o n.   A l t h o ug h   i t   a c h i e v e s   h i g h   a c c ura c y ,   t h e   s e t up  i s   e n v i r o n m e nt - de pe n de nt ,   l i m i t i ng  ge n e r a l i z a b i l i t y   t o   di v e r s e   c o n di t i o n s   [1 6],   [17] .       2.   P R O P O S ED   M ETH O D     T h e   p r o po s e m e t h o a s   s h o w n   i F i gu r e   1   i nt e g r a t e s   a dv a n c e f a c e   de t e c t i o n   a nd  t ra c ki n g   t e c hn i q ue s   t o   a c h i e v e   r e a l - t i m e   a nd  a c c ura t e   f a c e   de t e c t i on  a nd  t ra c ki ng  i v i de o   s t r e a m s .   T h e   a p p r o a c b e gi n s   by   ut i l i z i n g   t h e   Y O L O v o bj e c t   de t e c t i o n   m o de l ,   pr e - t ra i n e d   o t h e   W ID E R   F A CE   d a t a s e t ,   f o r   e ff i c i e n t   a nd  a c c ura t e   de t e c t i o n   o f   f a c e s   i n   e a c v i de o   f r a m e .   Y O L O v w a s   s e l e c t e fo r   i t s   b a l a n c e   o f   s pe e d   a n d   a c c u r a c y ,   e n a b l i ng   i t   t o   p r o c e s s   f r a m e s   i r e a l   t i m e .   T o   e n s u r e   c o n s i s t e nt   t r a c k i n g   a c r o s s   f r a m e s ,   t h e   Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752         E f f i c i e nt l y   t r a c k i ng   and   r e c ogn i t i on  of   hum an   f a c e s   i n   r e a l - t i m e   v i de o   s t r e am   w i t h     ( Im r an  U l l a   Khan )   1263   D e e S O R T   a l go r i t hm   i s   i n c o r po r a t e d .   D e e S O R T   e ff e c t i v e l y   a s s o c i a t e s   de t e c t e f a c e s   be t w e e n   c o n s e c ut i ve   f r a m e s ,   p r o v i di n g   r o b us t   t ra c ki n g   e v e n   i c ha l l e n g i n g   s c e n a r i o s   s uc a s   o c c l us i o n s ,   ra p i d   m o t i o n ,   o v a r y i n l i g ht i n g   c o n di t i o n s   [18 ],   [19] .           F i gu r e   1 .   P r o po s e s y s t e m       T o   e nh a n c e   t h e   s y s t e m ' s   e ff i c i e n c y ,   G P U   a c c e l e r a t i o n   i s   e m pl oy e t o   m a xi m i z e   c o m put a t i o na l   s pe e a n d   m i n i m i z e   l a t e n c y   [20] .   T h e   p r o po s e m e t h o a l s o   i n t e g ra t e s   d a t a   a ugm e n t a t i o n   t e c hni que s   du ri n g   t r a i ni n g   t o   i m p r o v e   t h e   m o de l ' s   r o b us t n e s s   a ga i n s t   r e a l - w o rl v a ri a t i o n s   [21 ] .   M e t r i c s   s uc a s   f ra m e   ra t e   (F P S ),   p r e c i s i o n,   r e c a l l ,   m e a n   a v e r a ge   p r e c i s i o n   ( m A P ) ,   a nd  t ra c ki n c o n s i s t e n c y   (e . g. ,   ID   s w i t c h e s ,   t ra c f r a g m e nt a t i o n )   a r e   m o ni t o r e t o   e v a l ua t e   pe r f o r m a n c e   a n d   o pt i m i z e   t h e   s y s t e m .   T h i s   r e s e a r c p r o v i de s   a   s c a l a b l e ,   r e a l - t i m e   s o l ut i o n   s ui t a b l e   f o r   v a r i o us   a pp l i c a t i o n s ,   i n c l ud i n g   s u r v e i l l a n c e ,   p ub l i c   s a f e t y ,   e n t e r t a i nm e n t ,   a n d   h e a l t h c a r e ,   o ff e r i n g   h i g a c c u r a c y   a n d   e ff i c i e n c y   i f a c e   de t e c t i o a n d   t ra c ki ng   u n de r   di v e r s e   e n v i r o nm e nt a l   c o n d i t i o n s .     2. 1 .    I m p l e m e n tati o n   2. 1 . 1 .   H ar d w a r e   an d   s o ftw ar e   r e q u i r e m e n ts   F o r   t h i s   r e s e a r c h,   w e   ut i l i z e d   a   r o b us t   h a r dw a r e   s e t up   t o   e ns ur e   s e a m l e s s   r e a l - t i m e   p r o c e s s i n g   a nd  m o de l   t ra i ni n g .   T h e   h a rdw a r e   i n c l ude d   a N V ID IA   R T X   30 60  G P U   f o r   a c c e l e r a t e d   c o m put a t i o n s ,   a I nt e l   i 7   pr o c e s s o r   f o ha n dl i n g   ge n e r a l   t a s ks ,   16   G B   o f   R A M   t o   m a na ge   da t a - i n t e n s i v e   p r o c e s s e s ,   a n d   a   hi g h - de f i n i t i o w e b c a m   f o r   c a pt u ri n g   l i v e   v i de o   s t r e a m s .   T h e   s o f t w a r e   e n v i r o nm e nt   w a s   b ui l t   us i n g   P y t h o 3. 8,   w i t e s s e n t i a l   l i b ra r i e s   s uc a s   P y T o r c f o r   t r a i n i ng  Y O L O v 5,   O pe n CV   f o r   v i de o   p r o c e s s i n g,   a nd  a dd i t i o n a l   t o o l s   l i ke   N um P y ,   P a n d a s ,   a nd  M a t p l o t l i b   f o r   da t a   ha n dl i n g   a n d   v i s ua l i z a t i o n.       2. 1 . 2 .   D ata   p r e p r o c e s s i n g   T h e   W ID E R   F A CE   d a t a s e t   w a s   s e l e c t e fo r   t r a i n i ng  t h e   f a c e   de t e c t i o n   m o de l .   W e   o r g a n i z e t h e   da t a s e t   i n t o   t r a i n,   v a l i d a t i o n ,   a n d   t e s t   f o l de r s ,   e n s u ri n g   a 80 - 10 - 10   s pl i t   f o r   e f fe c t i v e   t r a i n i ng   a nd  e v a l u a t i o n .   A nn o t a t i o n s   w e r e   c o n v e r t e t o   t h e   Y O L O   f o r m a t ,   n o r m a l i z i n g   b o un d i n g   b o c o o r di na t e s .   E a c o b j e c t   i a n   i m a ge   i s   r e p r e s e n t e d   by   a   l i n e   i t h e   c o rr e s po n d i n g   a nn o t a t i o f i l e .   T h e s e   f i l e s   a r e   t y pi c a l l y   i p l a i n   t e xt   fo r m a t ,   w i t o n e   f i l e   pe i m a ge .   E a c h   l i n e   f o l l o w s   t h e   s t r uc t u r e .       _    _    _             c l a s s _i d:   t h e   c l a s s   num b e o f   t h e   o b j e c t   (s t a r t i n g   f r o m   0).   x_ c e n t e r:   t h e   n o rm a l i z e x - c oo r di na t e   o f   t h e   c e nt e of   t h e   b o un di n g   b o x,   r e l a t i v e   t o   t h e   w i dt h   o f   t h e   i m a ge .   y _c e nt e r:   t h e   n o rm a l i z e y - c oo r di na t e   o f   t h e   c e n t e r   o t h e   b o un di ng  b o x,   r e l a t i v e   t o   t h e   h e i g ht   o f   t h e   i m a ge .   W i dt h t h e   n o rm a l i z e w i dt o f   t h e   b o un di n g   b o x,   r e l a t i v e   t o   t h e   w i dt o f   t h e   i m a ge .   H e i gh t t h e   n o rm a l i z e h e i ght   o f   t h e   b o un di n g   b o x,   r e l a t i v e   t o   t h e   h e i g ht   o t h e   i m a ge .   A l l   v a l ue s   a r e   n o r m a l i z e b e t w e e n   0   a n d   1   t o   m a ke   t h e   f o r m a t   r e s o l ut i o n - i n de pe n de n t .   F o bo un di ng  b o c o o r di n a t e s   i n s t e a o f   t o p - l e f t   a nd  b o t t o m - r i g ht   c o rn e r s ,   Y O L O   us e s   t h e   c e n t e r   a n di m e n s i o n s   of   t h e   b o un di n g   b o x,   w h i c h   s i m p l i f i e s   t h e   c o m put a t i o du r i n t ra i ni n g   a nd  i n f e r e n c e .     T h e   Y O L O   a nn o t a t i o n   f o r   a n   i m a ge   o f   s i z e   640 × 480  w i t h   a   de t e c t e o bj e c t   of   c l a s s   a nd  a   bo un di ng  b o w i t h:   t o p - le f t   c o r n e r   a t   (10 0,   50) w i dt o f   200  pi xe l s ,   a n d   h e i g ht   o f   100  p i xe l s   i s :     1   0 . 3125   0 . 2083   0 . 3125   0 . 2083     Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i V o l .   3 9 ,   N o .   2 ,   A ugus t   20 25 :   1 261 - 1 268   1264   x_c e n t e r   =   ( 100+ 200/ 2)  6 40  =   0. 3 125      y _c e n t e r   =   ( 50+ 1 00/ 2) / 480   =   0 . 208 3   w i dt =   200 / 640   =   0 . 3125     h e i g ht   =   100/ 480   =   0. 2083   T o   i m p r o v e   t h e   d i v e r s i t y   a n d   r o b us t n e s s   o f   t h e   d a t a s e t ,   w e   a ppl i e d a t a   a ug m e n t a t i o t e c hni que s   s uc h   a s   s c a l i n g ,   f l i pp i n g ,   a n d   r o t a t i o n.   T h e s e   s t e ps   e n s u r e t ha t   t h e   m o de l   w o ul ge n e r a l i z e   w e l l   t o   u n s e e da t a .     2. 1 . 3 .   M o d e l   t r ai n i n ( Y O L O v 5)   T h e   Y O L O v m o de l   w a s   c h o s e n   f o i t s   hi g h - s pe e a n d   a c c ura c y   i o b j e c t   de t e c t i o n   t a s ks .   W e   us e pr e - t ra i n e d   w e i ght s   a s   t h e   s t a rt i ng  po i nt   a n d   f i n e - t u n e t h e   m o de l   o t h e   W ID E R   F A CE   d a t a s e t .   T ra i ni n g   w a s   c o n duc t e us i n g   a   l e a rni n g   r a t e   o f   1 × 10 - a   b a t c s i z e   o 16 ,   a n d   o v e r   100   e po c h s   t o   e n s u r e   c o n v e r ge n c e .   D uri n g   t ra i n i n g ,   m e t r i c s   s uc h   a s   p r e c i s i o n,   r e c a l l ,   a nd  m A P   a s   s h o w n   i T a b l e   w e r e   m o n i t o r e t o   e v a l ua t e   m o de l   pe r f o r m a n c e .   T h e   f i n a l   t r a i n e d   m o de l   a c h i e v e hi gh  a c c ura c y ,   m a ki ng   i t   s u i t a b l e   f o r   r e a l - t i m e   a ppl i c a t i o n s .       T a b l e   1 .   T r a i n i ng  m e t r i c s   p r e c i s i o n,   r e c a l l ,   a n d   m A P   M e t ri c   V a l u e   D e s c ri p t i o n   P re c i s i o n   9 5 . 0 %   P e r c e n t a g e   o c o rr e c t l y   d e t e c t e d   f a c e s   o u t   o a l l   d e t e c t i o n s   m a d e   b y   t h e   m o d e l .   Re c a l l   9 2 . 5 %   P e r c e n t a g e   o a c t u a l   f a c e s   c o rr e c t l y   d e t e c t e d   b y   t h e   m o d e l .   m A P @ 0 . 5   9 4 . 3 %   m A P   a t   a n   i n t e r s e c t i o n   o v e u n i o n   ( I o U )   t h r e s h o l d   o f   0 . 5 .       2. 1 . 4 .   R e a l   ti m e   v i d e o   p r o c e s s i n g   R e a l - t i m e   v i de o   p r o c e s s i n g   w a s   i m pl e m e n t e d   us i n g   O pe n C V   t o   c a pt u r e   f r a m e s   f r o m   a   l i v e   c a m e r a   f e e d.   E a c h   f ra m e   w a s   pa s s e t hr o ug h   t h e   t ra i n e Y O L O v 5   m o de l   t o   de t e c t   f a c e s   [22],   [23] .   T h e   de t e c t e f a c e s   w e r e   t h e p r o c e s s e by   D e e S O R T   f o r   t ra c ki n g   a s   s how   i n   F i gu r e   2.   D e e S O R T   i n t e g ra t e d   a   K a l m a f i l t e t o   p r e d i c t   m o t i o a nd  m a i nt a i n   t ra c ki n g   c o n s i s t e n c y   by   a s s i gn i ng  u ni que   ID s   t o   e a c f a c e ,   e v e n   u nde c h a l l e n gi ng  c o n d i t i o n s   l i ke   o c c l us i o n s   o f a s t   m o v e m e n t s .           F i gu r e   2 .   F a c e   r e c o gn i t i o n       2. 1 . 5 .   O p t i m i z at i o n   T o   e n s u r e   t h e   s y s t e m   o pe r a t e e f f i c i e n t l y   i n   r e a l - t i m e ,   t h e   Y O L O v m o de l   w a s   o pt i m i z e d   b y   a l l o w i n g   f a s t e r   i n f e r e n c e   us i n g   G P U   a c c e l e r a t i o n.   F P 16   p re c i s i o n   w a s   e m pl oy e t o   r e duc e   c o m put a t i o n a l   ov e r h e a d   w i t h o ut   c o m pr o m i s i n a c c ura c y .   R e a l - t i m e   c o n s t ra i nt s   w e r e   f ur t h e r   m a na ge by   b a l a n c i ng  i nput   r e s o l ut i o a n d   f ra m e   p r o c e s s i n s pe e ds ,   r e s ul t i n i n   a   s y s t e m   c a pa b l e   of   pr o c e s s i n 3 f ra m e s   pe r     s e c o n (F P S ).       3.   M ET H O D   T h e   m e t h o do l o g y   of   t h e   p r o po s e s y s t e m   i nt e g r a t e s   s t a t e - of - t h e - a rt   f a c e   de t e c t i o a n d   t ra c ki n g   t e c hn i q ue s   t o   a c hi e v e   r e a l - t i m e ,   h i g h - a c c u r a c y   pe r fo r m a n c e .   Y O L O v 5,   a   r o b us t   o bj e c t   de t e c t i o n   m o de l ,   i s   us e f o r   f a c e   de t e c t i o n   d ue   t o   i t s   a b i l i t y   t o   b a l a n c e   s pe e a n d   a c c ura c y   [24] [26] .   I t   p r o c e s s e s   e a c h   v i de f r a m e   t o   p r e di c t   b o un di n g   b o xe s   a n d   c o n f i de n c e   s c o r e s   f o de t e c t e f a c e s .   T h e   s y s t e m   p r o c e s s e s   r e a l - t i m e   v i de o   i n p ut   us i n a   v i de o   c a pt ur e   de v i c e .   E a c h   f ra m e   i s   e xt r a c t e a nd  c o n v e r t e i nt o   a   s ui t a b l e   f o r m a t   f o r   a n a l y s i s .   A s   s h o w n   i ( 1).   Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752         E f f i c i e nt l y   t r a c k i ng   and   r e c ogn i t i on  of   hum an   f a c e s   i n   r e a l - t i m e   v i de o   s t r e am   w i t h     ( Im r an  U l l a   Khan )   1265   ( )     (1)     I(t ):   f ra m e   a t   t i m e   t   H :   h e i g ht   o f   t h e   f ra m e ,   W :   w i dt h   o f   t h e   f ra m e ,   C:   n um b e o f   c o l o r   c ha nn e l s   (e . g. ,   f o r   R G B ).   E a c h   f r a m e   u n de r go e s   p r e pr o c e s s i n g   t o   e n s u r e   c o m pa t i b i l i t y   w i t Y O L O v 5,   a s   i (2)   f ra m e s   a r e   r e s i z e d   t o   a   f i xe r e s o l ut i o ( , )   i . e .   640 × 640   a s   r e qui r e b y   o ur   m o de l .                 ( ) = ( ( ) , , )     (2)     P i xe l   v a l ue s   a r e   n o rm a l i z e t o   t h e   ra n ge   [ 0 ,   1 ]   b y   di v i di n g   w i t h   2 55  us i n g   (3)   t o   e nha n c e   m o de l   pe r f o r m a n c e .                 ′′ ( ) =   ( ) 255     (3)     Y O L O v 5   us e s   a   CN N   t o   de t e c t   f a c e s   i n   t h e   i nput   f ra m e .   It   d i v i de s   t h e   f r a m e   i nt o   a 20 × 20  g ri d   a nd  pr e di c t s   b o un di n g   b o xe s ,   c o n f i de n c e   s c o r e s ,   a n d   c l a s s   p r o b a b i l i t i e s .   E a c h   c e l l   r e p r e s e n t s   a   32 × 32   pi xe l   a r e a   i n   t h e   i nput   f ra m e .   T h e   o ut put   i s   a   t e n s o r   a s   i (4) .     O = {( x ,   y ,   w ,   h ,   c ,   p1 ,   p2 ,   ,   pk )}   (4)        x , y , w , h :   c o o r di n a t e s   a n d   di m e n s i o n s   o f   t h e   b o un d i n b o x,   c :   c o n f i de n c e   s c o r e   pk p r o b a b i l i t y   of   t h e   k - t c l a s s   T h e   b o un di n g   b o pr e d i c t i o n s   a r e   c a l c ul a t e a s   us i ng  ( 5) .       =     ( ) +     =     ( ) +   =   =       (5)     σ :   s i g m o i a c t i v a t i o n ,   , , , p r e di c t e d   o ff s e t s ,   , , , c e l l   c e n t r e   a n d   p r i o r   b o di m e n s i o n s .   A s   i n   (6)  n o n - m a x i m um   s upp r e s s i o (N M S i s   a ppl i e t o   f i l t e r   o v e r l a pp i n g   b o xe s .              ( , ) =   ( ) ( )     (6)     Bo xe s   w i t Io U   a b ove   a   t hr e s h o l a r e   d i s c a r de d.   F o r   t ra c ki ng,   D e e S O R T   i s   e m pl o y e t o   m a i nt a i t h e   i de nt i t y   of   de t e c t e f a c e s   a c r o s s   f ra m e s   us i n g   c o m b i n a t i o n   o f   m o t i o c o n s i s t e n c y   a n d   a ppe a ra n c e   e m b e ddi n g .   It   a s s i g n s   a   u n i q ue   ID   t o   e a c de t e c t e f a c e   a n t r a c ks   i t   a c r o s s   f r a m e s   us i n g   K a l m a f i l t e r s   a n d   a ppe a ra n c e   e m b e ddi ngs   a s   i (7 ).                   =   1 +   1 +                       =   +       (7 )     A   de e n e ura l   n e t w o r ge n e ra t e s   e m b e ddi n g   f o r   e a c de t e c t e f a c e   us i n ( 8 ) .                 = ( )   ( 8 )     n e u r a l   n e t w o r w i t h   p a r a m e t e r s   θ ,   c r o ppe i m a ge   o f   t h e   i - t f a c e .   G P U   a c c e l e r a t i o n   i s   l e v e r a ge t o   e n s u r e   r e a l - t i m e   p r o c e s s i n g ,   e n a b l i ng  t h e   s y s t e m   t o   h a ndl e   d y n a m i c   c o n di t i o n s   s uc h   a s   o c c l us i o n s ,   m o t i o b l ur,   a n v a r y i n l i g ht i n e n v i r o nm e nt s .   T h e   f i n a l   o ut put   ov e r l a y s   bo un di n g   b o xe s   a n t ra c ki n g   ID s   o t h e   v i de o   f r a m e s   a r e   t ra c ke us i n g   ( 9 ).         ( )   =   ( )   +         +          ( 9 )     T h e   s y s t e m ’s   pe r f o r m a n c e   i s   e v a l ua t e o m e t ri c s   i n c l udi ng   pr e c i s i o n,   r e c a l l ,   f ra m e   r a t e ,   a s   m e nt i o n   i n   (1 0 ),   (1 1 ) ,   a nd  (1 2 t o   v a l i d a t e   i t s   r o b us t n e s s   a n d   e ff i c i e n c y .   Ca l c ul a t e   t h e   s y s t e m ' s   r e a l - t i m e   p r o c e s s i n g   c a pa b i l i t y   by   m e a s ur i n g   h o w   m a n y   f r a m e s   t h e   s y s t e m   c a p r o c e s s   pe s e c o n d.   T hi s   i s   a   ke y   m e t ri c   t o   e n s u r e   t h e   s y s t e m   o pe r a t e s   s m o o t h l y   i r e a l - t i m e   s c e na r i o s .   Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i V o l .   3 9 ,   N o .   2 ,   A ugus t   20 25 :   1 261 - 1 268   1266   P r e c i s i o =   T r ue   P o s i t i v es    +        ( 1 0 )     R e c a l l   =           +          ( 1 1 )     F 1=   2*      +      (1 2 )       4.   R ES U LTS   A N D   D I S C U S S I O N     T h e   pe r f o r m a n c e   e v a l ua t i o n   o f   t h e   p r o po s e s y s t e m   w a s   c on d uc t e us i n ke y   m e t r i c s   a s   s h o w n   i T a b l e   t o   m e a s u r e   i t s   e f f i c i e n c y   i n   r e a l - t i m e   f a c e   de t e c t i o n   a n t ra c ki ng.   T h e   s y s t e m   a c hi e v e a   f r a m e   r a t e   (F P S o f   35,   de m o n s t ra t i ng  i t s   c a p a b i l i t y   t o   p r o c e s s   v i d e o   s t r e a m s   i r e a l - t i m e   w i t h o ut   c o m p r o m i s i n g   pe r f o r m a n c e ,   m a ki ng  i t   s u i t a b l e   f o r   dy n a m i c   a n d   t i m e - c ri t i c a l   a pp l i c a t i o n s .   A   p r e c i s i o n   o f   0. 95   i ndi c a t e s   t h e   m o de l ' s   a b i l i t y   t o   pr o duc e   h i g h l y   a c c ur a t e   f a c e   de t e c t i o n s   w i t h   m i ni m a l   f a l s e   po s i t i v e s ,   w h i l e   a   r e c a l l   o f   0. 92  r e f l e c t s   i t s   e f f e c t i v e n e s s   i de t e c t i n a   m a j o r i t y   of   f a c e s   a c r o s s   v a r y i n c o ndi t i o n s .   T h e   F 1 - s c o r e   of   0. 93  hi g hl i g ht s   t h e   b a l a n c e   b e t w e e n   p r e c i s i o n   a nd  r e c a l l ,   c o n f i rm i n g   t h e   r o b us t n e s s   of   t h e   de t e c t i o n   a l go r i t h m .   T r a c ki n g   pe r f o rm a n c e   w a s   a s s e s s e us i n ID   s w i t c h e s   a nd  t r a c k   f r a gm e n t a t i o n,   w h e r e   t h e   s y s t e m   e xhi b i t e l o w   v a l ue s   of   a n d   3 ,   r e s p e c t i v e l y ,   e n s uri n g   c o n s i s t e n t   a n d   u ni n t e rr u pt e t r a c ki ng  o f   f a c e s   a c r o s s   f r a m e s .   A dd i t i o n a l l y ,   t h e   m ul t i p l e   ob j e c t   t ra c ki n g   a c c u r a c y   (M O T A s c o r e   of   0. 97  unde r s c o r e s   t h e   s y s t e m ' s   hi g a c c ura c y   i n   t r a c ki ng  m ul t i p l e   f a c e s   w h i l e   m i n i m i z i ng  e rr o r s   s uc a s   m i s s e de t e c t i o n s   a n ID   i n c o n s i s t e n c i e s .   T h e s e   r e s ul t s   de m o n s t ra t e   t ha t   t h e   p r o po s e m e t h o i s   w e l l - s ui t e f o r   a ppl i c a t i o n s   r e qu i r i ng  r e a l - t i m e ,   r e l i a b l e   f a c e   de t e c t i o n   a nd  t ra c ki n g   u n de r   d i v e r s e   e n v i r o nm e n t a l   c ha l l e n ge s .       T a b l e   2 .   P e r f o r m a n c e   e v a l ua t i o n   M e t ri c   V a l u e   In t e r p re t a t i o n   F P S   3 5 . 0 0   H i g h   F P S   i n d i c a t e s   r e a l - t i m e   p r o c e s s i n g   c a p a b i l i t y .   P re c i s i o n   0 . 9 5   H i g h   p r e c i s i o n   s h o w s   a c c u ra t e   f a c e   d e t e c t i o n s   w i t h   m i n i m a l   f a l s e   p o s i t i v e s .   Re c a l l   0 . 9 2   H i g h   r e c a l l   r e fl e c t s   t h e   a b i l i t y   t o   d e t e c t   m o s t   f a c e s   i n   t h e   f ra m e .   F1 - S c o r e   0 . 9 3   Ba l a n c e d   F 1 - s c o r e   c o n fi r m s   o v e ra l l   d e t e c t i o n   p e r fo r m a n c e .   ID   S w i t c h e s   5 . 0 0   L o w   ID   s w i t c h e s   i n d i c a t e   c o n s i s t e n t   f a c e   t ra c k i n g .   T ra c k   f ra g m e n t a t i o n   3 . 0 0   L o w   t ra c k   fra g m e n t a t i o n   d e m o n s t ra t e s   u n i n t e rru p t e d   t ra c k i n g .   M O T A   0 . 9 7   H i g h   M O T A   re fl e c t s   o v e ra l l   t ra c k i n g   a c c u ra c y .       T h e   f i n d i n gs   a r e   p a r t i c ul a rl y   s i gn i f i c a n t   a s   t h e y   a ddr e s s   ke y   c ha l l e n ge s   i f a c e   t ra c ki n g ,   s uc h   a s   ID   s w i t c he s   a nd   f ra g m e nt a t i o n,   w h e re   o u m e t h o d   m i ni m i z e s   t he s e   i s s ue s   ( ID   s w i t c h e s :   5 ,   t ra c k   f ra g m e nt a t i o n:   3) .   T h i s   e n s u r e s   c o n t i n uo us ,   u n i nt e rrupt e r e a l   t i m e   f a c e   t r a c k i n g.   F ut u r e   r e s e a r c c a n   e nh a n c e   o ur   s y s t e m ’s   r o b us t n e s s   by   i m p r o v i n g   f a c e   de t e c t i o n   u n de r   l o w - l i ght   c o n di t i o n s   a n o c c l us i o n s   us i n a dv a n c e d   pr e p r o c e s s i n a n 3D   m o de l i ng  t e c hn i q ue s .   M u l t i - f a c e   t ra c ki n g   i c r o w d e s c e n e s   c a n   b e   o pt i m i z e w i t R e - ID   e m b e ddi n gs   a n d   g ra p h - b a s e t ra c ki n g   m e t h o ds .   F u rt h e e xpe ri m e n t s   o l a rge - s c a l e   da t a s e t s   a nd   c r o s s - do m a i a p pl i c a t i o n s ,   s uc h   a s   a ug m e nt e r e a l i t y / v i r t ua l   r e a l i t y   ( A R / V R )   a n d   b e h a v i o r a l   a na l y s i s ,   w i l l   s t r e n g t h e i t s   a da pt a b i l i t y   a n d   e ff i c i e n c y .       5.   C O N C LU S I O N     In  c o n c l us i o n,   t h i s   r e s e a r c h   s uc c e s s f ul l y   de v e l o pe a   r o b us t   a n d   e f f i c i e n t   s y s t e m   f o r   r e a l - t i m e   f a c e   de t e c t i o n   a n d   t ra c ki n g   us i n g   t h e   W ID E R   F A C E   da t a s e t ,   Y O L O v fo r   f a c e   de t e c t i o n ,   a n d   D e e S O R T   f o r   t r a c ki ng.   T h e   s y s t e m   a c hi e v e h i g h   pe r f o r m a n c e   w i t h   a   pr e c i s i o o f   95. 0%,   r e c a l l   o f   92. 5%,   a n a m A P @ 0 . 5   o f   94. 3% ,   de m o n s t r a t i ng   i t s   a c c ura c y   a n d   r e l i a b i l i t y   i de t e c t i n g   a n d   t r a c k i n g   f a c e s   i dy n a m i c   e n v i r o n m e n t s .   By   i nt e g r a t i n g   G P U   a c c e l e r a t i o a n d   l i g h t w e i ght   a r c h i t e c t ur e s ,   t h e   s y s t e m   m a i nt a i n e d   r e a l - t i m e   p r o c e s s i n c a pa b i l i t i e s ,   a c hi e v i n g   a   b a l a n c e   b e t w e e a c c u r a c y   a nd  s pe e d.   T h e   p r o po s e s o l ut i o n   a dd r e s s e s   c h a l l e nge s   s uc h   a s   o c c l us i o n s ,   v a r y i n g   l i g h t i n g   c o n di t i o n s ,   a n d   r a pi m o v e m e n t s ,   m a ki n g   i t   s ui t a b l e   f o r   a ppl i c a t i o n s   i n   s u r v e i l l a n c e ,   e n t e rt a i nm e n t ,   h e a l t h c a r e ,   a nd  a ugm e nt e r e a l i t y .   T h e s e   r e s ul t s   hi g h l i g ht   t h e   po t e nt i a l   o f   t h i s   s y s t e m   t o   p r o v i de   s c a l a b l e   a n d   e f fe c t i ve   s o l ut i o n s   f o r   f a c e   de t e c t i o n   a nd  t r a c ki ng  i n   r e a l - w o r l s c e na r i o s .       A C K N O WL ED G E M EN TS     W e   s i n c e r e l y   t h a nk   R E V A   U n i v e r s i t y   fo r   p r o v i di n g   t h e   e s s e n t i a l   r e s o ur c e s   a nd  f a c i l i t i e s   t ha t   m a de   t h i s   e n de a v o r   po s s i b l e .     Evaluation Warning : The document was created with Spire.PDF for Python.
In do n e s i a J   E l e c   E ng  &   Co m S c i     IS S N :   2502 - 4752         E f f i c i e nt l y   t r a c k i ng   and   r e c ogn i t i on  of   hum an   f a c e s   i n   r e a l - t i m e   v i de o   s t r e am   w i t h     ( Im r an  U l l a   Khan )   1267   F U N D I N G   I N F O R M A TI O N     A ut h o r s   s t a t e   n o   f un d i n g   i n v o l v e d.       A U TH O R   C O N TR I B U TI O N S   S TA T EM EN   T h i s   j o urna l   us e s   t h e   Co n t ri b ut o R o l e s   T a xo n o m y   (CR e di T t o   r e c o gn i z e   i n d i v i dua l   a ut h o c o n t ri b ut i o n s ,   r e duc e   a ut h o r s hi p   di s pu t e s ,   a n d   f a c i l i t a t e   c o l l a bo r a t i o n.       N am e   o A u th o r   C   M   So   Va   Fo   I   R   D   O   E   Vi   Su   P   Fu   Im r a U l l a   K ha n                               D .   R .   K um a r   R a j a                                 C     C o n c e p t u a l i z a t i o n   M     M e t h o d o l o g y   So     So f t w a r e   Va     Va l i d a t i o n   Fo     Fo r m a l   a n a l y s i s   I     I n v e s t i g a t i o n   R     R e s o u rc e s   D   :   D a t a   Cu ra t i o n   O   :   W ri t i n g   -   O ri g i n a l   D ra ft   E   :   W ri t i n g   -   Re v i e w   &   E d i t i n g   Vi     Vi s u a l i z a t i o n   Su     Su p e r v i s i o n   P     P ro j e c t   a d m i n i s t ra t i o n   Fu     Fu n d i n g   a c q u i s i t i o n         C O N F LI C O F   I N T ER ES S TA T EM EN   A ut h o r s   s t a t e   n o   c o n f l i c t   o f   i nt e r e s t .       D A TA   A V A I LA B I LI T Y     T h e   da t a   t h a t   s uppo r t   t h e   f i ndi n gs   o f   t h i s   s t u dy   a r e   o pe n l y   a v a i l a b l e   i n   t h e   W ID E R   F A CE   d a t a s e t   a t   ht t p : / / s huoy a n g1213 . m e / W ID E R F A CE ,   a s   de s c r i b e i t h e   o r i gi na l   p a pe r :   Y a n g ,   S . ,   L uo ,   P . ,   L oy ,   C.   C. ,   &   T a n g ,   X .   ( 2016) .   W ID E R   F A CE :   A   F a c e   D e t e c t i o B e n c hm a r k .   I P r o c e e di n gs   o f   t h e   IE E E   Co n f e r e n c e   o Co m put e V i s i o n   a n d   P a t t e rn   R e c o gn i t i o n   (CV P R ),   pp .   5525 5533.       R EF ER EN C ES   [1 ]   D .   R.   G a r c i a ,   A .   A .   S e r n a ,   D .   S .   Cr e s p o ,   X .   Y u ,   a n d   J .   S a n i i e ,   A I   s m a r t   s e c u ri t y   c a m e ra   f o r   p e r s o n   d e t e c t i o n ,   f a c e   r e c o g n i t i o n ,   t ra c k i n g   a n d   l o g g i n g ,   i n   2 0 2 4   IE E E   In t e r n a t i o n a l   Co n f e r e n c e   o n   E l e c t r o   I n f o r m a t i o n   T e c h n o l o g y   ( e IT ) ,   M a y   2 0 2 4 ,   p p .   2 3 5 2 4 0 ,   d o i :   1 0 . 1 1 0 9 / e IT 6 0 6 3 3 . 2 0 2 4 . 1 0 6 0 9 9 0 0 .   [2 ]   C.   Bh a t t ,   M .   S e m w a l ,   P .   S .   A s w a l ,   V .   G o s w a m i ,   S .   Ra w a t ,   a n d   R.   D h a n a l a k s h m i ,   Re a l   t i m e   s u r v e i l l a n c e   c r i m i n a l   d e t e c t i o n   s y s t e m ,   i n   2 0 2 4   S e c o n d   In t e r n a t i o n a l   Co n f e r e n c e   o n   A d v a n c e s   i n   In f o r m a t i o n   T e c h n o l o g y   ( ICA I T ) ,   J u l .   2 0 2 4 ,   p p .   1 8 ,   d o i :   1 0 . 1 1 0 9 / ICA IT 6 1 6 3 8 . 2 0 2 4 . 1 0 6 9 0 3 3 3 .   [3 ]   H .   A u n g ,   B.   A .   V a l e n t i n o v i c h ,   a n d   B.   A y e ,   Re a l - t i m e   f a c e   t ra c k i n g   b a s e d   o n   t h e   K a l m a n   fi l t e r ,   i n   20 2 2   In t e r n a t i o n a l   Co n f e r e n c e   o n   In d u s t r i a l   E n g i n e e r i n g ,   A p p l i c a t i o n s   a n d   M a n u f a c t u r i n g   (ICIE A M ) ,   M a y   2 0 2 2 ,   p p .   8 4 2 8 4 6 ,   d o i :   1 0 . 1 1 0 9 / ICIE A M 5 4 9 4 5 . 2 0 2 2 . 9 7 8 7 2 3 2 .   [4 ]   S .   D u ra i ,   T .   S u j i t h ra ,   B.   V .   S a t y a m ,   S .   N .   K e s h e t t y ,   C.   N .   S .   S a g a r,   a n d   A .   S .   C h a ra n ,   R e a l   t i m e   f a c i a l   r e c o g n i t i o n - b a s e d   c r i m i n a l   i d e n t i f i c a t i o n   u s i n g   M T CN N ,   i n   2 0 2 4   2 n d   In t e r n a t i o n a l   Co n f e r e n c e   o n   S u s t a i n a b l e   Co m p u t i n g   a n d   S m a r t   S y s t e m s   ( ICS CS S ) J u l .   2 0 2 4 ,   p p .   1 2 6 1 1 2 6 5 ,   d o i :   1 0 . 1 1 0 9 / ICS CS S 6 0 6 6 0 . 2 0 2 4 . 1 0 6 2 4 9 4 6 .   [5 ]   J .   D i l e e p ,   V .   G .   S u p r i y a ,   a n d   M .   Ra m a c h a n d ra ,   D e t e c t i o n   a n d   t ra c k i n g   o m u l t i p l e   f a c e s   i n   v i d e o   u s i n g   m o d i f i e d   K L T   a l g o r i t h m ,   i n   2 0 2 3   In t e r n a t i o n a l   Co n f e r e n c e   o n   t h e   Co n f l u e n c e   o f   A d v a n c e m e n t s   i n   R o b o t i c s ,   V i s i o n   a n d   In t e r d i s c i p l i n a r y   T e c h n o l o g y   M a n a g e m e n t   ( IC - R V I T M ) ,   N o v .   2 0 2 3 ,   p p .   1 5 ,   d o i :   1 0 . 1 1 0 9 / IC - R V IT M 6 0 0 3 2 . 2 0 2 3 . 1 0 4 3 5 1 9 0 .   [6 ]   M .   S o h a i l   e t   a l . ,   D e e p   l e a rn i n g   b a s e d   m u l t i   p o s e   h u m a n   f a c e   m a t c h i n g   s y s t e m ,   I E E E   A c c e s s ,   v o l .   1 2 ,   p p .   2 6 0 4 6 2 6 0 6 1 ,   2 0 2 4 ,   d o i :   1 0 . 1 1 0 9 / A CC E S S . 2 0 2 4 . 3 3 6 6 4 5 1 .   [7 ]   S .   Ra n j a n ,   S .   T y a g i ,   S .   G u p t a ,   M .   K a u r,   a n d   M .   K .   G o y a l ,   I m a g e   p r o c e s s i n g - b a s e d   re a l - t i m e   d e t e c t i o n   a n d   t ra c k i n g   o h u m a n ,   i n   2 0 2 3   3 r d   In t e r n a t i o n a l   Co n f e r e n c e   o n   T e c h n o l o g i c a l   A d v a n c e m e n t s   i n   Co m p u t a t i o n a l   S c i e n c e s   ( ICT A CS ) ,   N o v .   2 0 2 3 ,     p p .   1 5 4 2 1 5 4 7 ,   d o i :   1 0 . 1 1 0 9 / ICT A CS 5 9 8 4 7 . 2 0 2 3 . 1 0 3 9 0 1 0 6 .   [8 ]   N .   K a e w n o p a ra t   a n d   T .   P h i e n t h ra k u l ,   E m o t i o n   r e c o g n i t i o n   o n   p a r t i a l   f a c e s   w i t h   h i s t o g ra m   o o r i e n t e d   g ra d i e n t s   a n d   l o c a l   b i n a ry   p a t t e r n s ,   i n   2 0 2 3   IE E E   S y m p o s i u m   o n   In d u s t r i a l   E l e c t r o n i c s   &   A p p l i c a t i o n s   ( IS IE A ) ,   J u l .   2 0 2 3 ,   p p .   1 6 ,   d o i :   1 0 . 1 1 0 9 / IS IE A 5 8 4 7 8 . 2 0 2 3 . 1 0 2 1 2 2 7 1 .   [9 ]   M .   R .   I s l a m   a n d   K .   H o ri o ,   R e a l   t i m e - b a s e d   f a c e   r e c o g n i t i o n ,   t ra c k i n g ,   c o u n t i n g ,   a n d   c a l c u l a t i o n   o f   s p e n t   t i m e   o f   p e r s o n   u s i n g   O p e n C V   a n d   c e n t ro i d   t ra c k e a l g o r i t h m s ,   i n   2 0 2 3   5 t h   In t e r n a t i o n a l   Co n f e r e n c e   o n   Co m p u t e r   Co m m u n i c a t i o n   a n d   t h e   In t e r n e t   ( IC CCI) ,   J u n .   2 0 2 3 ,   p p .   2 1 0 2 1 6 ,   d o i :   1 0 . 1 1 0 9 / ICCCI5 9 3 6 3 . 2 0 2 3 . 1 0 2 1 0 1 0 2 .   [1 0 ]   Y .   T o m a r ,   H i m a n s h u ,   S .   D e v i ,   a n d   H .   K a u r,   H u m a n   m o t i o n   t ra c k e u s i n g   O p e n C v   a n d   M e d i a p i p e ,   i n   2 0 2 3   3 r d   In t e r n a t i o n a l   Co n f e r e n c e   o n   I n n o v a t i v e   M e c h a n i s m s   f o r   In d u s t r y   A p p l i c a t i o n s   ( ICI M I A ) ,   D e c .   2 0 2 3 ,   p p .   1 1 9 9 1 2 0 4 ,   d o i :   1 0 . 1 1 0 9 / ICIM I A 6 0 3 7 7 . 2 0 2 3 . 1 0 4 2 5 8 6 5 .   [1 1 ]   T .   J a i c h u e n ,   N .   R e n ,   P .   W o n g a p i n y a ,   a n d   S .   F u g k e a w ,   BL U &   T R A C K :   re a l - t i m e   f a c e   d e t e c t i o n   w i t h   i m m e d i a t e   b l u rri n g   a n d   e ff i c i e n t   t ra c k i n g ,   i n   2 0 2 3   2 0 t h   In t e r n a t i o n a l   J o i n t   Co n f e r e n c e   o n   Co m p u t e r   S c i e n c e   a n d   S o f t w a r e   E n g i n e e r i n g   ( J CS S E ) ,   J u n .   2 0 2 3 ,   p p .   1 6 7 1 7 2 ,   d o i :   1 0 . 1 1 0 9 / J CS S E 5 8 2 2 9 . 2 0 2 3 . 1 0 2 0 2 0 6 4 .   [1 2 ]   M .   G u p t a ,   K .   Bi s h t ,   A .   S h a r m a ,   a n d   D .   U p a d h y a y ,   H a a rCa s c a d e   a n d   L B P H   a l g o ri t h m s   i n   f a c e   r e c o g n i t i o n   a n a l y s i s ,   i n   2023  W o r l d   Co n f e r e n c e   o n   Co m m u n i c a t i o n   &   Co m p u t i n g   (W CO N F ) ,   J u l .   2 0 2 3 ,   p p .   1 4 ,   d o i :   1 0 . 1 1 0 9 / W CO N F 5 8 2 7 0 . 2 0 2 3 . 1 0 2 3 5 0 1 9 .   [1 3 ]   A .   K u m a a n d   D .   S i n g h ,   C o m p r e h e n s i v e   a p p r o a c h   o f   r e a l   t i m e   w e b - b a s e d   f a c e   r e c o g n i t i o n   s y s t e m   u s i n g   H a a Ca s c a d e   a n d   L BP H   a l g o ri t h m ,   i n   2 0 2 3   In t e r n a t i o n a l   Co n f e r e n c e   o n   D e v i c e   I n t e l l i g e n c e ,   Co m p u t i n g   a n d   Co m m u n i c a t i o n   T e c h n o l o g i e s ,   ( D IC CT ) ,   M a r.   2 0 2 3 ,   p p .   3 7 1 3 7 6 ,   d o i :   1 0 . 1 1 0 9 / D ICCT 5 6 2 4 4 . 2 0 2 3 . 1 0 1 1 0 0 4 9 .     Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2502 - 4752   In do n e s i a J   E l e c   E ng  &   Co m S c i V o l .   3 9 ,   N o .   2 ,   A ugus t   20 25 :   1 261 - 1 268   1268   [1 4 ]   R.   M o re ,   A .   M a i t y ,   G .   K a m b l i ,   a n d   S .   A m b a d e k a r,   P ri v a c y - p r e s e rv i n g   v i d e o   a n a l y t i c s   t h r o u g h   G A N - b a s e d   f a c e   d e - i d e n t i f i c a t i o n ,   i n   2 0 2 4   S e c o n d   In t e r n a t i o n a l   Co n f e r e n c e   o n   Ne t w o r k s ,   M u l t i m e d i a   a n d   In f o r m a t i o n   T e c h n o l o g y   ( NM I T CO N) A u g .   2 0 2 4 ,   p p .   1 6 ,   d o i :   1 0 . 1 1 0 9 / N M IT CO N 6 2 0 7 5 . 2 0 2 4 . 1 0 6 9 8 9 2 0 .   [1 5 ]   R.   K .   P e d d a ra p u ,   S .   R .   K a n n a re d d y ,   B.   M a l l e l a ,   V .   S .   S .   A .   P r i t h v i ,   a n d   Y .   A .   Re d d y ,   Re a l   t i m e   a t t e n d a n c e   c a p t u ri n g   t h r o u g h   f a c e   r e c o g n i t i o n ,   i n   2 0 2 3   7 t h   In t e r n a t i o n a l   Co n f e r e n c e   o n   I - S M A ( Io T   i n   S o c i a l ,   M o b i l e ,   A n a l y t i c s   a n d   Cl o u d ( I - S M A C) ,   O c t .   2 0 2 3 ,   p p .   7 2 6 7 3 3 ,   d o i :   1 0 . 1 1 0 9 / I - S M A C5 8 4 3 8 . 2 0 2 3 . 1 0 2 9 0 6 9 1 .   [1 6 ]   T .   K .   K a n d u k u ru ,   S .   K .   T h a n g a v e l ,   a n d   G .   J e y a k u m a r,   C o m p u t e v i s i o n   b a s e d   a l g o r i t h m s   fo d e t e c t i n g   a n d   c l a s s i fi c a t i o n   o a c t i v i t i e s   f o f a l l   re c o g n i t i o n   o n   r e a l   t i m e   v i d e o ,   i n   2 0 2 4   3 r d   In t e r n a t i o n a l   Co n f e r e n c e   o n   A r t i f i c i a l   In t e l l i g e n c e   F o r   In t e r n e t   o f   T h i n g s   (A IIo T ) ,   M a y   2 0 2 4 ,   p p .   1 6 ,   d o i :   1 0 . 1 1 0 9 / A II o T 5 8 4 3 2 . 2 0 2 4 . 1 0 5 7 4 5 4 2 .   [1 7 ]   V .   K u l k a rn i   a n d   K .   T a l e l e ,   V i d e o   a n a l y t i c s   fo r   f a c e   d e t e c t i o n   a n d   t ra c k i n g ,   i n   2 0 2 0   2 n d   In t e r n a t i o n a l   Co n f e r e n c e   o n   A d v a n c e s   i n   Co m p u t i n g ,   Co m m u n i c a t i o n   Co n t r o l   a n d   Ne t w o r k i n g   ( I CA CCC N) ,   D e c .   2 0 2 0 ,   p p .   9 6 2 9 6 5 ,   d o i :   1 0 . 1 1 0 9 / ICA CC CN 5 1 0 5 2 . 2 0 2 0 . 9 3 6 2 9 0 0 .   [1 8 ]   S .   H u ,   X .   Z h a o ,   L .   H u a n g ,   a n d   K .   H u a n g ,   G l o b a l   i n s t a n c e   t ra c k i n g :   l o c a t i n g   t a r g e t   m o r e   l i k e   h u m a n s ,   IE E E   T r a n s a c t i o n s   o n   P a t t e r n   A n a l y s i s   a n d   M a c h i n e   In t e l l i g e n c e ,   v o l .   4 5 ,   n o .   1 ,   p p .   5 7 6 5 9 2 ,   J a n .   2 0 2 3 ,   d o i :   1 0 . 1 1 0 9 / T P A M I. 2 0 2 2 . 3 1 5 3 3 1 2 .   [1 9 ]   R.   S a t h y a ,   M .   M y t h i l i ,   S .   A n a n t h i ,   R.   A s i t h a ,   V .   N .   V a rd h i n i ,   a n d   M .   S h i v a a n i ,   In t e l l i g e n t   v i d e o   s u r v e i l l a n c e   s y s t e m   fo r   r e a l   t i m e   e ffe c t i v e   h u m a n   a c t i o n   r e c o g n i t i o n   u s i n g   d e e p   l e a rn i n g   t e c h n i q u e s ,   i n   2 0 2 3   2 n d   In t e r n a t i o n a l   Co n f e r e n c e   o n   A u t o m a t i o n ,   Co m p u t i n g   a n d   R e n e w a b l e   S y s t e m s   ( I CA C R S ) ,   D e c .   2 0 2 3 ,   p p .   1826 1 8 3 1 ,   d o i :   1 0 . 1 1 0 9 / ICA CRS 5 8 5 7 9 . 2 0 2 3 . 1 0 4 0 4 6 7 0 .   [2 0 ]   S .   L i ,   Y .   D o u ,   Q .   L v ,   Q .   W a n g ,   X .   N i u ,   a n d   K .   Y a n g ,   O p t i m i z e d   G P U   a c c e l e ra t i o n   a l g o ri t h m   o f   c o n v o l u t i o n a l   n e u ra l   n e t w o rk s   fo r   t a rg e t   d e t e c t i o n ,   i n   2 0 1 6   IE E E   1 8 t h   In t e r n a t i o n a l   Co n f e r e n c e   o n   H i g h   P e r f o r m a n c e   Co m p u t i n g   a n d   Co m m u n i c a t i o n s IE E E   1 4 t h   In t e r n a t i o n a l   Co n f e r e n c e   o n   S m a r t   Ci t y IE E E   2 n d   In t e r n a t i o n a l   Co n f e r e n c e   o n   D a t a   S c i e n c e   a n d   S y s t e m s   ( H P CC/ S m a r t Ci t y / D S S ) ,   D e c .   2 0 1 6 ,   p p .   2 2 4 2 3 0 ,   d o i :   1 0 . 1 1 0 9 / H P CC - S m a r t Ci t y - D S S . 2 0 1 6 . 0 0 4 1 .   [2 1 ]   H .   L i   a n d   J .   Q i ,   A   m u l t i - t a s k   l e a r n i n g   a n d   d a t a   a u g m e n t a t i o n - b a s e d   p o s e   e s t i m a t i o n   a l g o r i t h m ,   i n   2 0 2 3   8 t h   In t e r n a t i o n a l   Co n f e r e n c e   o n   In f o r m a t i o n   S y s t e m s   E n g i n e e r i n g   ( ICIS E ) ,   J u n .   2 0 2 3 ,   p p .   3 5 8 3 6 1 ,   d o i :   1 0 . 1 1 0 9 / ICIS E 6 0 3 6 6 . 2 0 2 3 . 0 0 0 8 2 .   [2 2 ]   X .   Z h a n g   a n d   M .   Z h o n g ,   Re s e a r c h   o n   t a r g e t   r e c o g n i t i o n   a l g o r i t h m   b a s e d   o n   O p e n C V ,   i n   2 0 2 4   IE E E   2 n d   In t e r n a t i o n a l   Co n f e r e n c e   o n   Im a g e   P r o c e s s i n g   a n d   Co m p u t e r   A p p l i c a t i o n s   ( ICI P CA ) ,   J u n .   2 0 2 4 ,   p p .   1 6 ,   d o i :   1 0 . 1 1 0 9 / ICIP C A 6 1 5 9 3 . 2 0 2 4 . 1 0 7 0 9 2 4 6 .   [2 3 ]   P .   M a o ,   X .   L i a o ,   a n d   D .   X u ,   A   f a c e   i m a g e   p r o c e s s i n g   s y s t e m   b a s e d   o n   o b j e c t   t ra c k i n g   t e c h n o l o g y ,   i n   2 0 2 3   In t e r n a t i o n a l   Co n f e r e n c e   o n   In t e g r a t e d   In t e l l i g e n c e   a n d   Co m m u n i c a t i o n   S y s t e m s   ( ICIICS ) ,   N o v .   2 0 2 3 ,   p p .   1 5 ,   d o i :   1 0 . 1 1 0 9 / ICIICS 5 9 9 9 3 . 2 0 2 3 . 1 0 4 2 1 2 7 6 .   [2 4 ]   J .   Q u   a n d   S .   Z h a n g ,   R e s e a r c h   o n   v i d e o   t ra c k i n g   a l g o ri t h m   b a s e d   o n   Y O L O   t a r g e t   d e t e c t i o n ,   i n   2 0 2 3   6 t h   In t e r n a t i o n a l   Co n f e r e n c e   o n   Co m p u t e r   Ne t w o r k ,   E l e c t r o n i c   a n d   A u t o m a t i o n   ( IC CNE A ) ,   S e p .   2 0 2 3 ,   p p .   4 3 7 4 3 9 ,   d o i :   1 0 . 1 1 0 9 / ICCN E A 6 0 1 0 7 . 2 0 2 3 . 0 0 0 9 8 .   [2 5 ]   A .   K u m a r,   T .   S i n g h ,   a n d   P .   D u ra i s a m y ,   D e t e c t i o n   a n d   t ra c k i n g   o m u l t i p l e   p e d e s t ri a n s   u s i n g   d e e p   l e a rn i n g ,   i n   2 0 2 3   1 4 t h   In t e r n a t i o n a l   Co n f e r e n c e   o n   Co m p u t i n g   Co m m u n i c a t i o n   a n d   Ne t w o r k i n g   T e c h n o l o g i e s   ( ICCCN T ) ,   J u l .   2 0 2 3 ,   p p .   1 6 ,   d o i :   1 0 . 1 1 0 9 / ICCCN T 5 6 9 9 8 . 2 0 2 3 . 1 0 3 0 7 5 4 3 .   [2 6 ]   Y .   G a i ,   W .   H e ,   a n d   Z .   Z h o u ,   P e d e s t r i a n   t a rg e t   t ra c k i n g   b a s e d   o n   D e e p S O RT   w i t h   Y O L O v 5 ,   i n   2 0 2 1   2 n d   In t e r n a t i o n a l   Co n f e r e n c e   o n   Co m p u t e r   E n g i n e e r i n g   a n d   In t e l l i g e n t   Co n t r o l   ( ICCE IC) ,   N o v .   2 0 2 1 ,   p p .   1 5 ,   d o i :   1 0 . 1 1 0 9 / ICCE IC5 4 2 2 7 . 2 0 2 1 . 0 0 0 0 8 .       B I O G R A P H I ES   O F   A U T H O R S       I m r an   U l l K h an           i s   a   r e s e a r c s c ho l a r   a t   R e v a   U n i v e r s i t y   a nd   a a s s i s t a n t   pr o f e s s o r   i n   t he   de pa r t m e nt   o f   c o m put e r   s c i e nc e   a nd   e ng i ne e r i ng   a t   S r i   K r i s hn a   I ns t i t ut e   o f   T e c hno l o gy ,   B a ng a l o r e ,   I ndi a .   H e   i s   a   t e c h   e n t hu s i a s t   w i t h   a   ke e n   i nt e r e s t   i i m a g e   pr o c e s s i ng   a nd   de e p   l e a r ni ng .   H i s   r e s e a r c f o c us e s   o s ke t c h - ba s e d   i m a g e   r e t r i e v a l   a nd   g e ne r a t i v e   a dv e r s a r i a l   n e t w o r k s   ( G A N s )   f o r   e n ha nc i ng   s ke t ch - to - r e a l i s t i c   i m a g e   t r a n s f o r m a t i o n.   He   ha s   pr e s e n t e d   a n p ubl i s he d   h i s   w o r k   i v a r i o us   c o nf e r e nc e s   a nd   j o ur n a l s .   H e   i s   pa s s i o na t e   a bo u t   a dv a nc i ng   h i s   e xpe r t i s e   i n   de e p   l e a r ni ng   a r c hi t e c t u r e s   t o   a dd r e s s   c ha l l e ng e s   i n   i m a g e   s y nt he s i s   a nd  r e l a t e d   do m a i ns .   H e   c a n   be   c o nt a c t e d   a t   e m a i l :   i m r a n1 6198 4@ g m a i l . c o m .         D r .   D .   R .   K u m ar   R a j a           i s   c ur r e n t l y   w o r ki ng   a s   p r o f e s s o r   i t h e   s c ho o l   of   c om put e r   s c i e nc e   a n e ng i ne e r i ng   a t   R E V A   U ni v e r s i t y   B e ng a l ur u ,   K a r na t a ka ,   I ndi a .   H e   r e c e i v e d   h i s   ba c he l o r   o f   t e c hno l o gy   ( B . T e c h . )   f r o m   J N T U A   C o l l e g e   o f   E ng i ne e r i ng   a nd   M a s t e r   o f   T e c hno l o gy   ( M . T e c h . )   f r o m   N a t i o na l   I ns t i t u t e   o f   T e c hno l o gy   K a r na t a ka   ( N I T K )   S ur a t hk a l ,   K a r na t a ka ,   I ndi a .   H e   r e c e i v e a   do c t o r a t e   o f   p hi l o s o phy   ( P h. D . )   f r o m   S t   P e t e r s   U ni v e r s i t y ,   C he nna i ,   I ndi a   f o r   a e f f e c t i v e   c o nt e xt - d r i v e n   r e c o m m e nde r   s y s t e m   f o r   e - c om m e r c e   a p pl i c a t i o ns .   H e   di d   po s t   do c t o r a l   r e s e a r c a t   U n i v e r s i t i   T e kn i ka l   M a l a y s i a ,   M e l a k a ,   M a l a y s i a   f r o m   S e p t e m b e r   2023   t o   S e p t e m b e r   202 4.   H e   r e c e i v e f und i ng   a m o unt   o f   18 , 0 00  U S D   f o r   c a r r y i ng   o ut   r e s e a r c p r o j e c t s   o ne   f o r   16 , 000   U S D   f r o m   R E V A   U ni v e r s i t y   f o r   t he   p r o j e c t   hum a no i d   r o bo t   a nd   c o m pl e t e t h e   pr o j e c t   i n   20 22   a nd  a no t he r   f o r   2 , 000   U S D   f r o m   S r e e   V i dy a ni ke t ha n   E duc a t i o na l   T r u s t   f o r   t h e   pr o j e c t   a u t o m a t i o n   o f   a e r a t o r s   f o r   a qu c ul t u r e   us i ng   I o T   a nd  c o m pl e t e d   t he   pr o j e c t   i n   201 9.   H i s   r e s e a r c a r e a s   i nc l ud e   t h e   i n t e r ne t   o f   t hi ng s ,   da t a   m i n i ng ,   m a c hi n e   l e a r n i ng   a n a r t i f i c i a l   i nt e l l i g e nc e .   H e   c a b e   c o nt a c t e a t   e m a i l :   kum a r r a j a d r @g m a i l . c o m .     Evaluation Warning : The document was created with Spire.PDF for Python.