I n te r n ati o n al   Jo u r n al   o El e c tr i c a l   an d   C o m p u te r   En gi n e e r i n g   (I JEC E )   V o l .   15 ,   N o .   4 A ugus t   20 25 ,   pp .   4259 ~ 4267   IS S N :   2088 - 8708 ,   D O I :   10. 1 1591 / i j e c e . v 15 i 4 . pp 4259 - 4267             4259       Jou r n al   h o m e pa ge ht t p: / / i j e c e . i ae s c or e . c om   S y n c h r o n i z e d   t r a n s f o r m - a g g r e g a t e   m o d e l   f o r   b i g   d a t a   a n a l y t i c t o w a r d s   i n   d i st r i b u t e d   c l o u d   e c o s y st e m       R aje s h w ar i   D e m b al a 1 ,   K av ya  A n an th ap ad m an ab h a 2 ,   S h as h an k   D h an an jay a 1     1 D e p a rt m e n t   o f   I n fo r m a t i o n   S c i e n c e   a n d   E n g i n e e r i n g ,   T h e   N a t i o n a l   I n s t i t u t e   o f   E n g i n e e ri n g ,   M y s u ru ,   I n d i a   2 D e p a rt m e n t   o f   E l e c t ro n i c s   a n d   C o m m u n i c a t i o n   E n g i n e e r i n g ,   V i d y a v a rd h a k a   Co l l e g e   o f   E n g i n e e ri n g ,   M y s u ru ,   I n d i a       A r ti c l e   I n fo     A B S TR A C T   Ar t i c l e   h i s t or y :   R e c e i v e O c t   2,   2024   R e v i s e M a 29,   20 25   A c c e pt e M a y   24,   20 25       T he   m a s s i v e l y   g e ne r a t e da t a   f r o m   v a r i o us   t e c hno l o g i c a l l y   a dv a nc e d   a ppl i c a t i o ns   ho s t e d   i n   t he   c l o ud   a n d   i nt e r n e t   of   t h i ng s   ( I o T )   i n   pr e s e nt   t i m e s   c a l l s   f o r   e f f e c t i v e   m a n a g e m e nt   t o w a r ds   ba l a nc i ng   t h e   de m a n ds   o f   bo t h   s e r v i c e   pr o v i de r s   a nd   us e r s .   T he   c o nv e nt i o na l   u s a g e   o f   di s t r i bu t e d   f r a m e w o r ks   f o r   s uc b i g   da t a   m a n a g e m e nt   i s   w i t ne s s e w i t v a r i o us   o ngo i ng   c ha l l e ng e s .   H e nc e ,   t h i s   m a nu s c r i p t   pr e s e n t s   a   no v e l   a na l y t i c a l   f r a m e w o r f o r   bi g   da t a   t ha t   c a o f f e r   r e duc e c o s t   a nd  r e du c e t i m e   de m a nd e t o   e v a l ua t e   t h e   di s t r i bu t e bi g   da t a   f r o m   m ul t i pl e   da t a   po i nt s   i n   t he   c l o ud   i a n   o pt i m a l   w a y .   T he   c o r e   i de o l o gy   o f   t hi s   f r a m e w o r k   i s   t o   g a i n   a   s y nc hr o ni z e o pt i m a l i t y   f o r   c o s t   a n d   t i m e   f o r   e xe c u t i ng   a   t a s k   d e m a nde d   f o r   bi g   da t a   a n a l y t i c s   c o m pl y i ng   w i t h   t he   c o ns t r a i n t s   a s s o c i a t e w i t h   t a s k   de a d l i ne .   T he   p r o po s e f r a m e w o r k   i s   c a p a b l e   o f   f i ne - t u ni ng   t h e   p o s i t i o ni ng   o f   t a s o pe r a t i o us i ng   t r a n s f o r m   a nd  a g g r e g a t e   s t r a t e gy   t o   e xhi bi t   37 %   r e duc e d   de l a y ,   41 %   e f f i c i e n t   t a s k   c o m pl e t i o pe r f o r m a nc e ,   a nd   28 %   r e d uc e d   e xe c ut i o t i m e   i c o nt r a s t   t o   e x i s t i ng   f r a m e w o r k s .   Ke y w or d s :   B i da t a   Cl o ud   Int e rn e t - of - t h i n gs   O pt i m a l i t y   T a s k   T hi s   i s   an   ope n   ac c e s s   ar t i c l e   u nde r   t he   C C   B Y - SA   l i c e ns e .     Cor r e s pon di n g   Au t h or :   R a j e s h w a ri   D e m b a l a   D e pa rt m e n t   o f   In f o r m a t i o n   S c i e n c e   a n d   E ngi n e e r i n g ,   T h e   N a t i o na l   I n s t i t u t e   o f   E ngi n e e ri n g   M a n a n d a v a di   R o a d,   V i dy a r a n y a pura ,   M y s ur u,   K a rna t a ka   57 0008 ,   I n d i a   E m a i l :   d rr a j e s h w a r i @ ni e . a c . i n       1.   I N TR O D U C TI O N   T h e   v a s t   c r e a t i o o f   da t a   f r o m   i n t e rn e t   o f   t h i ngs   (Io T )   a nd   c l o ud  a pp l i c a t i o n s   ha s   r e s ul t e d   i l a r ge   da t a   v o l um e s ,   n e c e s s i t a t i ng   t h e   us e   o f   e dge   c o m put i ng   t o   p r o c e s s   s o m e   da t a   b e fo r e   s e n d i n g   i t   t o   t h e   c l o ud  f o r   a n a l y s i s   [1] .   S t r e a m i ng  a na l y t i c s   a r e   us e t o   m a na ge   r e a l - t i m e   da t a   o n   t h e   c l o ud.   T hi s   d a t a   c o n t r i b ut e s   t o   t h e   de ve l o pm e n t   o f   s m a rt   c i t i e s ,   h e a l t h c a r e ,   a n m a nuf a c t uri n g ,   a s   w e l l   a s   t h e   b i da t a   i de a ,   w hi c h   i n v o l v e s   t h e   i n ge s t i o o f   da t a   v i a   s t r e a m   a n b a t c p r o c e s s i n g   [2 ] [4] .   D a t a   l a ke s   a n d   r e l a t i o n a l   d a t a b a s e s   c o n t a i m a s s i v e   a m o u n t s   o f   da t a   f o r   a dv a n c e p r o c e s s i n a nd  a na l y s i s .   B i da t a   a na l y t i c s   us e s   a   v a r i e t y   of   m e t h o do l o gi e s ,   i n c l udi ng  de s c r i pt i v e ,   di a g n o s t i c ,   p r e d i c t i v e ,   a n d   p r e s c r i p t i v e   a n a l y s i s ,   a s   w e l l   a s   t e xt ,   g ra p h,   a nd  s pa t i a l   a n a l y s i s   [5] [10] .   B i g   d a t a   i s   c o m m o n l y   p r o c e s s e us i n g   d i s t ri b ut e f ra m e w o r ks   l i ke   H a do o a n d   M a pR e duc e .   H a doo i s   c o s t - e ff e c t i v e ,   i n t e r a c t s   w e l l   w i t e c o s y s t e m s ,   a n d   p r o v i de s   f a ul t   t o l e r a n c e ,   h o w e ve r   i t   s uf fe r s   f r o m   l a t e n c y   a n d   r e s o ur c e   de pe nde n c y .   M a pR e duc e   pr o v i de s   e ff i c i e n t   p a r a l l e l   c o m put a t i o n ,   s c a l a b i l i t y ,   a nd  f a ul t   t o l e ra n c e ;   h o w e ve r ,   i t   s uf fe r s   f r o m   l a t e nc y   c a us e by   b a t c h   p r o c e s s i n a nd  d i f f i c ul t i e s   i n   m ul t i t e na n t   c l o ud   s y s t e m s .   D e s pi t e   t h e s e   i s s ue s ,   b o t h   f r a m e w o r ks   a r e   f r e que nt l y   us e f o r   b i g   d a t a   a na l y t i c s ,   w i t h   e f fo r t s   u nde r w a y   t o   i n c r e a s e   s c a l a b i l i t y   a n d   f a ul t   t o l e r a n c e .   D i s t ri b ut e f ra m e w o r ks   i n c r e a s e   da t a   pr o c e s s i n s pe e t hr o ug h   p a r a l l e l   p r o c e s s i n g,   b ut   a l s o   e nt a i l   d i f f i c ul t i e s   i n   c o n f i gu ra t i o n,   m a i n t e n a n c e ,   a nd  m o n i t o ri n g,   po t e nt i a l l y   l e a di n t o   h i g h e r e s o ur c e   ut i l i z a t i o a n de l a y   [11] [15] .   Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2088 - 8708   Int   J   E l e c   &   Co m E n g ,   V o l .   15 ,   N o .   4 A ugus t   20 25 :   425 9 - 4267   4260   T h e   r e l a t e w o r k   h a s   b e e n   s t u di e d   t o   e xt ra c t   m o r e   i n s i g ht s   i n t o   e xi t i n g   f ra m e w o r ks   us e f o r   m a na gi ng  b i g   da t a   a n a l y t i c a l   a p pl i c a t i o n s   i c l o ud.   T h e   w o r p r e s e nt e by   H us s a i n   e t   a l .   [16]   ha v e   us e d   A pa c h e   H a do o t ow a r ds   i m p r o v i n g   t h e   b e t t e f o r m   o f   a n a l y s i s   o n   m e di c a l   d a t a s e t .   A do pt i o o f   H a d o o a s   w e l l   a s   M a pR e duc e   w a s   n o t e i w o r p r e s e nt e by   K um a r   e t   a l .   [ 17]   e m p ha s i z i n g   o a dd r e s s i n g   i s s ue s   r e l a t e t o   r e s o ur c e   a l l o c a t i o t o   a c c o m pl i s h   r e duc e pr o c e s s i ng  t i m e .   M a pR e duc e   h a s   a l s o   b e e n   c o n s i de r e d   t o w a r ds   f i n e t u n i ng   dy n a m i c   t a s k   a s   n o t e d   i w o r o f   H ua n g   e t   al .   [18 ]   f o a d d r e s s i ng   t h e   de g r a de pe r f o r m a n c e   o f   e xi s t i n c l o ud  p l a t f o r m s .   A z e r o ua l   a n d   N i k i fo r o v a   [19]   ha v e   us e A pa c h e   S pa r a l o n w i t h   m a c h i n e   l e a rn i ng  l i b ra r i e s   t o   s e c ur e   t h e   da t a .   D e pl oy m e n t   o f   A pa c h e   F l i n k   i s   w i t n e s s e i n   m o de l   de ve l o pe d   by   R a n k   e t   a l .   [20]   i o r de t o   i m p r o v e   t h e   e ff i c i e n c y   of   t a s a n d   p r o c e s s o r   w h i l e   p r o c e s s i n s t r e a m s   of  i n c o m i ng  da t a .   L i e t   a l .   [ 21 ]   h a v e   us e A p a c h e   B e a m   i o r de t o   de v e l o a   pa ra l l e l   c o m put i n g   m o de l   f o r   s uppo r t i ng   a na l y s i s   of   b i da t a .   T h e   m o de l   ha s   a l s o   us e pa r t i c l e   s w a rm   o pt i m i z a t i o f o r   i m p r o v i ng  upo t h e   o pe r a t i o n   o f   M a pR e duc e   fo r   c o n t r o l l i n g   t h e   d i m e n s i o n a l   c o m pl e xi t y .   In v e s t i ga t i o t o w a r ds   A p a c h e   T e z ,   w h i c i s   a n   a l t e rna t i v e   M a pR e duc e   pl a t f o r m   o pe ra t i n o f a b r i c   o f   H a d o o p,   h a s   b e e n   c a rr i e o ut   by   P a rk  e t   a l .   [22]   c o n s i de r i n g   a   us e - c a s e   of   m o n i t o r i ng  d a t a   l a ke .   B a r t o l i ni   a n d   P a t e l l a   [23]   h a v e   i n v e s t i ga t e d   us a ge   o f   A pa c h e   S a m z a   l e a di ng  t o   de ve l o pm e n t   o f   a   m i d dl e w a r e   m o dul e   f o r   a na l y z i ng  h e a v i e f i l e s   l i ke   m ul t i m e di a .   M uc h e n j e   a n S e pp ä n e n   [24 ]   ha v e   pr e s e nt e di s c us s i o n   a b o ut   t h e   s ui t a b i l i t y   of   b i da t a   a n a l y t i c s   t ow a r v a r i e b us i n e s s   s c o r e s   us i ng  a   m a t ri x - b a s e m o de l l i n g   t o w a r ds   e xp l a i n i ng  t h e   i n t e ra c t i o o t a s k.   J i n g   a n d   D a [25]   ha v e   p r e s e n t e d   a   c e n t ra l i z e d   s c h e d ul e de s i g t ha t   i s   c l a i m e t o   pe r f o r m   h i g h - e n da t a   t r a n s m i s s i o n   a l o ng  w i t pl a c e m e nt   o f   t a s k.   A f t e r   r e v i e w i n g   t h e   e xi s t i n g   r e l a t e w o r k,   f o l l ow i n r e s e ar c i s s ue s   h a v e   b e e n   i de n t i f i e v i z .   i )   i t   i s   n o t e t ha t   M a pR e duc e   i s   o n e   o f   t h e   f r e que nt l y   a do pt e a ppr o a c h   w h i l e   i t   ha s   s t i l l   a n   o pe n - e n de d   i s s ue s   r e l a t e d   t o   u n i f o r m   pe r f o r m a n c e   o f   di f f e r e n t   t y pe s   of   ha r dw a re   i e xt e n s i v e   d i s t r i b ut e d   c l o ud  e n v i r o nm e nt   a nd  Io T ,   i i t h e   m e c ha n i s m   o f   s c h e dul i n t h e   t a s du r i ng  a na l y t i c a l   o pe r a t i o n   i s   a l s o   c o n t r o l l e by   v a r i a b l e   r e s o ur c e   c o s t ,   w hi c ha s   n o t   b e e n   a n a l y z e i n   e xi s t i n g   s y s t e m ,   i i i )   e xi s t i n g   s t ud i e s   w i t o pe n - s o ur c e   di s t r i b ut e f ra m e w o r i s   f o un d   n o t   t o   c o n s i de r   i n f l ue n c e   o di f f e r e n c e s   i r e s o ur c e s   o n   m u l t i pl e   po s i t i o n   o da t a   po i n t s ,   a nd  i v E x i s t i ng  s c h e du l e r   de s i g n   i s   w i t n e s s e t o   e v a l ua t e   t i m e   t o w a r ds   t a s e xe c ut i o n   i n   o r de r   t c a t e up   t h e   i n c o m i n g   r e que s t   t o   t h e   o pt i m a l   s e r v e w i t h o ut   a n y   c o n s i de r a t i o o f   c o n s t r a i n t s   a s s o c i a t e w i t t h i s   s c h e dul i n g .   H e n c e ,   i t   i s   n e c e s s a r y   t o   c o n s i de v a r i a b i l i t y   o f   r e gi o n s   o f   da t a   po i nt s   i o r de t o   i m p r o v e   t h e   r e l a y i n o f   b i da t a   a na l y t i c a l   s e r v i c e s   a n d   i t s   a v a i l a b i l i t y   i a   m uc h   c o s t - e ffe c t i ve   m a nn e r.     T h e   a b o ve - m e n t i o n e i de n t i f i e r e s e a r c h   p r o b l e m   i s   a dd re s s e i p r o po s e s y s t e m   by   a   n o v e l   a n a l y t i c a l   m o de l   t ha t   a i m s   f o r   l e v e r a g i n g   b i d a t a   a n a l y t i c a l   s e r v i c e s   a n d   a v a i l a b i l i t y   t o   us e r   i n   c o s t - e ff e c t i ve   m a nn e o n   di s t ri b ut e c l o ud  e c o s y s t e m .   T h e   v a l ue - a d de c o n t ri b ut i o o f   t h e   s t udy   a r e   a s   f o l l ow s :   i t h e   pr o po s e s y s t e m   i nt r o duc e s   a   n e w   a na l y t i c a l   f ra m e w o r w hi c h   w o r k s   o n   b a s i s   o f   t r a n s f o r m   a n a gg r e ga t e   c o n s i de r i ng   v a ri a b i l i t y   a t t r i b ut e s   o f   b o t h   c o s t   a nd  r e s o ur c e s ,   i i )   a   n o v e l   m i n i m i z a t i o a l go r i t hm   ha s   b e e n   pr e s e nt e t o   c o n t r o l   t h e   c o s t   a n t i m e   a s s o c i a t e t o   c o m pl y   w i t h   t h e   de f i n e de a d l i n e   o v e r   di s t ri b ut e c l o ud   pl a t f o r m s ,   a nd   i i i )   t o   m e c h a ni z e   a   p r o pe s y n c hr o n i z a t i o b e t w e e n   t i m e   a n d   c o s t   i o r de t o   o f fe r   c o n s i s t e nt   pe r f o r m a n c e   de l i v e r y   w h i l e   pe r f o r m i ng  da t a   a na l y t i c a l   o pe ra t i o n.       2.   M ET H O D   T h e   p r i m e   pu r po s e   of   t h e   p r o pos e s t ud y   i s   t o   pr e s e n t   a   s i m pl i f i e a n y e t   n o ve l   fo r m   o f   a n a l y t i c a l   f r a m e w o r t h a t   c a n   l e ve r a ge   t h e   b i da t a   a na l y t i c a l   t a s t o   be   h o s t e o n   m ul t i pl e   c l o ud  r e gi o n s .   T h e   p r i m e   i de a   i s   t o   offe r   f a s t e r   t a s e xe c ut i o n   a n d   r e duc e c o s t   of  da t a   t r a n s f e r   t ow a r s t r e a m s   o f   b i da t a .   T h e   a r c hi t e c t ur e   of   pr o p o s e m e t h o i s   s h ow n   i n   F i gu r e   1.   A c c o r di n t o   F i gur e   1,   t h e   i n c o m i n s t r e a m   o f   b i g   da t a   i s   s ubj e c t e t o   a   s of t w a r e   f r a m e w o r pe r fo r m i n t ra n s fo r m   a n a gg r e ga t e   t a s k.   D ur i n t r a n s fo r m   s t a ge ,   t h e   i n put   s t r e a m   i s   p r o c e s s e r e s ul t i n i n   a n   i n t e r m e di a t e   i n f o r m a t i o n   w h e r e   t h e   i n c o m i n b i da t a   s t r e a m   i s   di v i de i n t o   s m a l l e r   p a c ke t s   a n a r e   s ubj e c t e t o   pa r a l l e l   pr o c e s s i n g.   O b t a i n e da t a   a r e   t h e   r e a rr a n ge c o n s i de r i n g   i n t e r m e di a t e   da t a   a n i n put   d a t a .   D u r i n g   a gg re ga t e   s t a ge ,   a l l   t h e s e   pr o c e s s e r e a rr a n ge da t a   g e n e r a t e f i n a l   o ut c o m e .   T h e   f i r s t   pa r t   o f   t h e   a r c hi t e c t ur e   i s   r e l a t e t o   c o m put a t i o n   of   c os t   a s s oc i a t e w i t h   fo r w a r di n t h e   da t a   du r i n g   da t a   a na l y t i c a l   o p e r a t i o n   f o l l ow e by   c o m put a t i o n   o f   c o m pl e t i o n   t i m e   c o n s i de r i n g   t h e i r e s pe c t i v e   i n v o l ve dur a t i o n.   T h e   p r o pos e s c h e m e   a l s o   i nt r o duc e s   a l go r i t h m   t o w a r ds   m i n i m i z i n c o s t ,   t i m e ,   a n o pt i m i z e s   t h e   e f fe c t i ve   c os t   s y n c hr o n i z a t i o b e t w e e n   c os t   a n d   t i m e   a t t r i b ut e s .   T hi s   a r c h i t e c t ur e   c o n t ri b ut e s   t o   e n s ur e   h i g h e r   de gr e e   of   a v a i l a b i l i t y   of   a n   e n r i c h e qua l i t y   a n a l y z e da t a   w h i c h   c a n   b e   a c c e s s e w i t h   r e duc e de l a y ,   h i gh e t hr o ughput ,   m i ni m a l   r e s o ur c e   c o n s um pt i o n ,   a n f a s t e r   a c c o m pl i s h m e n t   o f   a n a l y t i c a l   t a s c o m put a t i o n   c o n s i de r i n m u l t i - s t a ge s   of   t r a n s f o r m   a n a gg r e ga t e   o p e r a t i o n   i nt r o duc e i n   t h e   f r a m e w o r k.   A pa r t   f r o m   t hi s ,   a r c h i t e c t ur e   a l s o   offe r s   a   f a ul t   t o l e r a n c e   pe r fo r m a n c e   w h e r e   n o n e   of   t h e   o n go i n a n a l y t i c a l   pr o c e s s i n w i l l   b e   e ve r   a f fe c t e d   i n   c a s e   of   a n y   a b n o r m a l   c i r c um s t a n c e   i c l o ud  e n v i r o n m e n t .     Evaluation Warning : The document was created with Spire.PDF for Python.
Int   J   E l e c   &   Co m E n g     IS S N :   2088 - 8708         Sy n c hr on i z e d   t r ans f or m - aggr e g at e   m od e l   f or   bi d at a   ana l y t i c s   t ow ar ds   i n     ( R aj e s hw ar i   D e m bal a )   4261       F i gu r e   1 .   A do pt e r e s e a r c h   m e t h o d       2. 1 .     S ys te m   i m p l e m e n ta ti o n   T h e   p r o po s e s c h e m e   p r e s e n t s   a u n c o n v e n t i o na l   d a t a   a na l y t i c a l   p r o c e s s   i c l o ud   w h e r e   a   di s t i n c t   fo r m   o f   po s i t i o n i n g   o f   r e que s t e t a s i s   c a rri e o ut .   T h e   pri m e   i de o l o g y   i s   t o   de t e rm i n e   t h e   num b e o t r a n s f o r m e t a s k   a nd  a gg r e g a t e   t a s k   r e qui r e t o   b e   po s i t i o n e a t   e a c l o c a t i o o f   c l o ud  e n v i r o n m e nt   t h e r e by   a s s i s t i n g   t o w a r ds   r e a di n g   t h e   da t a   by   t h e   a s s i g n e d   t a s k   i e f fe c t i v e   w a y .   T h e   p r o po s e s c h e m e   i m pl e m e nt s   a   c os t - b a s e c o m put a t i o n   t ha t   t a r ge t s   t o   o pt i m i z e   c o s t   a n du ra t i o n   o f   c o m pl e t i o n   o f   t a s k.   T h e   d i s c us s i o n   o s y s t e m   i m pl e m e nt a t i o i s   a s   f o l l ow s :     2. 1 . 1.   I m p l e m e n te d   o p ti m i z at i o n   p r i n c i p l e   T h e   p r o po s e s y s t e m   i m p l e m e n t s   t w o   di s c r e t e   a l go r i t hm s   w hi c a r e   r e s po n s i b l e   f o r   c o m put i n g   c o s t   a n r e duc e   t h e   o v e r a l l   c o s t   a s s o c i a t e w i t h   c o m pl e t i o n   o f   o n go i n g   t a s f o r   a   de f i n e s e t   o f   de a dl i n e s .   T h e   f i r s t   a l go r i t hm   t a r ge t s   t o w a r ds   e v a l u a t i o n   o f   c o s t   w h i c h   i s   a l s o   e xt e n de t o w a r ds   t i m e   e v a l ua t i o a l o n g   w i t o pt i m a l   pe r f o r m a n c e .   T h e   s e c o n a l go ri t hm   f urt h e o pt i m i z e s   t h e   o v e r a l l   pe r f o r m a n c e   b y   a dd r e s s i ng   t h e   po s s i b l e   t r a de o ff   be t w e e n   t h e m   o dy n a m i c   e n v i r o n m e n t .   T he   a l go ri t hm s   a r e   d i s c us s e a s   f o l l ow s :     A l go r i t h m   f o r   c o s t   e v a l ua t i o n   Input:       Output:     Start   1 .   = 1 ( ,  ,  )   2 .   = 2 ( , )   3 .   = 3 ( , , )   4 .   ( 1 , 2 ) = 4 ( , )   End     T h e   d i s c us s i o n   o f   a l go ri t hm i c   s t e a r e   a s   f o l l ow s :   T h e   a l g o r i t hm   t a ke s   t h e   i n p ut   o f   G l   (ge n e ra t e d   da t a   a t   l   l o c a t i o n),   i dp   ( i n s t a nt a n e o us   da t a   p r o po r t i o n ) ,   d tr   ( du ra t i o n   o f   t r a n s f o r m ) ,   d ag g   (dur a t i o o f   a gg r e ga t e ) ,   α tr   ( da t a   f o r   t ra n s f o r m ) ,   a n d   α ag g   (da t a   f o r   a gg r e ga t e t h a t   upo p r o c e s s i n y i e l ds   β  (c o s t   m e t r i c ).   T h e   a l go ri t hm   i n i t i a l l y   i m pl e m e n t s   a   f un c t i o n   f 1 ( x c o n s i de r i ng  t h e   i nput   a r gu m e nt   o f   G l d tr ,   a nd  α tr   f o r   r e duc i n g   t h e   c o s t   of   t r a n s f o r m   o pe r a t i o n   w h i l e   t h e   t r a n s f o r m e d a t a   i s   s t o r e i n   γ   (L i n e - 1) .   F u rt h e r ,   a n o t h e r   e xpl i c i t   f un c t i o n   f 2 ( x i s   de v e l o p e t ha t   c a n   o b t a i n   a l l   t h e   p r o c e s s i ng  i n t e rm e di a t e   i n f o r m a t i o n   w i t h   r e s pe c t   t o   γ   a n i dp   (L i n e - 2),   w hi l e   t h e   o ut c o m e   i s   r e s t o r e w i t hi ψ   b uff e i c l o ud.   I t   s h o ul d   b e   n o t e t ha t   v a ri a b l e   i dp   r e p r e s e n t s   p r o po r t i o o f   a l l   p r o c e s s e i n t e rm e di a t e   d a t a   di v i de b y   a l l   i nput   d a t a .   F u rt h e r ,   a n o t h e f un c t i o f 3 ( x i s   i m p l e m e nt e i n   o r de t o   m i ni m i z e   t h e   c o s t   of   a gg r e ga t e   o pe r a t i o n   w i t r e s pe c t   t o   n e w l y   ob t a i n e ψ   a n d ag g α a g g   w h i l e   t h e   d a t a   i s   s t o r e d   i π   m a t r i (L i n e - 3) .   I t   w i l l   m e a t ha t   du ri n g   t h e   t r a n s f o r m   o pe r a t i o n,   t h e   a l go ri t hm   o b t a i n s   a l l   s e gm e nt   o f   da t a   pe rt a i n i ng  t o   a gg re ga t e   t a s π   t ha t   a r e   a s s i g n e t o   e a c h   r e g i o f o r   a c c e s s i b i l i t y .   F i n a l l y ,   a n o t h e f un c t i o f 4 ( x )   i s   i m pl e m e n t e d   w h i c i s   m e a nt   t o   o b t a i i n f o r m a t i o o f   t i m e   a nd  c os t   a s s o c i a t e w i t h   γ   a nd  π   w hi c h   i s   r e t a i n e i β 1 m a t ri f o r   t i m e   a n β 2 m a t ri f o r   c o s t   r e s pe c t i v e l y     (L i n e - 4) .   T h e   v a r i a b l e   γ   a n d   π   r e p r e s e nt s   da t a   a t   s pe c i f i c   r e gi o w i t r e s pe c t   t o   c o s t   a n d   t i m e   r e s pe c t i v e l y .   It   s h o ul b e   n o t e t ha t   e x a c t l y   s a m e   a l go ri t hm i c   s t ruc t u r e   c a n   b e   a l s o   us e f o r   m i ni m i z i n t h e   t i m e   a t t r i b ut e   t o o .       Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2088 - 8708   Int   J   E l e c   &   Co m E n g ,   V o l .   15 ,   N o .   4 A ugus t   20 25 :   425 9 - 4267   4262   A l go r i t h m   f o r   t i m e   e v a l ua t i o n   Input:       Output:     Start   1 .   1 = 1 ( ,  ,  )   2 .   = 2 ( 1 , )   3 .   2 = 3 ( , , )   4 .   ( 3 , 4 ) = 4 ( 1 , 2 )   End     It   c a b e   s e e n   f r o m   a b ov e   a l go ri t hm i c   s t e ps   t ha t   a l l   t h e   l i n e s   o f   e xe c ut i o n   a r e   e x a c t l y   s i m i l a t o   t h a t   of   pri o o n e   o n l y   w i t f e w   di ff e r e n c e s   i us a ge   o f   v a r i a b l e :   f un c t i o f 1t ( x )   i s   us e f o o b t a i ni n g   r e duc e t r a n s f o r m e d   t i m e   w hi c h   i s   t h e s t o r e d   i n e w   m a t ri x   γ r e p re s e n t i n g   d a t a   (L i n e - 1).   F u rt h e r ,   f un c t i o f 3t ( x )   i s   m e a n t   f o r   r e duc i ng  a gg r e ga t e   t i m e   w h i l e   t h e   o ut c o m e   i s   s t o re i n   m a t r i x   π (L i n e - 3) .   H e n c e   f i r s t   a l go r i t hm   i s   m e a n t   f o r   c o s t   c o m put a t i o w h i l e   s e c o n a l go r i t hm   i s   m e a n t   f o r   t i m e   c a l c ul a t i o n .   T h e   o b j e c t i v e   f un c t i o de ve l o pe fo r   f ur t h e o pt i m i z a t i o i s   r e p r e s e nt e a s   (1) ,   (2) :       1 =  (  +  )     (1)       1 =  ( ra + ag g )     (2)     A c c o r di n g   (1) ,   t h e   p r o po s e s y s t e m   c o m put e s   m i ni m a l   c o s t   ψ w i t r e s pe c t   t o   i n c o m i n g   t ra f f i c   l o a (  a nd  t ra n s f o r m   o pe ra t i o (  i s uc a   w a y   t ha t   ge n e ra t e da t a   a t   l   l o c a t i o G l   i s   e qui v a l e n t   t s um m a t i o o f   γ qua n t i t y   of   t ra f f i c   da t a   t ha t   a r e   f o r w a r de d   t o   de s t i na t i o l o c a t i o n   f r o m   s pe c i f i c   da t a   l o c a t i o i n   c l o ud  i . e . G l = Σ γ f .   T h e   e q u a t i o n   (2 s t a t e s   t ha t   s y s t e m   t a rg e t s   t o   m i ni m i z e   t h e   c um u l a t i v e   c o s t   ψ c o m put e d   by   s um m a t i o n   o f   c o s t   t ow a r ds   r e a rr a ngi n g   t h e   da t a   ( ra a nd  c os t   t o w a r ds   a gg r e ga t e   t a s ( ag g s uc h   t ha t   s um m a t i o n   o f   π   i . e . ,   s e gm e n t   o f   a ggr e g a t e   t a s c a rri e o ut   a t   de s t i n a t i o n   l o c a t i o n   i s   e qui v a l e nt   t o   u n i t y   i . e . Σπ = 1.   I t   c a b e   n o t e t ha t   a b o ve   t w o   a l go r i t h m s   c a s uc c e s s f ul l y   o pt i m i z e   b o t c o s t   a s   w e l l   a s   t i m e   us i n g   i t s   t r a n s f o r m - a gg r e ga t e   f r a m e w o r t o   c a rr y   o ut   da t a   a na l y t i c a l   o pe r a t i o n   w i t h   a   s o l e   m o t i v e   of   c o n t r o l l i n t h e   c os t   o f   t a s c o m pl e t i o a s s o c i a t e t o   h i g hl y   di s t r i b ut e c l o ud   a na l y t i c a l   n e t w o r w i t a   de f i n e d   c o n s t r a i n t     2. 1 . 2.   O p t i m i z at i o n   to w ar d s   e ff e c t i v e   c o s s yn c h r o n i z at i o n   T h e   f i r s t   a n d   s e c o n a l go r i t hm   i s   n o t   m e a nt   t o   pe r f o rm   s y n c hr o n i z e t a s k   w i t e a c o t h e r.   T h e r e f o r e ,   p r o po s e s y s t e m   i m pl e m e nt s   t hi r d   a l go r i t h m   w h i c h   i s   m e a nt   t o w a r ds   a c c o m pl i s h i ng  a   b e t t e r   f o r m   of   s y n c hr o n i z a t i o b e t w e e n   t a s k   c um u l a t i v e   c o s t   a nd  c o m pl e t i o t i m e .   A c c o r di n g   t o   t hi s   a l go r i t hm ,   t h e   c um ul a t i v e   c o s t   i s   o pt i m i z e d   by   pr o vo ki n g   t h e   p r i o r   a l go r i t h m s   t o w a r ds   c o m put i n g   r e duc e c o s t   o pe r a t i o n   f o r   s e l e c t i n a   c o s t - e ff e c t i v e   w i r e l e s s   c h a nn e l   i o r de r   t o   fo r w a rd  t h e   d a t a   a s   w e l l   a s   i n   o rde t o   pe r f o r m   c h e a pe c os t   c o m pl e t i o w i t r e s pe c t   t o   e a c s l o t .   T h e   s y s t e m   a t t e m p t s   t o   o pt i m i z e   t h e   t i m e   f o c o m pl e t i o o f   t a s k   by   fo r w a r d i n d a t a   t o   t h i s   w i r e l e s s   c h a nn e l   w i t h   i n c r e a s e c ha nn e l   c a p a c i t y   i o r de r   t o   e n s u r e   r e duc e t i m e   i n v o l ve m e n t   w h i l e   s uf f i c i e n t   r e s o ur c e s   a r e   ut i l i z e d   t o   pe r f o r m   c o m put a t i o o f   t a s k   o t h e s e   r e gi o n s .   T h e   a l go ri t hm i c   o pe r a t i o c a rr i e d   o ut   o f   t h i s   pu r po s e   i s   a s   s h o w n   b e l ow :     A l go r i t h m   f o r   o pt i m i z i ng  e f fe c t i ve   c os t   s y n c hr o n i z a t i o n   Input:      Output:   ,   Start   1 .    1 = a r g  ( )   2 .    2 = a r g ( )   3 .      3 >   4 .         ( ) ;   5 .      1 <   6 .              ( , )   7 .      >   8 .               , 2 = 5 ( )   γ n π 2n = f 5 ( λ )   9 .               = 6 ( , 2 )     1 0 .   = , = 2   End     A c c o r di n g   t o   t h e   a b o ve - m e n t i o n e o pe ra t i o n a l   s t e ps ,   t h e   a l go r i t hm   t a ke s   t h e   i n pu t   a r g um e n t   o f   G l   (ge n e r a t e d a t a   a t   l   l o c a t i o n),   i dp   (i n s t a nt a n e o us   d a t a   p r o po rt i o n ),   d tr   (du ra t i o o f   t ra n s f o r m ) ,   d ag g   (dur a t i o n   o a gg r e ga t e ),   a n α ag g   (da t a   f o r   a gg r e ga t e i n   o rde r   t o   ge n e ra t e   a o ut c o m e   of   γ (qua nt i t y   of   i n f o r m a t i o n   fo r w a r de t o   de s t i n a t i o r e gi o i n   t ra n s f o r m   s t a ge   f r o m   s pe c i f i c   l oc a t i o n ) ,   π (s e gm e nt   o f   a gg r e ga t e   t a s k   Evaluation Warning : The document was created with Spire.PDF for Python.
Int   J   E l e c   &   Co m E n g     IS S N :   2088 - 8708         Sy n c hr on i z e d   t r ans f or m - aggr e g at e   m od e l   f or   bi d at a   ana l y t i c s   t ow ar ds   i n     ( R aj e s hw ar i   D e m bal a )   4263   o pe r a t e a t   de s t i n a t i o n   r e gi o n ).   T h e   a l go r i t h m   i ni t i a l l y   e xe c ut e s   a   m e t h o a r g m i n dur ()  i n   o rde t o   m i n i m i z e   t h e   t i m e   f o l l o w e by   c o n s t r uc t i n a   m a t ri Mat 1   w hi c r e t a i n s   γ (qu a n t i t y   o f   i n f o r m a t i o f o r w a r de t o   de s t i na t i o r e gi o i t ra n s f o r m   s t a ge   f r o m   s pe c i f i c   l o c a t i o w i t r e s pe c t   t o   c o m put e d   t i m e ),   π 2   (s e gm e nt   o a gg r e ga t e   t a s o pe ra t e a t   de s t i na t i o n   r e g i o w i t h   r e s pe c t   t o   c o m put e t i m e ),   β 3 t   (t a s de a dl i n e   w i t h   r e s pe c t   t o   c o m put e d   t i m e ),   a nd  β 4t   (c o s t   of   s l o t   w i t h   r e s pe c t   t o   t i m e (L i n e - 1) .   S i m i l a c o m put a t i o i s   c a rri e o ut   by   i n t r o duc i n m e t h o a r g m i n c os ()  t o w a r ds   r e duc i n c o s t   w h e r e   c os t - b a s e a t t r i b ut e s   (s i m i l a r   t o   t h a t   o f   pr i o r   s t e i s   c o n s i de r e d)  a r e   s t o r e i n   m a t r i M at 2   (L i ne - 2) .   If   t h e   c o m put e de a d l i n e   o f   t a s k   β 3 t   i s   f o un t o   b e   l e s s   t h a c ut - o ff   de a dl i n e   β   (L i n e - 5),   t h e   o pe r a t i o n   b r e a k   a s   i t   f a i l s   t o   i de n t i fy   pos s i b l e   s o l ut i o n   (L i n e - 4) .   T h e   a l go ri t hm   f ur t h e c h e c ks   i f   de a dl i n e   o f   t a s k   w i t r e s pe c t   t o   c o s t   β 1 i s   f o un d   t o   b e   m o r e   t ha c ut - o f f   de a dl i n e   β  (L i n e - 5) ,   t h e   a l go r i t hm   r e t u rn s   t h e   c o m put e v a l ue   o f   γ  (qua n t i t y   of  i n f o r m a t i o f o r w a r de t o   de s t i n a t i o n   r e g i o n   i n   t r a n s f o r m   s t a ge   f r o m   s pe c i f i c   l o c a t i o w i t r e s pe c t   t o   c om put e d   c o s t a nd   π  (s e gm e n t   o f   a gg r e ga t e   t a s k   o pe r a t e a t   de s t i na t i o n   r e g i o n   w i t h   r e s pe c t   t o   c o m put e c o s t (L i n e - 6).   I n   t h e   c o n s e c ut i v e   s t e p,   t h e   a l go ri t hm   c o n s t r uc t s   t hr e e   b uff e r s   γ n ,   π 2n a nd   β n   w hi c a r e   a s s i g n e d   w i t n e w l y   c o m put e v a l ue s   o f   γ ,   π,   a n d   β 1 r e s pe c t i v e l y .   T h e   a l go r i t hm   c o n s e c ut i v e   c h e c ks   i f   v a l ue   of   n e w   de a dl i n e   β i s   f o un m o r e   t ha n   c ut - o ff  de a dl i n e   β   ( L i n e - 7) ,   t ha n   a   m e t h o f 5 ( x )   i s   e xe c ut e t ha t   p e r f o r m s   f i n e t u ni n o f   λ ,   a   f i n e t u n i ng  c o e f f i c i e n t   c o n f i gur e w i t s pe c i f i c   v a l ue   ( λ = 0. 001 )   w h i l e   t h e   o ut c o m e   i s   po s i t i o n e d   w i t h i γ a n π 2 n   (L i n e - 8) .   S i m i l a rl y ,   a n o t h e m e t h o f 6 ( x )   i s   us e f o r   o b t a i n i ng   t i m e   i n f o r m a t i o w i t r e s pe c t   t o   γ a n d   π 2n   w h i l e   t h e   o ut c o m e   i s   s ub s t i t u t e i n e w   de a dl i n e   a t t r i b ut e   β (L i n e - 9) .   T h e   f i n a l   s c o r e   o f   γ f   an d   π i s   f i n a l l y   o b t a i n e d   f r o m   e xt ra c t i n g   t h e   u pda t e v a l ue s   o f   γ a n d   π 2 n   r e s pe c t i v e l y   (L i n e - 10) .   F u r t h e r,   t h e   i m pl e m e n t a t i o o f   t h e   f i n e t u n i ng  c o e ff i c i e n t   (F T C)  us i n g   f un c t i o n   f 5 ( x)  i s   e m p i r i c a l l y   c a r ri e o ut   a s   (3) :        =       1 . 2     (3)     In  t h e   e xp r e s s i o n   (3) ,   i t   c a b e   n o t e t ha t   p r o po s e s y s t e m   us e F T c o m pu t a t i o b a s e o n   t hr e e   a t t ri b ut e s   i . e . ,   γ n ,   A 1 ,   a nd  A 2 .   T h e   a t t r i b ut e   A 1   i s   e qu i v a l e nt   t o   di ff e r e n c e   of   γ  a n d   γ 1   i . e . ,   A 1 = ( γ - γ 1 )   w h i l e   t h e   a t t ri b ut e   A 2   i s   c o m put e a s   a   p r o duc t   o f   f i n e t u ni n g   c o e ff i c i e n t   λ   w i t h   s i m u l a t i o r o u n d   h   i . e . ,   A 2 = ( λ . h ) .   H ow e ve r ,   t hi s   e xp r e s s i o (3)   i s   o n l y   v a l i d   i f   γ > γ 1 .   H ow e v e r ,   fo r   v i c e - v e r s a   c o n di t i o ( i . e . ,   γ > γ 1 ) ,   f o l l o w i n i s   t h e   f o r m ul a t i o o f   F T a s   s h o w n   i e xpr e s s i o (4) ,      =   +   1 . 2   (4)     A   c l o s e r   l o o i nt o   t h e   t hi r d   a l go r i t hm   s h o w c a s e s   i t s   c a pa b i l i t y   t o   o pt i m i z e   t h e   c um u l a t i v e   c o s t   a s s o c i a t e w i t h   m e e t i n t h e   de a dl i n e   f o r   a l l   d i s t r i b ut e a n a l y t i c a l   t a s o n   c l o ud  c o n s i de ri n t i m e   a n d   c o s t .   H ow e ve r ,   a   r e a l - t i m e   a na l y t i c a l   t a s k   o f   b i da t a   c o n v e n t i o na l l y   c o n s i s t s   o f   di f f e r e n t   s t a ge s   o f   de pe n de n c i e s .   F urt h e rm o r e ,   t h e r e   i s   a   n e e t o   pe r f o r m   a gg r e g a t i o n   o f   a l l   t h e   u l t i m a t e   o ut c o m e s   of   s uc h   t a s f r o m   a l l   l o c a t i o n s   o f   c l o ud  a s   t h e   d a t a   i s   s t o r e d   di s pe r s e   f o r m   i m ul t i pl e   c l o ud   s t o ra ge   u ni t s .   T hi s   c a l l s   f o r   m o r e   e xt e n s i v e   c o s t   a s   w e l l   a s   m o r e   c o n s um pt i o n   o f   dura t i o n   i n   o rde r   t o   m e e t   t h e   de a d l i n e   o f   t a s c o m pl e t i o n .   T hi s   r e s e a r c c h a l l e n ge   i s   a d d r e s s e by   e ffe c t i ve l y   pl a nn i ng  f o f un c t i o n i ng  t h e   j o b s   i m u l t i s t a ge   f o r m .   A   c a r e f ul   ob s e r v a t i o n   o f   pr o po s e a l go r i t hm   a l s o   e xhi b i t s   t ha t   t h e r e   i s   a   r e duc t i o i i n f o r m a t i o n   s i z e   a s   t h e   c o m pl e t i o of   t a s k   p r o g r e s s e s .   H e n c e ,   t h e   p r o po s e a l go ri t hm   i s   f u r t h e m o r e   f i n e t u n e d   s o   t ha t   i t   c a a c c o m pl i s h e s   ov e r a l l   o pt i m i z e pe r f o r m a n c e   t o w a r ds   t h e   c o m pl e t i o o f   da t a   a na l y t i c a l   t a s k   o f   b i da t a   o v e r   c l o ud  e n v i r o n m e n t   i d i s t ri b ut e m a nn e r .   F o r   t h i s   pu rpo s e ,   t h e   p r o po s e s c h e m e   i ni t i a l l y   e v a l ua t e s   t h e   p l a t o w a r ds   po s i t i o ni n g   t h e   t a s k   r e l a t e t o   t r a n s f o r m   a nd  a gg r e ga t e   o n   a l l   t h e   r e gi o o f   a na l y t i c a l   da t a   po i nt s   i c l o ud.   I n   c a s e   o f   e xe c ut i o n   of  a n a l y t i c a l   t a s i n   s t a ge   w i s e ,   t h e   i n pu t   a rgum e n t s   a r e   ge n e ra t e by   t h e   c o m pl e t e j ob s   b e i n e xe c ut e i n   p r i o s t a ge   w h i l e   t h e   s i z e   o f   ge n e r a t e da t a   ke e ps   o n   m i ni m i z i n g   w i t h   e a c h   p r o gr e s s i v e   e xe c ut i o n .   I t   w i l l   e ve n t ua l l y   m e a t h e   p r o c e s s e a nd  a na l y z e da t a   s i z e   i s   v e r y   m uc m i ni m i z e d   i s i z e   i c o n t ra s t   t o   a c t ua l   s o ur c e   da t a .   H e n c e ,   a   s i n g l e   r e gi o o f   da t a   po i nt   i s   o pt e by   pr o po s e a l go ri t hm   w h e r e   a l l   t h e   ge n e ra t e d   da t a   i s   r e c e i ve fo l l ow e by   pl a nn e e xe c ut i o (o f   a l l   a l go r i t hm s i e v e r y   upc o m i ng  o pe ra t i o n a l   s t a ge s .   T hi s   s i g n i f i c a n t l y   c ur t a i n s   e xt e n s i v e   c o s t   a n t i m e   t o w a r ds   a n a l y t i c a l   d a t a   f o r w a r di ng.   H e n c e ,   t h e   s uc c e s s   f a c t o r   of  t h i s   a l go ri t hm   c o m pl e t e l y   de p e n ds   upo n   u n de r t a ki n g   a n   e v a l ua t i o n   t o   de t e rm i n e   t h e   c a r di na l i t y   of   o pe r a t i o n a l   s t a ge s   i n v o l ve i t a s k   e xe c ut i o o m u l t i pl e   r e gi o n s   o f   da t a   po i n t s   i c l o ud.   T h e   p r o po s e s c h e m e   c o m put e s   t h e   r e duc e c o s t   a s s o c i a t e w i t t a s e xe c ut i o n   a t   m ul t i p l e   da t a   po i nt   r e gi o n s   w h i l e   i t   e n ds   up   c h o o s i n t h e   t a s k   w h i c h   i s   c h a ra c t e r i z e by   m i n i m a l   c o s t .   H e n c e   fo l l ow i n g   a r e   t h e   s t e ps   o f   e xe c ut i o n   t o w a r ds   f i n e t u ni n t h e   a l go ri t hm :       T h e   a l go r i t h m   i n i t i a t e s   by   ob t a i n i ng   n u m b e r   o f   s t a ge s   i n v o l v e i c o m put a t i o n .   I n i t i a l l y ,   t h e   c o m pl e t e   s t a ge s   o f   t h e   o n go i n g   t a s k   a r e   c o m put e f o l l ow e by   c o m put a t i o n   o f   s t r a t e g y   t ow a r ds   po s i t i o ni n t h e   t a s k   a s   w e l l   a s   e v a l ua t i n g   t h e   a s s o c i a t e c o s t   f o r   a l l   t h e   s t a ge s .   Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2088 - 8708   Int   J   E l e c   &   Co m E n g ,   V o l .   15 ,   N o .   4 A ugus t   20 25 :   425 9 - 4267   4264     O n c e   t h e   c o m pl e t e   num b e o f   s t a ge s   a r e   f o un d ,   t h e   a l go ri t hm   s e l e c t s   s pe c i f i c   h   n u m b e r   o f   s i m u l a t i o r o u n ds   f o r   c o m put i n g   t h e   t a s f e a t u r e w i t m i n i m a l   c o s t .   It   w i l l   m e a n   t h a t   o ut   o f   a l l   t h e   t a s ks ,   t h e   a l go ri t hm   o nl y   s e l e c t s   t a s ks   w i t r e duc e c o s t   s a m pl e d   f o r   h th   n u m b e r   o f   i t e ra t i o n s   t o w a r ds   m u l t i pl e   da t a   po i n t s   i c l o ud.     A f t e r   t h e   m i ni m a l   c o s t   i s   de t e rm i n e d   i h th   r o un ds ,   t h e   a l go r i t h m   i de nt i f i e s   t h e   b e s t   s t r a t e gy   t o   po s i t i o i t s   t a s k.     T h e   p r o po s e a l go r i t hm   de t e r m i n e s   t h e   n u m b e o f   s t a ge s   a s s oc i a t e w i t ( h - 1)   di s t r i b ut e da t a   po i n t s   i c l o ud.   It   i s   po s s i b l e   t h a t   t h e   num b e r   o f   da t a   r e c o r de i n   e a c h   s t a ge   ke e ps   o n   r e duc i n i c o n t ra s t   t o   s i z e   of  s o ur c e   da t a .     T h e   f i r s t   a n d   s e c o n a l go r i t hm   t o w a r ds   m i n i m a l   c o s t   a n d   t i m e   c o n s um p t i o n   i s   f u r t h e c o m put e w i t t h e   upda t e d   v a l ue s   o f   da t a   w hi l e   s i m i l a c o n di t i o n a l   l o gi c   a s s o c i a t e d   t o   c o m pa ri n g   v a ri a b l e   ( β 3t   a n d   β n )   w i t h   c ut - o ff   ( β i s   c a rri e o ut   t o   o b t a i c o m pl i e d   o ut c o m e s .   T h e   e xe c ut i o o f   t h e   a l go ri t hm   i s   r e s um e d   t i l l   i t   m e e t s   t h e   f i na l l y   r e duc e c o s t   i o r de t o   r e p r e s e n t   i t s   a c c o m pl i s h e d   s t a t e   o f   c o n v e r gi n g .   H e n c e ,   t h e   p r o po s e d   s c h e m e   o f fe r s   a   v e r y   s i m p l i f i e a n d   y e t   qui t e   s o p h i s t i c a t e o pe r a t i o n   t o w a r ds   l e v e r a gi ng  a n a l y t i c a l   o pe ra t i o n   o f   b i da t a   a s s o c i a t e w i t h   d i s t r i b ut e e n v i r o n m e n t   o f   c l o ud.   T h e   n e xt   s e c t i o p r e s e nt s   di s c us s i o n   o f   t h e   o ut c o m e s   a c c o m pl i s h e f r o m   i m p l e m e nt a t i o n   o f   pr o po s e s t udy   m o de l .       3.   R ES U LT   T h e   p r o po s e s y s t e m   p r e s e n t s   a   n o v e l   f r a m e w o r t o w a r ds   l e ve r a gi ng   b i d a t a   a na l y t i c a l   o pe r a t i o a n d   h e n c e   i t   de m a nds   t o   b e   a s s e s s e o ve a   p l a nn e d   e n v i ro n m e n t   m a pp i n g   w i t n e a r - r e a l   w o r l d   s c e na r i o .   A pa r t   f r o m   t hi s ,   o w i n t o   t h e   n o v e l t y   of   n e w l y   i n t r o duc e f e a t u r e s   a s s o c i a t e w i t h   a n a l y t i c a l   da t a   po s i t i o n i ng  ov e r   m ul t i pl e   di s t r i b ut e d   da t a   po i n t s ,   t h e   p r o po s e m o de l   i s   r e qui r e d   t o   b e   s ub j e c t e t o   c o m pa ra t i v e   a n a l y s i s   w i t s i m i l a f o r m   o f   c o n v e n t i o na l   f ra m e w o r k.   F u r t h e r,   a   s t a n da rd  s e t   o f   pe r f o r m a n c e   m e t r i c   w i t u ni v e r s a l   a do pt i o i s   c h o s e n   t o   e v a l ua t e   t h e   e f fe c t i ve n e s s   of   pr e s e n t   m o de l .   T h e   f o l l ow i n g   a r e   m o r e   e l a b o r a t e   hi g h l i g ht s   of  t h e   a do pt e d   s t ra t e gy   of   a s s e s s m e n t   a n d   a c c o m pl i s h e d   s t udy   o ut c o m e s .     3. 1 .     A s s e s s m e n s tr at e gy   T h e   p r o po s e s y s t e m   i s   s c r i p t e i n   P y t h o n   e n v i r o nm e nt   c o n s i de ri n g   K a gg l e   da t a s e t   [26 ] .   T h e   d a t a s e t   c o n s i s t s   o f   t r a c e s   of   b i da t a   v a r i e f o r m   o f   goo gl e   c l us t e r ’s   t r a c e s   w i t h   e xc l us i v e   f i e l ds   a s s o c i a t e w i t h   ut i l i z e r e s o ur c e s ,   de c i s i o n   o f   s c h e dul i n g ,   a n d   s ub m i t t e j o b s .   It   a l s o   h a s   i n c l us i o n   o f   i n f o r m a t i o n   r e l a t e t o   t a s k   a l o n g   w i t r e s e r v a t i o o f   s ha r e r e s o ur c e s   a nd  us a g e   o f   CP U .   T h e   c ha nn e l   c a p a c i t y   c o n s i de r e i s     gi g a by t e s   pe r   s e c o n w i t 100  c o m pu t i n s l o t s   a n 0. 0 0 f i n e t u ni n c o e ff i c i e n t .   T h e   o ve r a l l   s i z e   o f   t h i s   da t a s e t   i s   a r o und  2 . t e ra by t e s .   T h e   o ut c o m e   of   t h e   s t u dy   ha s   b e e n   e v a l ua t e w i t h   r e s pe c t   t o   f o ur   t y pe s   of  pe r f o r m a n c e   pa ra m e t e r s   i . e . ,   i de l a y ,   i i )   c o s t   a s s o c i a t e w i t t a s k   c o m pl e t i o n,   i i )   t i m e   a s s o c i a t e w i t t a s c o m pl e t i o n ,   a n d   i v o v e r a l l   e xe c ut i o t i m e .   F u r t h e r,   t h e   p r o po s e s c h e m e   h a s   b e e n   c o m pa r e d   w i t h   e x i s t i n s of t w a r e   f ra m e w o r t ha t   i s   a   c u rr e nt   a do pt e i b o t r e s e a rc h   a n d   e nt e rp r i s e s   v i z .   A p a c h e   H a do o p,   A pa c h e   M a pR e duc e ,   A pa c h e   S pa r k ,   A p a c h e   F l i n k,   A pa c h e   B e a m ,   A pa c h e   T e z ,   a n A p a c h e   S a m z a .   Co n v e nt i o na l   s of t w a r e   f r a m e w o r ha s   b e e n   s ui t a b l y   f i n e t u n e t o   f i t   i n   u n i f o r m   t e s t b e w h e r e   da t a   f o r w a r d i n i s   c a rr i e o ut   f r o m   a na l y t i c a l   u ni t s   t o   c l o ud  d i s t r i b ut e da t a   s t o ra ge   u ni t s .     3. 2 .     A c c o m p l i s h e d   r e s u l ts   A s   t h e   c o r e   i m p l e m e n t a t i o n   o f   pr o po s e s t ud y   m o de l   i s   m a i n l y   a s s o c i a t e w i t h   m e e t i n g   t h e   de a dl i n e s   o f   t a s k   i n   c o s t   e f fe c t i ve   m a nn e r.   H e n c e ,   t h e   f i r s t   pe r f o r m a n c e - b a s e i n v e s t i ga t i o i s   c a rr i e d   o ut   t o w a r ds   c o s t   a s s o c i a t e w i t t a s k   c o m pl e t i o a s   s h o w n   i F i g u r e   3.   F o r e t a i ni n g   ge n e r a l i t y ,   t h e   c o s t   i s   r e p r e s e n t e d   i p r o b a b i l i t y   s c o r e   w h i l e   t h e   o ut c o m e   e ve n t ua l l y   s h ow s   pr o po s e s y s t e m   t o   i n c ur  m uc r e duc e c os t   i c o n t ra s t   t o   e xi s t i ng  f ra m e w o r ks .   F i gu r e   2(a s h o w c a s e   A pa c h e   S pa rk  t o   po s s e s s   r e duc e c os t   w h i l e   A p a c h e   B e a m   t o   o ffe r   i n c r e a s e c os t   i n   pe r s pe c t i v e   of   e xi s t i n g   f ra m e w o r ks .   A pa c h e   S pa rk  o ff e r i ng  b e t t e r   b a t c h   p r o c e s s i n o f   b i da t a   s t r e a m   w h i l e   i t   i s   s t i l l   s uf f e r i n f r o m   e xt e n s i v e   m e m o r y   c o n s um pt i o n.   E xe c ut i o n   w i t A pa c h e   B e a m   ha s   n e a r l y   s i m i l a r   b a t c h   a n s t r e a m i n c a p a b i l i t y   b ut   i t   ha s   a a dd i t i o n a l   l a y e r   o f   a b s t r a c t i o n   w h i c h   e xt e n s i v e l y   i n c r e a s e s   t h e   c o s t   w h i l e   a t t e m pt i ng  t o   c o m pl e t e   t h e   t a s k   p r i o r   t o   de f i n e de a d l i n e .   O t h e c o n v e n t i o n a l   f r a m e w o r ks   t o o   a r e   f o un t o   w o r i s ub - o pt i m a l   m a nn e r   t ha t   do e s n t   c o n t ri b ut e   m uc h   t o w a r ds   m a s s i v e   b i g   da t a   p r o c e s s i n g.   F i gu r e   2(b s h o w c a s e s   A pa c h e   H a doo t o   off e r   r e duc e d   t i m e   w hi l e   A p a c h e   F l i n k   t o   o ff e r   m o r e   t i m e   c o n s um e d   t o w a r ds   t a s k   c o m pl e t i o n.   I t   c a n   b e   j us t i f i e by   a do pt i o n   o f   di s k - b a s e s t o r a ge   b y   H a doo l e a di n t o   s l o w e r   pr o c e s s i n a l t h o ug i t   i s   c a p a b l e   of   s c a l i ng  t h o us a n ds   o f   n o de s .   S i m i l a r l y ,   A pa c h e   F l i n k   de m a nds   e xt e n s i v e   de pe n d a b i l i t y   of   de pl oy e r e s o ur c e s   a l t h o ug h   i t   i s   w e l l   k n o w n   f o r   i t s   f a ul t   t o l e ra n c e .   In  a l l   t hi s   r e g a r ds ,   M a pR e duc e   do   off e r   r e duc e t i m e   pe r f o r m a n c e ;   h o w e ve r ,   i t   o ff e r s   l i m i t e i nt e ra c t i v i t y   Evaluation Warning : The document was created with Spire.PDF for Python.
Int   J   E l e c   &   Co m E n g     IS S N :   2088 - 8708         Sy n c hr on i z e d   t r ans f or m - aggr e g at e   m od e l   f or   bi d at a   ana l y t i c s   t ow ar ds   i n     ( R aj e s hw ar i   D e m bal a )   4265   l e a di n g   t o   ke e t h e   s ue r   w a i t i n g   f o r   j o b   c o m pl e t i o n   t ha t   a dv e r s e l y   a f fe c t   t h e   i n t e ra c t i v e   da t a   a na l y s i s .   F i gu r e   2(c s h o w c a s e   pr o po s e s y s t e m   t o   e xc e l   i n   hi g hl y   r e duc e de l a y   w h e r e a s   m a j o r i t y   of   e xi s t i n f r a m e w o r o f   di s t r i b ut e d a t a b a s e   m a na ge m e n t   ha s   s i m i l a t re n o f   i n c r e a s e de l a y .   T hi s   c a b e   a t t ri b ut e by   i n c l us i o n   o f   l e s s   i t e r a t i v e   o pe r a t i o n   a nd  i n c l us i o n   o f   m o r e   l o gi c a l   o pe r a t i o n s .   T h i s   p r o c e s s   s pe e ds   up  t h e   pr o c e s s   of   t a s c o m pl e t i o n   a n o f fe r s   m o de l i n a   s o l ut i o c o m pl y i n w i t h   de f i n e de a dl i n e   by   pr o pos e d   s y s t e m .   F i gu r e   2(d)   s h o w c a s e   t h a t   h i g hl y   r e duc e a l go ri t hm   e xe c ut i o n   t i m e   f o r   p r o po s e s y s t e m .   T h e   o ut c o m e   e xhi b i t e by   M a pR e duc e   fo l l ow s   t h e   n e xt   r e duc e e xe c ut i o t i m e   w h i c h   i s   m a i nl y   due   t o   i t s   d a t a   l o c a l i t y   fe a t u r e   w h e r e   i t   m o v e s   t h e   c o m put a t i o i p r o xi m i t y   o f   da t a   m i ni m i z i ng   n e t w o r c o n ge s t i o n;   h o w e ve r ,   i t   i s   n o t   f o un d   s u i t a b l e   f o l o w - l a t e n c y   a ppl i c a t i o due   t o   i t s   b a t c h - o r i e n t e d   p r o pe rt i e s .   It   e v e n t u a l l y   s h o w s   t h a t   p r o po s e s y s t e m   o ffe r s   a pp r o xi m a t e l y   37%  re duc e de l a y ,   38%  o f   r e duc e c o s t ,   45%  o m i ni m i z e d   t i m e ,   a nd   28%   o f   r e duc e e xe c ut i o t i m e   i c o n t r a s t   t o   m e a v a l ue   o f   c o n ve n t i o n a l   s o f t w a r e   f r a m e w o r ks .   T h e   o ut c o m e   e ve n t ua l l y   s h o w c a s e s   t h e   p r o po s e s c h e m e   e xc e l s   o pt i m a l l y   c o s t - e ff e c t i ve   s o l ut i o n   t o w a r ds   l e v e r a g i n g   di s t r i b ut e a n d   pa ra l l e l   d a t a   a na l y t i c a l   o pe r a t i o n   i n   c l o ud .           (a )   (b )         (c )   (d)     F i gu r e   2 Co m p a r a t i v e   o ut c o m e :   (a c o s t ,   (b t i m e ,   (c de l a y ,   a n (d)  e xe c ut i o n   t i m e       4.   C O N C LU S I O N   T h e   p r o po s e s t ud y   pr e s e n t s   a   u ni que   c o m put a t i o n a l   m o de l   w h i c i s   c a p a b l e   o f   l e v e r a gi n g   t h e   d a t a   a n a l y t i c a l   o pe r a t i o i n   di s t ri b ut e e n v i r o n m e n t .   T h e   c o n t ri b ut i o o f   t h e   p r o po s e s t udy   a r e   a s   f o l l ow s :   i )   t h e   pr e s e nt e f r a m e w o r k   i s   c a p a b l e   o f   ob t a i n i ng   t h e   b i da t a   of   di s t ri b ut e a ppl i c a t i o o f   Io T   f r o m   m ul t i p l e   r e gi o n s   o f   da t a   po i n t s   i n   c l o ud  e n v i r o nm e n t ,   i i t h e   m o de l   c o n s i de r s   h e t e r o ge n e o us   pri c e s   o n   di s t r i b ut e d a t a   po i n t s   t o   o f fe r   r e duc e t a s k   c o m pl e t i o a s s o c i a t e w i t h   j ob   r e l a t e d   t o   a na l y t i c a l   o pe r a t i o f o r   a   de f i n e de a dl i n e ,   i i i )   a   di s t ri b ut e s e t   o f   a l go r i t hm s   h a s   b e e n   p r e s e n t   c a p a b l e   o f   m i ni m i z i n t h e   c o s t   a n t i m e   a t t ri b ut e   r e l a t e t o   t a s a s s o c i a t e w i t da t a   a na l y t i c a l   o pe r a t i o i m u l t i - s t a ge s   o f   t r a n s f o r m   a n d   a g g r e ga t e - b a s e pa ra l l e l   f ra m e w o r k a nd  i v t h e   s t udy   o ut c o m e s   e xhi b i t e d   p r o po s e s c h e m e   t o   e xc e l   c o s t - e ff e c t i ve   pe r f o r m a n c e   o n e a r - r e a l   w o r l d   d a t a s e t   i c o n t ra s t   t o   c o n v e nt i o na l   di s t ri b ut e f ra m e w o r ks .   T h e   f ut u r e   w o r w i l l   b e   f ur t h e r   o ri e nt e t o w a r ds   c o n s i de ri n g   m o r e   n e t w o r k - s pe c i f i c   a n d   t r a f f i c - o r i e n t e d   a t t ri b ut e s   t o   r e a l i z e   t h e   i m pa c t   o f   m o r e   c ha l l e ngi n g   t ra f f i c   s t a t e s   o t a s c o m pl e t i o n .           Evaluation Warning : The document was created with Spire.PDF for Python.
                                IS S N :   2088 - 8708   Int   J   E l e c   &   Co m E n g ,   V o l .   15 ,   N o .   4 A ugus t   20 25 :   425 9 - 4267   4266   A C K N O WL ED G E M EN TS   W e   w i s h   t o   c o n f i r m   t ha t   n o   k n o w n   c o n f l i c t s   of   i nt e r e s t   a r e   a s s o c i a t e w i t h   t h i s   pub l i c a t i o a n d   a l l   t h e   a u t h o r s   h a v e   c o n t r i b ut e e qu a l l y .         F U N D I N G   I N F O R M A TI O N   A ut h o r s   s t a t e   n o   f un d i n g   i n v o l v e d.       A U TH O R   C O N TR I B U TI O N S   S TA T EM EN T   T h i s   j o urna l   us e s   t h e   Co n t ri b ut o R o l e s   T a xo n o m y   (CR e di T t o   r e c o gn i z e   i n d i v i dua l   a ut h o c o n t ri b ut i o n s ,   r e duc e   a ut h o r s hi p   di s pu t e s ,   a n d   f a c i l i t a t e   c o l l a bo r a t i o n.     N am e   o A u th o r   C   M   So   Va   Fo   I   R   D   O   E   Vi   Su   P   Fu   R a j e s hw a r i   D e m b a l a                                 K a v y a   A n a n t h a p a d m a n a b h a                                 S ha s h a nk   D ha na n j a y a                                 C     C o n c e p t u a l i z a t i o n   M     M e t h o d o l o g y   So     So f t w a r e   Va     Va l i d a t i o n   Fo     Fo r m a l   a n a l y s i s   I     I n v e s t i g a t i o n   R     R e s o u rc e s   D   :   D a t a   Cu ra t i o n   O   :   W ri t i n g   -   O ri g i n a l   D ra ft   E   :   W ri t i n g   -   Re v i e w   &   E d i t i n g   Vi     Vi s u a l i z a t i o n   Su     Su p e r v i s i o n   P     P ro j e c t   a d m i n i s t ra t i o n   Fu     Fu n d i n g   a c q u i s i t i o n         C O N F LI C T   O F   I N T ER ES S TA T EM EN T   A ut h o r s   s t a t e   n o   c o n f l i c t   o f   i nt e r e s t .       D A TA   A V A I LA B I LI T Y   T h e   d a t a   t ha t   s uppo rt   t h e   f i ndi n gs   o f   t h i s   s t udy   a r e   a v a i l a b l e   f r o m   t h e   c o r r e s po n d i n g   a ut h o r   upo r e a s o na b l e   r e que s t .       R EF ER EN C ES   [1 ]   N .   G .   P u t t a s w a m y   a n d   A .   N .   M u rt h y ,   A n   e ff i c i e n t   r e c o n fi g u ra b l e   w o rk l o a d   b a l a n c i n g   s c h e m e   fo fo g   c o m p u t i n g   n e t w o rk   u s i n g   i n t e r n e t   o t h i n g s   d e v i c e s ,   In t e r n a t i o n a l   J o u r n a l   o f   E l e c t r i c a l   a n d   Co m p u t e r   E n g i n e e r i n g   ( IJ E C E ) ,   v o l .   1 3 ,   n o .   6 ,   p p .   6 5 2 5 6 5 3 7 ,   D e c .   2 0 2 3 ,   d o i :   1 0 . 1 1 5 9 1 / i j e c e . v 1 3 i 6 . p p 6 5 2 5 - 6537.   [2 ]   M .   A l j a ra h ,   M .   S h u r m a n ,   a n d   S .   A l n a b e l s i ,   Co o p e ra t i v e - h i e ra r c h i c a l   b a s e d   e d g e - c o m p u t i n g   a p p r o a c h   fo r   r e s o u r c e s   a l l o c a t i o n   o d i s t r i b u t e d   m o b i l e   a n d   I o T   a p p l i c a t i o n s ,   In t e r n a t i o n a l   J o u r n a l   o f   E l e c t r i c a l   a n d   Co m p u t e r   E n g i n e e r i n g   ( IJ E C E ) ,   v o l .   1 0 ,   n o .   1 ,   p p .   2 9 6 3 0 7 ,   F e b .   2 0 2 0 ,   d o i :   1 0 . 1 1 5 9 1 / i j e c e . v 1 0 i 1 . p p 2 9 6 - 307.   [3 ]   A .   Q .   K h a n ,   M .   M a t s k i n ,   R .   P ro d a n ,   C .   Bu s s l e r,   D .   R o m a n ,   a n d   A .   S o y l u ,   Co s t   m o d e l l i n g   a n d   o p t i m i s a t i o n   fo c l o u d :   a   g ra p h - b a s e d   a p p r o a c h ,   J o u r n a l   o f   Cl o u d   Co m p u t i n g ,   v o l .   1 3 ,   n o .   1 ,   p .   1 4 7 ,   S e p .   2 0 2 4 ,   d o i :   1 0 . 1 1 8 6 / s 1 3 6 7 7 - 024 - 0 0 7 0 9 - 6.   [4 ]   K .   Ra h u l ,   R .   K .   Ba n y a l ,   a n d   N .   A r o ra ,   A   s y s t e m a t i c   r e v i e w   o n   b i g   d a t a   a p p l i c a t i o n s   a n d   s c o p e   fo r   i n d u s t r i a l   p ro c e s s i n g   a n d   h e a l t h c a r e   s e c t o r s ,   J o u r n a l   o f   B i g   D a t a ,   v o l .   1 0 ,   n o .   1 ,   p .   1 3 3 ,   A u g .   2 0 2 3 ,   d o i :   1 0 . 1 1 8 6 / s 4 0 5 3 7 - 023 - 00808 - 2.   [5 ]   B.   B e ri s h a ,   E .   M ë z i u ,   a n d   I.   S h a b a n i ,   Bi g   d a t a   a n a l y t i c s   i n   c l o u d   c o m p u t i n g :   a n   o v e r v i e w ,   J o u r n a l   o f   Cl o u d   Co m p u t i n g ,   v o l .   1 1 ,   n o .   1 ,   p .   2 4 ,   A u g .   2 0 2 2 ,   d o i :   1 0 . 1 1 8 6 / s 1 3 6 7 7 - 022 - 00301 - w.   [6 ]   A .   N a m b i a a n d   D .   M u n d ra ,   A n   o v e r v i e w   o f   d a t a   w a r e h o u s e   a n d   d a t a   l a k e   i n   m o d e r n   e n t e r p ri s e   d a t a   m a n a g e m e n t ,   B i g   D a t a   a n d   Co g n i t i v e   Co m p u t i n g ,   v o l .   6 ,   n o .   4 ,   p .   1 3 2 ,   N o v .   2 0 2 2 ,   d o i :   1 0 . 3 3 9 0 / b d c c 6 0 4 0 1 3 2 .   [7 ]   H .   J a h a n i ,   R.   J a i n ,   a n d   D .   Iv a n o v ,   D a t a   s c i e n c e   a n d   b i g   d a t a   a n a l y t i c s :   a   s y s t e m a t i c   re v i e w   o m e t h o d o l o g i e s   u s e d   i n   t h e   s u p p l y   c h a i n   a n d   l o g i s t i c s   r e s e a r c h ,   A n n a l s   o f   O p e r a t i o n s   R e s e a r c h ,   J u l .   2 0 2 3 ,   d o i :   1 0 . 1 0 0 7 / s 1 0 4 7 9 - 023 - 05390 - 7.   [8 ]   M.   K h a l i d   a n d   M .   M .   Y o u s a f ,   A   c o m p a ra t i v e   a n a l y s i s   o f   b i g   d a t a   f ra m e w o rk s :   A n   a d o p t i o n   p e r s p e c t i v e ,   A p p l i e d   S c i e n c e s   v o l .   1 1 ,   n o .   2 2 ,   p .   1 1 0 3 3 ,   N o v .   2 0 2 1 ,   d o i :   1 0 . 3 3 9 0 / a p p 1 1 2 2 1 1 0 3 3 .   [9 ]   X .   X u ,   L .   S u n ,   a n d   F .   M e n g ,   D i s t ri b u t e d   b i g   d a t a   s t o ra g e   i n fra s t ru c t u r e   f o b i o m e d i c a l   r e s e a r c h   f e a t u ri n g   h i g h - p e r f o r m a n c e   a n d   ri c h - fe a t u re s ,   F u t u r e   In t e r n e t ,   v o l .   1 4 ,   n o .   1 0 ,   p .   2 7 3 ,   S e p .   2 0 2 2 ,   d o i :   1 0 . 3 3 9 0 / f i 1 4 1 0 0 2 7 3 .   [1 0 ]   A .   G a n d o m i ,   M .   Re s h a d i ,   A .   M o v a g h a r,   a n d   A .   K h a d e m z a d e h ,   H y b S M R P :   a   h y b ri d   s c h e d u l i n g   a l g o ri t h m   i n   H a d o o p   M a p R e d u c e   fra m e w o rk ,   J o u r n a l   o f   B i g   D a t a ,   v o l .   6 ,   n o .   1 ,   p .   1 0 6 ,   D e c .   2 0 1 9 ,   d o i :   1 0 . 1 1 8 6 / s 4 0 5 3 7 - 019 - 0253 - 9.   [1 1 ]   G .   D i   M o d i c a   a n d   O .   T o m a r c h i o ,   A   h i e ra r c h i c a l   H a d o o p   f ra m e w o rk   t o   p r o c e s s   g e o - d i s t ri b u t e d   b i g   d a t a ,   B i g   D a t a   a n d   Co g n i t i v e   Co m p u t i n g ,   v o l .   6 ,   n o .   1 ,   p .   5 ,   J a n .   2 0 2 2 ,   d o i :   1 0 . 3 3 9 0 / b d c c 6 0 1 0 0 0 5 .   [1 2 ]   A .   i c o i a n u   a n d   I .   V .   S c h e i a n u ,   M a n a g i n g   a n d   o p t i m i z i n g   b i g   d a t a   w o r k l o a d s   fo o n - d e m a n d   u s e c e n t ri c   r e p o rt s ,   B i g   D a t a   a n d   Co g n i t i v e   Co m p u t i n g ,   v o l .   7 ,   n o .   2 ,   p .   7 8 ,   A p r.   2 0 2 3 ,   d o i :   1 0 . 3 3 9 0 / b d c c 7 0 2 0 0 7 8 .   [1 3 ]   R.   N .   S .   W i d o d o ,   H .   A b e ,   a n d   K .   K a t o ,   H a d o o p   d a t a   r e d u c t i o n   f ra m e w o rk :   A p p l y i n g   d a t a   re d u c t i o n   a t   t h e   D F S   l a y e r,   IE E E   A c c e s s ,   v o l .   9 ,   p p .   1 5 2 7 0 4 1 5 2 7 1 7 ,   2 0 2 1 ,   d o i :   1 0 . 1 1 0 9 / A CCE S S . 2 0 2 1 . 3 1 2 7 4 9 9 .   [1 4 ]   W .   L i   a n d   M .   T a n g ,   T h e   p e r fo r m a n c e   o p t i m i z a t i o n   o f   b i g   d a t a   p r o c e s s i n g   b y   a d a p t i v e   M a p Re d u c e   w o rk f l o w ,   I E E E   A c c e s s   v o l .   1 0 ,   p p .   7 9 0 0 4 7 9 0 2 0 ,   2 0 2 2 ,   d o i :   1 0 . 1 1 0 9 / A CCE S S . 2 0 2 2 . 3 1 9 3 7 7 0 .   Evaluation Warning : The document was created with Spire.PDF for Python.
Int   J   E l e c   &   Co m E n g     IS S N :   2088 - 8708         Sy n c hr on i z e d   t r ans f or m - aggr e g at e   m od e l   f or   bi d at a   ana l y t i c s   t ow ar ds   i n     ( R aj e s hw ar i   D e m bal a )   4267   [1 5 ]   M .   S a a d o o n   e t   a l . ,   E x p e ri m e n t a l   a n a l y s i s   i n   H a d o o p   M a p Re d u c e :   A   c l o s e l o o k   a t   f a u l t   d e t e c t i o n   a n d   r e c o v e ry   t e c h n i q u e s ,   S e n s o r s ,   v o l .   2 1 ,   n o .   1 1 ,   p .   3 7 9 9 ,   M a y   2 0 2 1 ,   d o i :   1 0 . 3 3 9 0 / s 2 1 1 1 3 7 9 9 .   [1 6 ]   F .   H u s s a i n ,   M .   N a u m a n ,   A .   A l g h u ri e d ,   A .   A l h u d h a i f ,   a n d   N .   A k h t a r,   L e v e ra g i n g   b i g   d a t a   a n a l y t i c s   f o e n h a n c e d   c l i n i c a l   d e c i s i o n - m a k i n g   i n   h e a l t h c a r e ,   I E E E   A c c e s s ,   v o l .   1 1 ,   p p .   1 2 7 8 1 7 1 2 7 8 3 6 ,   2 0 2 3 ,   d o i :   1 0 . 1 1 0 9 / A C CE S S . 2 0 2 3 . 3 3 3 2 0 3 0 .   [1 7 ]   A .   K u m a r ,   N .   V a r s h n e y ,   S .   B h a t i y a ,   a n d   K .   U .   S i n g h ,   R e p l i c a t i o n - b a s e d   q u e r y   m a n a g e m e n t   f o r   r e s o u r c e   a l l o c a t i o n   u s i n g   H a d o o p   a n d   M a p Re d u c e   o v e r   b i g   d a t a ,   B i g   D a t a   M i n i n g   a n d   A n a l y t i c s ,   v o l .   6 ,   n o .   4 ,   p p .   4 6 5 4 7 7 ,   D e c .   2 0 2 3 ,   d o i :   1 0 . 2 6 5 9 9 / BD M A . 2 0 2 2 . 9 0 2 0 0 2 6 .   [1 8 ]   T. - C.   H u a n g ,   G . - H .   H u a n g ,   a n d   M . - F .   T s a i ,   I m p r o v i n g   t h e   p e r f o rm a n c e   o M a p R e d u c e   fo r   s m a l l - s c a l e   c l o u d   p ro c e s s e s   u s i n g   a   d y n a m i c   t a s k   a d j u s t m e n t   m e c h a n i s m ,   M a t h e m a t i c s ,   v o l .   1 0 ,   n o .   1 0 ,   p .   1 7 3 6 ,   M a y   2 0 2 2 ,   d o i :   1 0 . 3 3 9 0 / m a t h 1 0 1 0 1 7 3 6 .   [1 9 ]   O .   A z e r o u a l   a n d   A .   N i k i fo r o v a ,   A p a c h e   S p a rk   a n d   M L l i b - b a s e d   i n t ru s i o n   d e t e c t i o n   s y s t e m   o h o w   t h e   b i g   d a t a   t e c h n o l o g i e s   c a n   s e c u re   t h e   d a t a ,   In f o r m a t i o n ,   v o l .   1 3 ,   n o .   2 ,   p .   5 8 ,   J a n .   2 0 2 2 ,   d o i :   1 0 . 3 3 9 0 / i n f o 1 3 0 2 0 0 5 8 .   [2 0 ]   J .   Ra n k ,   J .   H e r g e t ,   A .   H e i n ,   a n d   H .   K rc m a r,   E v a l u a t i n g   t a s k - l e v e l   CP U   e ffi c i e n c y   fo r   d i s t ri b u t e d   s t r e a m   p ro c e s s i n g   s y s t e m s ,   B i g   D a t a   a n d   Co g n i t i v e   Co m p u t i n g ,   v o l .   7 ,   n o .   1 ,   p .   4 9 ,   M a r.   2 0 2 3 ,   d o i :   1 0 . 3 3 9 0 / b d c c 7 0 1 0 0 4 9 .   [2 1 ]   J .   L i u ,   T .   Z h u ,   Y .   Z h a n g ,   a n d   Z .   L i u ,   P a ra l l e l   p a r t i c l e   s w a r m   o p t i m i z a t i o n   u s i n g   A p a c h e   B e a m ,   In f o r m a t i o n ,   v o l .   1 3 ,   n o .   3 ,     p .   1 1 9 ,   F e b .   2 0 2 2 ,   d o i :   1 0 . 3 3 9 0 / i n f o 1 3 0 3 0 1 1 9 .   [2 2 ]   S .   P a rk ,   C . - S .   Y a n g ,   a n d   J .   K i m ,   D e s i g n   o f   v e s s e l   d a t a   l a k e h o u s e   w i t h   b i g   d a t a   a n d   A a n a l y s i s   t e c h n o l o g y   fo v e s s e l   m o n i t o ri n g   s y s t e m ,   E l e c t r o n i c s ,   v o l .   1 2 ,   n o .   8 ,   p .   1 9 4 3 ,   A p r.   2 0 2 3 ,   d o i :   1 0 . 3 3 9 0 / e l e c t r o n i c s 1 2 0 8 1 9 4 3 .   [2 3 ]   I.   Ba rt o l i n i   a n d   M .   P a t e l l a ,   T h e   M e t a m o rp h o s i s   ( o f   R A M 3 S ) ,   A p p l i e d   S c i e n c e s ,   v o l .   1 1 ,   n o .   2 4 ,   p .   1 1 5 8 4 ,   D e c .   2 0 2 1 ,   d o i :   1 0 . 3 3 9 0 / a p p 1 1 2 4 1 1 5 8 4 .   [2 4 ]   G .   M u c h e n j e   a n d   M .   S e p p ä n e n ,   U n p a c k i n g   t a s k - t e c h n o l o g y   f i t   t o   e x p l o re   t h e   b u s i n e s s   v a l u e   o f   b i g   d a t a   a n a l y t i c s ,   In t e r n a t i o n a l   J o u r n a l   o f   In f o r m a t i o n   M a n a g e m e n t ,   v o l .   6 9 ,   p .   1 0 2 6 1 9 ,   A p r.   2 0 2 3 ,   d o i :   1 0 . 1 0 1 6 / j . i j i n fo m g t . 2 0 2 2 . 1 0 2 6 1 9 .   [2 5 ]   C.   J i n g   a n d   P .   D a n ,   J H T D :   A n   e ffi c i e n t   j o i n t   s c h e d u l i n g   fra m e w o rk   b a s e d   o n   h y p e r g ra p h   fo t a s k   p l a c e m e n t   a n d   d a t a   t ra n s fe r   a c ro s s   g e o g ra p h i c a l l y   d i s t ri b u t e d   d a t a   c e n t e r s ,   I E E E   A c c e s s ,   v o l .   1 0 ,   p p .   1 1 6 3 0 2 1 1 6 3 1 6 ,   2 0 2 2 ,   d o i :   1 0 . 1 1 0 9 / A CCE S S . 2 0 2 2 . 3 2 1 9 8 7 3 .   [2 6 ]   A .   H u s s a i n   a n d   M .   A l e e m ,   G o CJ :   G o o g l e   C l o u d   J o b s   d a t a s e t   f o r   d i s t r i b u t e d   a n d   c l o u d   c o m p u t i n g   i n f ra s t ru c t u r e s ,   D a t a ,   v o l .   3 ,   n o .   4 ,   p .   3 8 ,   S e p .   2 0 1 8 ,   d o i :   1 0 . 3 3 9 0 / d a t a 3 0 4 0 0 3 8 .       B I O G R A P H I ES   O F   A U T H O R S           R aj e s h w ar i   D e m b al         ho l ds   a   B . E . ,   M . T e c h ,   a nd   P h . D .   i c o m put e r   s c i e nc e   a n d   e ng i ne e r i ng   f r o m   V i s v e s v a r a y a   T e c hno l o g i c a l   U ni v e r s i t y ,   B e l a g a v i ,   I ndi a .   W i t o v e r   20   y e a r s   o f   t e a c hi ng   e xp e r i e nc e ,   s he   i s   c ur r e n t l y   a n   a s s o c i a t e   pr o f e s s o r   i n   t he   D e pa r t m e nt   o f   I n f o r m a t i o S c i e nc e   a nd   E ng i n e e r i ng   a t   T h e   N a t i o na l   I ns t i t u t e   o f   E ng i ne e r i ng ,   M y s ur u.   P r o f e s s o r   R a j e s hw a r i   D   ha s   p ub l i s he d   18   j o ur na l   pa p e r s   i n   r e pu t e j o ur n a l s ,   i n   a ddi t i o t o   m o r e   t ha n   5   c o nf e r e nc e   pub l i c a t i o ns ,   bo o c ha pt e r s ,   a nd   p a t e n t s .   H e r   r e s e a r c i nt e r e s t s   i nc l ud e   d a t a   m i ni ng ,   a r t i f i c i a l   i nt e l l i g e nc e ,   t he   i n t e r n e t   o f   t hi ng s ,   b l o c kc ha i t e c hno l o gy ,   a nd  da t a   a na l y t i c s .   S h e   c ur r e n t l y   s upe r v i s e s   t w o   r e s e a r c s c ho l a r s .   S he   c a b e   c o nt a c t e d   a t   e m a i l :   dr r a j e s hw a r i @n i e . a c . i n .         K av y A n an t h ap ad m an ab h a           r e c e i v e d   t h e   P h . D .   de g r e e   f r o m   V i s v e s v a r a y a   T e c hno l o g i c a l   U ni v e r s i t y ,   B e l a g a v i .   M . T e c h .   de g r e e   i d i g i t a l   e l e c t r o ni c s   a nd   c o m m uni c a t i o s y s t e m s   a n B . E   d e g r e e   i n   e l e c t r o ni c s   a n c o m m uni c a t i o f r o m   V i s v e s v a r a y a   T e c hno l o g i c a l   U ni v e r s i t y ,   B e l a g a v i ,   K a r na t a k a .   S he   i s   pr e s e n t l y   w o r ki ng   a s   a n   a s s i s t a nt   p r o f e s s o r   i t he   D e pa r t m e n t   o f   E l e c t r o ni c s   a n C o m m uni c a t i o E ng i ne e r i ng ,   V i dy a v a r dha ka   C o l l e g e   o f   E ng i ne e r i ng ,   M y s ur u.   S he   h a s   10   y e a r s   o f   t e a c hi ng   e xp e r i e nc e .   H e r   r e s e a r c i nt e r e s t s   i nc l ude   w i r e l e s s   s e n s o r   n e t w o r k s   a n d   c o m m uni c a t i o s y s t e m s .   S h e   ha s   pub l i s he d   t hr e e   p a pe r s   i n   S c o pus   i nd e xe j o ur na l s   a n a l s o   i n   N a t i o na l   a nd  I nt e r na t i o na l   J o ur na l s .   S he   c a b e   c o nt a c t e d   a t   e m a i l :   ka v y a a p@g m a i l . c o m .         S h as h a n k   D h an an j ay         ha s   c o m pl e t e h i s   B . E .   i c o m put e r   s c i e nc e   a n d   e ng i ne e r i ng ,   M . T e c h.   i s o f t w a r e   e ng i ne e r i ng   a nd  P h. D .   i s e c ur i t y   of   c og ni t i v e   r a d i o   ne t w o r k s   f r o m   t h e   V i s v e s w a r a y a   T e c hno l o g i c a l   U n i v e r s i t y ,   B e l a g a v i ,   I ndi a .   H e   i s   w o r k i ng   a s   a s s o c i a t e   pr o f e s s o r   i n   t he   D e pa r t m e n t   o f   I n f o r m a t i o S c i e nc e   a nd   E n g i ne e r i ng ,   N I E   M y s ur u.   H e   h a s   p ubl i s he d   f o ur   pa pe r s   i n   S c o pus   I nde xe d   j o ur n a l s   a nd   p r e s e nt e d   pa p e r s   i n   i n t e r na t i o na l   c o n f e r e nc e s   w i n ni ng   t h e   B e s t   P a p e r   A w a r d .   H e   i s   a l s o   a w a r de d   w i t h   I nt e r s c i e nc e   Y o ung   I n v e s t i g a t o r   A w a r f r o m   I nt e r s c i e nc e   N e t w o r I ndi a .   H e   ha s   c o m pl e t e d   E M C C I S   c l o ud  c e r t i f i c a t i o n ,   a l s o   a   C e r t i f i e C y be r   C r i m e   I nt e r v e n t i o O f f i c e r   f r o m   I S A C   I nda .   H i s   a r e a   o f   i nt e r e s t   i nc l ude s   r a d i o   ne t w o r k s ,   c y be r s e c ur i t y   a nd  c l o ud  c o m put i ng .   H e   c a be   c o nt a c t e a t   e m a i l :   s ha s ha nk @n i e . a c . i n .     Evaluation Warning : The document was created with Spire.PDF for Python.