A Bayesian Nonparametric Approach to the

0 downloads 0 Views 370KB Size Report
Bootstrap, asymptotics, consistency, Bernstein-von. Mises theorem, adjustment coefficient, queues, risk theory. 1 Preliminaries and Motivating Examples.
                        

­

                   Æ     

   

     

   

   

       

                    

!   Æ    "   #     $ %     & '#      "   !   Æ    & (             $   )     & *      

    ) &

 +,     &   -.. * -. /0

    1  &               ) 2     !   Æ  3   %  &

                          

                                                  

     !     "          #                #                 # 

        $  % &   "'  % &   "'                       %' (     )              *    

 + ,  + %   ' -    - %  '   "

./

         

$       %0   "12/'3

 + %      '   "      +   )     *  4 5  4 5                

        3 





 %   ' + 



   





  ,

6       4 5  4 5  3 



 %   ' + "   ,

               3  

 + 

    

      , $                   #     $                 7 %"111'  8$9

 #             

   $          %  '                 :                 , " ;                        <    #           #    %  "' 

   7            

   <           $    

                                                           $             .             

 8               8   %"1=.'         $ %"1.> "12;' #                  -    -  -           "     <  $   #    % &   "'  % &   "'         

            

..

      :  3

 + ,  +  -    -    "    %' + %  , 3   '             %, 5 $           ,               , $    % %'& ,'   3  %' +  -   $ 

   

   ,

           

 + 

  %'  ,





 4 5   4 5             " 6       4 5   4 5    %?  "11"' 

 + 



   





 

 + ,  + %   ' -    - %  '   " @                                         $       A   " ;               B                  (  % &   "'  % &   "'              "  %   %'' +  %'      " $            %' ;  %   %'' +  %'      " $            %' C $      % &   "'  % &   "'       #     %'  %'   %      %'  %'' +  %'  %' 7    

 +  -    "

.2

         

            

 + ,  +  -    -    " $          )  *

    +          

  ,                            <  B             (  +  4  5 -  4  5   ,     "      ,   ,    + "      , 8                  

    $                                 

               % '

%!'

4  !% - '    5      !  %" # '  "  , #  ,  %!'       !       "   #  $       %   "121' 

+

    

%"'

       #      %!' + "  +  4  5-  4  5 + %,'      ,      %     0  "1."'         ,   %' + " 6        ,    + , D       ) *                3 

 

"

   + 

%;'

%   "121' 6      %"' %;'           +  %C'               #      )  *      %A  ;'     ) E   Æ *           #       E   Æ         

            

.1

              F                   #           G   %"11/' 7HH 

   %"11"' :        %"11,' @ %"121'    #      $       0                      $           #           #   %7 "111& (  ="  $  =' B         0         I     %C'          $    <       ;             $                   C    >             0         =  /               D     .      

   

                      

             @      #                D      E   Æ    )    *  E                   @        #            9        )   *  I    0 !          #           %'  %'     D          %      '     )  *  9                3 %'     %'  %' %     A   " ;            %'  %'        ) * '& %'       %'  %'       & %%'            (             % %''         % '         $           G" $         :         & &     %  %'' (  ' + &%' ' + & %'

         

2,

G; $             8               + %     '  + %    '         :         & - Æ  & - Æ         Æ   :                          ):   *          %' % %''     :     % ' $  % '         % '      %!' + %!'  %!'  

%!' +



!  % '

 %!' +



!  % '

%>'

       % '    8           D   $  %"121' %   7   I '       %7   I ;       #

         % %!'&   !  ' #      %%!'&   !  '          /           "   #  B                 % %!'&   !  '   @           % %!'&   !  ' /  "       %%!'&   !  '  * 4 5 

 %'    $                 .      . %' 8         2%3 ' +  %3 ' +   3 . %'  3      )   * 2    3 .%'  3  $                 0 + 0       /   D         '& /  "                %                    %K    ' 

      %    '&)# $ "     $  %'   . %' + . %' "   %    " . %'  %' + . %' $   &   '# "   %     %'   .

" . %' %' -   ,  3  "   %  ,   '# $  .  +   %3 ' %   2%3 '  /    *# $   &   ' 2   8  



8   4 %' +  %           

4 %' + "0

   

 '    % +  '

 





 



    $ $ $ "     / )# 4 %'       4 %' 0  # "   ,  3   %  ,  '# $ 3 $ +  " 4 %' %   $ 3 $ +  " 4 %' 

            

2=

#   $ %   $                  <        ?   %"11.'  B   %"112'              )    0   * $             G =;              )   *    E   Æ      <    (       ) *             :   

%!' +





!  %'

  %!' +





!   %'

  %!'   %!'   %!' $ ) *   %!'  #     !        %" # '  , D     )   *     E   Æ   

    3

 + !  , 3 %!' + "  ,

%""'

                                 % &   "' % &   "' B               /

    $    '&)  "* #  $  " 

"# #  # 1$2   





  



%!'  %!'  5   



+,

5  , -   

"     "# 6  #   8  

%";'



      $ $ $ "  3 '# $ "     $  2 



 %     5   ' + , 5  , -     

%"C'

2/

            8  



$  %' % %''     %" # '      #        $      (  =" 

               %";'        %'

   $  $   "  3 ' $  #     %' % %'' $ 7$   " %' %%'' 1$2            %!'   %!'  5   + , 5  , -&     

"     " # 6  # 



$                     4   5 9       4   5                   %1' 8  )     *       E   Æ       3

 + !  , 3 4%!'  5 + " 8      G />         

%">'

   ) *     

      $   "  3 '#     

 &     8  



  8  D                    G =; =C      %     4, "5         '     $   $ $ "  3 '# $ "    &  $  %'    %      5   ' + " "   5  ,#  &   %'   4   5 +    +    &    

            

2.

& ' "     $  0         C   #       <            <                             8  #    0           0  # 9                         $                     0  # 9           %G />'              <  )  * 8       %G .'         0                

  0  # 9         <    $                 

    B       

    %'    "% #   

8%!' +



!  %'

   " !" 8%;!'  *# $  % %'   %'   %' %'' 4 ! 5 4 ! 5 + 8%;!'  8%!' ¾

  8  

%"='



A      =             D                  %'

%'

    $    '&) $  # $  %;!'  #

 $  ""# # # 1$# %      # # $      "

%%!'  4%!'   5'           $       % 9 %!' + %;!'  %!' -  %;!' %!'  ;%!'  %!'

     *#  &  

         

22

  8  



D    (  /;       





 Æ %!'  4%!'  5  5     



+,

%"/'

   ,  Æ  "; #    $     %'  %'               (  /;            

    $  $   "  4 5 $  1$     Æ  %!'  4 %!'   5  5    + , 

"   ,  Æ  ";#  &   



    $  $   "  4 5 $  1$2    ' + ,  Æ % 

"   ,  Æ  ";#  &     8  



B                                     E   Æ  

      $    '&) $  # $  %; '  #  $ "  "# #  # 1$# %      # # $  &     " %  '         $       % 9 +% '  %; '  % ' -  %; '% ' ; %'   %' %".'

     *#  &     8  



D G />    Æ         #         9      9     

            

21

%'    %' %'       4%'  5 4 %'  5

4%'  5        9 + 9  -     

 G />           

 $ $ $ "     4 /# $      " %  '9  

            $        *#  &    

I    7  =        )  *     9  ' 8       L%'

         %

          ) + L %"  3 '      ) 9 '             "  3  % 8              0          >               0  # 9  #                                C    Æ           

      $           4 /# %      #  $ "       ,  % $    &   '   + L%'    %'   .  -         %'   .   -  + L%' -      



               #                      >        

      $     "     4 /# $ "     $  #  &    '       %' 1$      " %         %,  ;  9 '      *  '%  ;  9  ' %' 1$      " %                    *  %   ' + L%' "    9   -  %'   4   #  &   

1,

         

(     %                      #   $           A  " $        8$9          A       $  # 

                 3  #    %8'  #  %0'       #   G %   G '     %7' $    

            $               7 %"111'                        @                 %   #  

    '                    %   ' Æ     8    Æ           3 %'   " $         ",   8 ",   0 ",   7 $    <   + C"1, $    & &   %: '          G  3

    &%7' + "'$$ :7M & %7' + "' $$ :7 M & 7 + " ;    %"2'   + "  + "      " +   # + -  $   :  :  ' '         *   *  ;,,  # 







                    Æ   $    '  '       ;,, $   :  :           

 & %7'   & %7 '   7 7 

'



'

              @       : + =1"=/;= : + "/,1C.=     %'   ; $         ;,   8 C,   0 ;,   7 $    <   + =C;2 $     & &      %"2'     :  :  ' '         "        ;,,               Æ   $    ' + ' + ;,, : + C.>1C.= : + ".,,/"=    

            

1"

0

5

density

10

15

%'   C $         C>   8 C,   0 C>   7 $    <   + 1C>C $          &  &            " ; $    ' + ' + ;,, : + "1CC";= : + ".,,/;=          # B        2         $    /     

    %=,,  '                       D    0 + ",,,         D  "#C        

       "#C      $ "     %3 '         3             2          

0.0

0.2

0.4

0.6

0.8

1.0

R

20 0

10

density

30

 

               

0.0

0.2

0.4

0.6 R

0.8

1.0

 

               

         

20 0

10

density

30

40

1;

0.0

0.2

0.4

0.6

0.8

1.0

R

 

                      

             



& & & & & & & & & &1 & & & & & &. &. &. &.. &.. &.. &... &...

     + , 4 & . &  &  &  & . & 1 & 1 &  &  &  &  &   & .1. & & & &1 &1 &1 &  &1 & & 

     + , 4 &1 &1 &  & &1 & & &. &. &.. & & &1 & & & 1 & &1 &  &. &1 &11 &1

   1  + , 4 &  &1 &  &  &  & 1 & . &1 & & & & & &. &. &.  & &1 &  & & &1 &1

                    #             7  = $     

            

1C

$ ; 8          $  " ;      #                       

 0  

                       5 4    ¾ 4 Ô  5 4    ¾ 4 Ô

   

   

4 5 &  . 4 ¾ 5 &.  5 1.  

4 5 & 4 ¾ 5 &   5 1  





& & & & & & & & & & &



&  &  & .& . & .&. & 1& & .& & 1&1 &  &1 & & & & & & .. & & .1

&&1 &.&11 & &1 && &1&  & & &.1&. &.&  &. &1 &..&. && .



     

 

   1

4 5 &.1 4 ¾ 5&.  .11   

&1&1 &&. & .& & &  &&1 &1& &&.1 &&  &.&1 &.1& &.&..

6      ,

   - ;  ,

. %-;'. %'+ %-;  '+ %%'" %-;'" ' %"1'     I  "     %%!'& !  '        " E            @   %. % - ;'  . %'' +  %. %'  . %  ;''  

 

 %%' + "  ' + ,            %, -'   $   . %'        %, -'       . % - ;'  . %'          %, -'  ;  , D I  "             ,   %,   '         $          +

         

1>

            <   (   %:  "121'                     D $  ;"  G %"1/.'        ,   %,   '     5  ,  (         

 1!      



 3   >  



D            







  %!'     + "    %!'       !    + " !   %'    !   %'   "

 !! !

!   %'   

"



!   %'

  "      !   %'  5    !   %'  5  " "    !   " !   %'    5   !      !   %'  5  %;"' " 









         

1/

 9!       





"

"



 !   %'5 

 5



"

  



 !   %'5 



" + 5 -' " ! "





&-



  

Æ





%;;'

5  , D        >     %' 

!

!

!   %'

       @    (  >"  

  

 !

+



 !   %'    5 



!!

  !  %'    5  !

%;C'

D   GC        %;;'     <   >        5 D    GC           %;C'    



  !  %'    5  +  % %!'    5  '



>     D %;"'             %!'      %  %!'    5  '    % %!'   ' %;>'  5     <           %!' 

B            D        







  !  %'   - 5    !       ! - " !   %'  5 

  %!'     



            

1.

            







  %!'      % %!'   ' %;='  D %;>' %;='           %!'       %!'  /                

    %!'        %!'  /            %!'   %!'                        %'              ,  % '        %' % %''        $ 

       G >;  %'  .  %'     %'       %'       .   <  #   /     ( 

 +  . %'  .%' 

0 :  + > %Æ'  



"

  Æ   %'  2

"

6  %' 

Æ  2

12

         

 1! +  3

  >  B    9!   

    %!'  %!'  5       

 



  

%!'  %!'  5

"

- 6 ' % %' -  %''  -

 





"



  

;

-

"

5    

;

  5 %  - 6 ' % %' -  %''    ;  !     ! % %'   %''  5    ! 

" 5  - '



% 

"



%  - 6 '

%  - 6 '

 %'

0  ((J    3



"  - ' " %  - 6 '

 



"





%  - 6 '







; 

& -

& -

  

Æ





%;/'

  

Æ



  %'  Æ>

%;.'

      #    " D    

%> ' %%> '

+ +

!

4$ 5    ! 6> - 6> - > - >  

8      

!

!

! % %'   %''

+ % %'   %'' ! 

! !



! !

% %'   %'' 4 ! 5

            

11

        

 !    5      ! % %'   %''  ;      ! 

    %%> ' % %> '   %> ' -  %> '   %> ''  >5    !     5   -  % %'   %'' 4 ! 5      

 !







> 

    %%> ' % %> '   %> ' -  %> '   %> ''  >5      5 - %> '   %'   %'    %;2' ##





> 

  0 $  ;"  ( %"12.'  ?  #7        %;2'     <        #  @    %;/'  %;.'   

       %!'   %!'  5   Æ -       

  

5  , ,  Æ  5 $         

      %!'  %!'  5  + , -       

%;1'

       

      %!'    %!'  5  + , -        

%C,'

D      

 

%!'  %!'  % % ' -   %6''  %!'  %!'    -%% ' -  %6''   %!'    %!'    -   %!'  %!'   %!'   %!'   

 %;1'  %C,'   %";'    

  



       $ ,  5      %  5'  " % - 5'  " 7         %  5  - 5'  %  5'  "

         

",,

 % - 5'  " @    (  ="

 %   5 '

 %%  5'  " % - 5'  "  '   %%  5'  %  5'  "  %  5' %-5'% -5'%-5'"   ' " +

    <       #   

     

4%!'  5  

+



D  ((J   

"  % - ' '% - ' ' 







$   4%& - Æ ' %& - Æ '5 ¾

%!' !  %" # ' -     

+

@               % &    #    "  



  "' % &   "' 

4%  5'  5 + %  5'  "  4% - 5'   5 +  % - 5'  "  



%C"' %C;'

     5     %">'   %C"' %C;'                      5  

     5

            



      !    D       ¾

% %'   %'   %' %'' 4$  5 4$ 5

+

   

-

%"   %''





 %'

 

   

 $



% ' 4 5

%"  

 $

% '' 4 5

%J          

4$ 5



4$ 5 

8%;!'   '

J 

                  

  

%"   %''

 

+

 

+

 



 





 $

% ' 4 5



%"   %''

4$ 5

$ 



% '  

 

$   %'%"   %'' 4$ 5





%"   %''

 



","



$  %' 4$ 5





$  %' 4$ 5 

            

 

 %'

 

+







  

%"  



 $

4$ 5

% '' 4 5

$  %'%"    $



% '' 4  5 -

     %"='    

  

 %'

 

 







  

 %'

  



$  %' 4$  5





$  %' 4$ 5

%"   %''

 





$  %' 4$ 5



%CC'

0 D !              Æ    



   + + +

%"   %''

 

 



       

   

$





$  %' 4$  5

%"  

%"  

 $

% '' 4  5

% ''   -

 $ 

%" %''  %'



$  %'



   

$



 

D     

  

 

$  %'  %' + 



$



 

$  %' 



$  %' $  %'





$  %'  %'





 $



% ' 4  5



%C>'

 %'

         

",;

 %CC' %C>'  D !            %"='   

  

$  %' 



¾

!% - '  %'  %' + 8%;!'  8%!' 

$            !             (  >        1! +  3   >   %;!'        (  /"    5  ,      >  

    



% %'   %'   %'  %'' 4 ! 5 4 ! 5  5

"

D         %'     4 %'  5 %!'     4%!'  5                   (  ="     

   %%!'  %!''      

  !! % %'   %'' 4 ! 5   - 5      - " % %'   %'' 4 ! 5  5  

0 7  !       





% %' %'' 4 ! 5 5      

     5 ¾ % %' %''% %'%'' 4 ! 5 4 ! 5 "   %-' -"'5 ¾ % %'  %'%' %'' 4 ! 5 4 ! 5  " "





%C='

        ((J    Æ        %C='     "

5



¾ "

% %'   %'   %'  %'' 4 ! 5 4 ! 5  5

#        6            $  ;"  ( %"12.' %              

            

",C

 (  >"'               % % %'    %''&   "'        14 - 5        ?   %'                 3

   %!''       % %, 9 %!''  '   % %!'    

%C.'

$                

   %%!'  %!''       !     ! % %'  %'' 4 ! 5    5    

 " % %'  %'' 4 ! 5  5   

            

   %!''       % %, 9 %!''  '   % %!'    

%C2'

  %C.'  %C2'    





   %%!'  %!''     +  % %, 9 %!''  '



%C1'

         

",>

  0      %        '       

    %!''     +  % %, 9  %!''  '   % %!'    

%>,'

D     

%%!' 4%!'  5' +  %!' % %!' 4 %!' 5'        - 4 %!' 5 % %!' 4 %!' 5' %>"'

    (  ="   ((J      #         %       '  %>"'         

      %!' %%!' 4%!'  5' -%!' % %!' 4 %!'  5'            $       %!'   4%!'   5 0  $        % ' + %' + "   3 % ' + % ' - % '%   '     





Æ     + % ' Æ %'  % '

%>;'

 J  %/' 

               (     ( %:  "121  C.>#C.1'     Æ % '  % '  , -   -        ,  Æ  "; 9    G =C   ((J    Æ    

%'  % ' -   -       % '  ,   %>;'          

$         4%!'   5 0  $     

' - %'%  ' " + %' + %



%!'

             %' + "'      %   

%  ' +  " %%'  %'' %'

",=

%>C'

 0                        '  %''    $        %% 

 % ' - % '%   ' -  %' %   '     ;

  % '  % '%   '   % ' %   '



;

+

%% '  % '' - %% '  % ''%   '         %   ' % %'   % '' -  ;



              7  >  (  /C  

  

J D

    % '      5    + ,     % '    

%>>'

%>='

#    8           %>>'           %'   %'   %'    %' -  %'   % '  -  %>/'  % '   % '

%'&   "'          # J     %      %'  $  "CA  I   F  %"1.C %'&   "'         %'  ".'     %          %" # '     #    " D # %'                              %    '       %'&   "'      %' %   #    %   $  ."1      "12>'    G =C            % '   % '  , -   -    

%>.'

         

",/

$      %'           #                     %>2'  %'   % '  , -   -     D   G =C    Æ  ,     )  *                Æ #    @            3     %'   %  '   5            ¼ Æ  ¼ Æ  %!'   % ! '   5        ,5  , Æ  , %>1'       #    D %>.' # %>1'     

  





  %'   %'  5     



-    

+,

%=,'

0               





 %'  % '  5     



+,

6     % '  ,        %>/' %=,' %="'  (  /;

-    

%="'

  ,    

%         +.,&

6   )    %       7 " $

    &      !    "#     &   ..&   !! +.,& $ % $    $    & '2 8 7  9  

    '  2   &     &   " +. ,& "& #   '     & :  ; $ 

  $           $   &      ..& + 0 +. ,&  1  "  '  & '     ; $