[25653] 2016-10-28_构建你的数据科学作品集:机器学习项目(上)

文档创建者:s7ckTeam
浏览次数:2
最后更新:2025-01-19
2016-10-28_构建你的数据科学作品集:机器学习项目(上) 0 3 % 0 8 % 1 6 % 1 8 % 2 4 % 2 7 % 3 4 % 3 6 % 5 2 % 6 2 % 6 4 % 7 1 % 7 4 % 7 8 % 8 3 % 8 6 % 8 8 % 9 2 % 9 3 %   k / z / v / c / i   L i n u x   2 0 1 6 - 1 0 - 2 8   #   , 2 0 - - - - - - - - - - - - - - - - - -   R E A D M E - [ 1 ] D a t a   S c i e n c e   P o r t f o l i o [ 2 ] P o r t f o l i o [ 3 ] [ 4 ]   J u p y t e r n o t e b o o k   使 使   使 使 : 使 便 使   A t o m [ 5 ]     P y C h a r m [ 6 ]     I D E m a r k d o w n   P y t h o n     c s v     G i t h u b  
G i t h u b   使   P a n d a s [ 7 ]     s c i k i t - l e a r n [ 8 ]     P a n d a s   D a t a F r a m e s [ 9 ] 使   p y t h o n   便 [ 1 0 ] / r / d a t a s e t s [ 1 1 ]       s u b r e d d i t R e d d i t   s u b r e d d i t   G o o g l e   P u b l i c   D a t a s e t s [ 1 2 ]       G o o g l e   B i g Q u e r y   使 A w e s o m e   d a t a s e t s [ 1 3 ]       G i t h u b     5 0 0   ? ?   F a n n i e   M a e [ 1 4 ] 使       2 0 1 5
使 ,     2 0 1 2     1     2 0 1 2     1   [ 1 5 ] [ 1 6 ] [ 1 7 ] [ 1 8 ] [ 1 9 ] [ 2 0 ]   2 0 0 0     2 0 1 5     2 2 0 0     2 0 1 4     1 .   1 0 0 0 0 0 8 5 3 3 8 4 | R | O T H E R | 4 . 6 2 5 | 2 8 0 0 0 0 | 3 6 0 | 0 2 / 2 0 1 2 | 0 4 / 2 0 1 2 | 3 1 | 3 1 | 1 | 2 3 | 8 0 1 | N | C | S F | 1 | I | C A | 9 4 5 | | F R M | 2 .   1 0 0 0 0 3 7 3 5 6 8 2 | R | S U N T R U S T   M O R T G A G E   I N C . | 3 . 9 9 | 4 6 6 0 0 0 | 3 6 0 | 0 1 / 2 0 1 2 | 0 3 / 2 0 1 2 | 8 0 | 8 0 | 2 | 3 0 | 7 9 4 | N | P | S F | 1 | P | M D | 2 0 8 | | F R M | 7 8 8 3 .   1 0 0 0 0 6 3 6 7 4 8 5 | C | P H H   M O R T G A G E   C O R P O R A T I O N | 4 | 2 2 9 0 0 0 | 3 6 0 | 0 2 / 2 0 1 2 | 0 4 / 2 0 1 2 | 6 7 | 6 7 | 2 | 3 6 | 8 0 2 | N | R | S F | 1 | P | C A | 9 5 9 | | F R M | 7 9 4 1 .   1 0 0 0 0 0 8 5 3 3 8 4 | 0 3 / 0 1 / 2 0 1 2 | O T H E R | 4 . 6 2 5 | | 0 | 3 6 0 | 3 5 9 | 0 3 / 2 0 4 2 | 4 1 8 6 0 | 0 | N | | | | | | | | | | | | | | | | 2 .   1 0 0 0 0 0 8 5 3 3 8 4 | 0 4 / 0 1 / 2 0 1 2 | | 4 . 6 2 5 | | 1 | 3 5 9 | 3 5 8 | 0 3 / 2 0 4 2 | 4 1 8 6 0 | 0 | N | | | | | | | | | | | | | | | | 3 .   1 0 0 0 0 0 8 5 3 3 8 4 | 0 5 / 0 1 / 2 0 1 2 | | 4 . 6 2 5 | | 2 | 3 5 8 | 3 5 7 | 0 3 / 2 0 4 2 | 4 1 8 6 0 | 0 | N | | | | | | | | | | | | | | | | | R E A D M E . m d
  使         使             使                         g i t     G i t H u b   O S X         [ 2 1 ]   2   [ 2 2 ]   . g i t i g n o r e         . m d     m a r k d o w n   M a r k d o w n   使 [ 2 3 ]   m a r k d o w n         G i t h u b G i t h u b     m a r k d o w n [ 2 4 ]     R E A D M E . m d r e q u i r e m e n t s . t x t s e t t i n g s . p y P y t h o n i m p o r t . g i t i g n o r e 1 .   l o a n - p r e d i c t i o n 2 .     d a t a 3 .     p r o c e s s e d 4 .     . g i t i g n o r e 5 .     R E A D M E . m d 6 .     r e q u i r e m e n t s . t x t 7 .     s e t t i n g s . p y l o a n - p r e d i c t i o n d a t a p r o c e s s e d d a t a p r o c e s s e d . g i t i g n o r e . g i t i g n o r e . D S _ S t o r e . g i t i g n o r e 1 .   d a t a 2 .   p r o c e s s e d R E A D M E . m d R E A D M E . m d R E A D M E . m d
3 .       便   p y t h o n   [ 2 5 ]         使   p y t h o n 3   p y t h o n 使   A n a c o n d a [ 2 6 ]   p y t h o n       [ 2 7 ]   z i p   2 0 1 2     1     2 0 1 5     1     . z i p   l o a n - p r e d i c t i o n     s h e l l   使           p d f   [ 2 8 ] 1 .   L o a n   P r e d i c t i o n 2 .   - - - - - - - - - - - - - - - - - - - - - - - 4 .   P r e d i c t   w h e t h e r   o r   n o t   l o a n s   a c q u i r e d   b y   F a n n i e   M a e   w i l l   g o   i n t o   f o r e c l o s u r e .     F a n n i e   M a e   a c q u i r e s   l o a n s   f r o m   o t h e r   l e n d e r s   a s   a   w a y   o f   i n d u c i n g   t h e m   t o   l e n d   m o r e .     F a n n i e r e q u i r e m e n t s . t x t 1 .   p a n d a s 2 .   m a t p l o t l i b 3 .   s c i k i t - l e a r n 4 .   n u m p y 5 .   i p y t h o n 6 .   s c i p y r e q u i r e m e n t s . t x t r e q u i r e m e n t s . t x t s e t t i n g s . p y 1 .   l o a n - p r e d i c t i o n 2 .     d a t a 3 .           A c q u i s i t i o n _ 2 0 1 2 Q 1 . t x t 4 .           A c q u i s i t i o n _ 2 0 1 2 Q 2 . t x t 5 .           P e r f o r m a n c e _ 2 0 1 2 Q 1 . t x t 6 .           P e r f o r m a n c e _ 2 0 1 2 Q 2 . t x t 7 .           . . . 8 .     p r o c e s s e d 9 .     . g i t i g n o r e 1 0 .     R E A D M E . m d 1 1 .     r e q u i r e m e n t s . t x t 1 2 .     s e t t i n g s . p y h e a d t a i l
使 使         使 使 [ 2 9 ]         2       2         p d f   [ 3 0 ] s e t t i n g s . p y 1 .   D A T A _ D I R   =   " d a t a " 2 .   P R O C E S S E D _ D I R   =   " p r o c e s s e d " 3 .   M I N I M U M _ T R A C K I N G _ Q U A R T E R S   =   4 4 .   T A R G E T   =   " f o r e c l o s u r e _ s t a t u s " 5 .   N O N _ P R E D I C T O R S   =   [ T A R G E T ,   " i d " ] 6 .   C V _ F O L D S   =   3 s e t t i n g s . p y s e t t i n g s . p y a s s e m b l e . p y P y t h o n   a s s e m b l e . p y a s s e m b l e . p y 1 .   H E A D E R S   =   { 2 .           " A c q u i s i t i o n " :   [ 3 .                   " i d " , 4 .                   " c h a n n e l " , 5 .                   " s e l l e r " , 6 .                   " i n t e r e s t _ r a t e " , 7 .                   " b a l a n c e " , 8 .                   " l o a n _ t e r m " , 9 .                   " o r i g i n a t i o n _ d a t e " , 1 0 .                   " f i r s t _ p a y m e n t _ d a t e " , 1 1 .                   " l t v " , 1 2 .                   " c l t v " , 1 3 .                   " b o r r o w e r _ c o u n t " , 1 4 .                   " d t i " , 1 5 .                   " b o r r o w e r _ c r e d i t _ s c o r e " , 1 6 .                   " f i r s t _ t i m e _ h o m e b u y e r " , 1 7 .                   " l o a n _ p u r p o s e " , 1 8 .                   " p r o p e r t y _ t y p e " , 1 9 .                   " u n i t _ c o u n t " , 2 0 .                   " o c c u p a n c y _ s t a t u s " ,
使 2 1 .                   " p r o p e r t y _ s t a t e " , 2 2 .                   " z i p " , 2 3 .                   " i n s u r a n c e _ p e r c e n t a g e " , 2 4 .                   " p r o d u c t _ t y p e " , 2 5 .                   " c o _ b o r r o w e r _ c r e d i t _ s c o r e " 2 6 .           ] , 2 7 .           " P e r f o r m a n c e " :   [ 2 8 .                   " i d " , 2 9 .                   " r e p o r t i n g _ p e r i o d " , 3 0 .                   " s e r v i c e r _ n a m e " , 3 1 .                   " i n t e r e s t _ r a t e " , 3 2 .                   " b a l a n c e " , 3 3 .                   " l o a n _ a g e " , 3 4 .                   " m o n t h s _ t o _ m a t u r i t y " , 3 5 .                   " m a t u r i t y _ d a t e " , 3 6 .                   " m s a " , 3 7 .                   " d e l i n q u e n c y _ s t a t u s " , 3 8 .                   " m o d i f i c a t i o n _ f l a g " , 3 9 .                   " z e r o _ b a l a n c e _ c o d e " , 4 0 .                   " z e r o _ b a l a n c e _ d a t e " , 4 1 .                   " l a s t _ p a i d _ i n s t a l l m e n t _ d a t e " , 4 2 .                   " f o r e c l o s u r e _ d a t e " , 4 3 .                   " d i s p o s i t i o n _ d a t e " , 4 4 .                   " f o r e c l o s u r e _ c o s t s " , 4 5 .                   " p r o p e r t y _ r e p a i r _ c o s t s " , 4 6 .                   " r e c o v e r y _ c o s t s " , 4 7 .                   " m i s c _ c o s t s " , 4 8 .                   " t a x _ c o s t s " , 4 9 .                   " s a l e _ p r o c e e d s " , 5 0 .                   " c r e d i t _ e n h a n c e m e n t _ p r o c e e d s " , 5 1 .                   " r e p u r c h a s e _ p r o c e e d s " , 5 2 .                   " o t h e r _ f o r e c l o s u r e _ p r o c e e d s " , 5 3 .                   " n o n _ i n t e r e s t _ b e a r i n g _ b a l a n c e " , 5 4 .                   " p r i n c i p a l _ f o r g i v e n e s s _ b a l a n c e " 5 5 .           ] 5 6 .   } 1 .   S E L E C T   =   { 2 .           " A c q u i s i t i o n " :   H E A D E R S [ " A c q u i s i t i o n " ] , 3 .           " P e r f o r m a n c e " :   [ 4 .                   " i d " , 5 .                   " f o r e c l o s u r e _ d a t e " 6 .           ] 7 .   }
      ( ) 使   P a n d a s     r e a d _ c s v [ 3 1 ]     D a t a F r a m e [ 3 2 ] 便                   D a t a F r a m e         D a t a F r a m e         D a t a F r a m e     D a t a F r a m e   4 .   1 1 .   1 5 .   1 7 .                 2   s e t t i n g s c o n c a t e n a t e h e a d e r N o n e H E A D E R S S E L E C T d a t a 1 .   i m p o r t   o s 2 .   i m p o r t   s e t t i n g s 3 .   i m p o r t   p a n d a s   a s   p d 5 .   d e f   c o n c a t e n a t e ( p r e f i x = " A c q u i s i t i o n " ) : 6 .           f i l e s   =   o s . l i s t d i r ( s e t t i n g s . D A T A _ D I R ) 7 .           f u l l   =   [ ] 8 .           f o r   f   i n   f i l e s : 9 .                   i f   n o t   f . s t a r t s w i t h ( p r e f i x ) : 1 0 .                           c o n t i n u e 1 2 .                   d a t a   =   p d . r e a d _ c s v ( o s . p a t h . j o i n ( s e t t i n g s . D A T A _ D I R ,   f ) ,   s e p = " | " ,   h e a d e r = N o n e ,   n a m e s = H E A D E R S [ p r e f i x ] ,   i n d e x _ c o l = F a l s e ) 1 3 .                   d a t a   =   d a t a [ S E L E C T [ p r e f i x ] ] 1 4 .                   f u l l . a p p e n d ( d a t a ) 1 6 .           f u l l   =   p d . c o n c a t ( f u l l ,   a x i s = 0 ) 1 8 .           f u l l . t o _ c s v ( o s . p a t h . j o i n ( s e t t i n g s . P R O C E S S E D _ D I R ,   " { } . t x t " . f o r m a t ( p r e f i x ) ) ,   s e p = " | " ,   h e a d e r = S E L E C T [ p r e f i x ] ,   i n d e x = F a l s e ) A c q u i s i t i o n P e r f o r m a n c e p y t h o n   a s s e m b l e . p y p r o c e s s e d / A c q u i s i t i o n . t x t p r o c e s s e d / P e r f o r m a n c e . t x t 1 .   i f   _ _ n a m e _ _   = =   " _ _ m a i n _ _ " : 2 .           c o n c a t e n a t e ( " A c q u i s i t i o n " ) 3 .           c o n c a t e n a t e ( " P e r f o r m a n c e " )
    使         [ 3 3 ]           2   v i a :   h t t p s : / / w w w . d a t a q u e s t . i o / b l o g / d a t a - s c i e n c e - p o r t f o l i o - m a c h i n e - l e a r n i n g / V i k   P a r u c h u r i [ 5 2 ]   k o k i a l o v e s ,   z k y 0 0 1 ,   v i m - k a k a l i ,   c p o s t u r e ,   i d e a s 4 u   w x y   L C T T [ 5 3 ]   L i n u x     I D   [ 1 ] :   h t t p s : / / w w w . d a t a q u e s t . i o / b l o g / d a t a - s c i e n c e - p o r t f o l i o - p r o j e c t / [ 2 ] :   h t t p s : / / w w w . d a t a q u e s t . i o / b l o g / d a t a - s c i e n c e - p o r t f o l i o - m a c h i n e - l e a r n i n g / # e m a i l - s i g n u p [ 3 ] :   h t t p s : / / g i t h u b . c o m / d a t a q u e s t i o / l o a n - p r e d i c t i o n [ 4 ] :   h t t p s : / / w w w . d a t a q u e s t . i o / b l o g / d a t a - s c i e n c e - p o r t f o l i o - p r o j e c t / [ 5 ] :   h t t p s : / / a t o m . i o / [ 6 ] :   h t t p s : / / w w w . j e t b r a i n s . c o m / p y c h a r m / a s s e m b l e . p y a s s e m b l e . p y p y t h o n   a s s e m b l e . p y a s s e m b l e . p y p r o c e s s e d 1 .   l o a n - p r e d i c t i o n 2 .     d a t a 3 .           A c q u i s i t i o n _ 2 0 1 2 Q 1 . t x t 4 .           A c q u i s i t i o n _ 2 0 1 2 Q 2 . t x t 5 .           P e r f o r m a n c e _ 2 0 1 2 Q 1 . t x t 6 .           P e r f o r m a n c e _ 2 0 1 2 Q 2 . t x t 7 .           . . . 8 .     p r o c e s s e d 9 .           A c q u i s i t i o n . t x t 1 0 .           P e r f o r m a n c e . t x t 1 1 .     . g i t i g n o r e 1 2 .     a s s e m b l e . p y 1 3 .     R E A D M E . m d 1 4 .     r e q u i r e m e n t s . t x t 1 5 .     s e t t i n g s . p y
[ 7 ] :   h t t p : / / p a n d a s . p y d a t a . o r g / [ 8 ] :   h t t p : / / s c i k i t - l e a r n . o r g / [ 9 ] :   h t t p : / / p a n d a s . p y d a t a . o r g / p a n d a s - d o c s / s t a b l e / g e n e r a t e d / p a n d a s . D a t a F r a m e . h t m l [ 1 0 ] :   h t t p s : / / c o l l e g e s c o r e c a r d . e d . g o v / d a t a / [ 1 1 ] :   h t t p s : / / r e d d i t . c o m / r / d a t a s e t s [ 1 2 ] :   h t t p s : / / c l o u d . g o o g l e . c o m / b i g q u e r y / p u b l i c - d a t a / # u s a - n a m e s [ 1 3 ] :   h t t p s : / / g i t h u b . c o m / c a e s a r 0 3 0 1 / a w e s o m e - p u b l i c - d a t a s e t s [ 1 4 ] :   h t t p : / / w w w . f a n n i e m a e . c o m / p o r t a l / f u n d i n g - t h e - m a r k e t / d a t a / l o a n - p e r f o r m a n c e - d a t a . h t m l [ 1 5 ] :   h t t p : / / w w w . f a n n i e m a e . c o m / p o r t a l / f u n d i n g - t h e - m a r k e t / d a t a / l o a n - p e r f o r m a n c e - d a t a . h t m l [ 1 6 ] :   h t t p s : / / l o a n p e r f o r m a n c e d a t a . f a n n i e m a e . c o m / l p p u b - d o c s / l p p u b _ g l o s s a r y . p d f [ 1 7 ] :   h t t p s : / / l o a n p e r f o r m a n c e d a t a . f a n n i e m a e . c o m / l p p u b - d o c s / l p p u b _ f a q . p d f [ 1 8 ] :   h t t p s : / / l o a n p e r f o r m a n c e d a t a . f a n n i e m a e . c o m / l p p u b - d o c s / l p p u b _ f i l e _ l a y o u t . p d f [ 1 9 ] :   h t t p s : / / l o a n p e r f o r m a n c e d a t a . f a n n i e m a e . c o m / l p p u b - d o c s / a c q u i s i t i o n - s a m p l e - f i l e . t x t [ 2 0 ] :   h t t p s : / / l o a n p e r f o r m a n c e d a t a . f a n n i e m a e . c o m / l p p u b - d o c s / p e r f o r m a n c e - s a m p l e - f i l e . t x t [ 2 1 ] :   h t t p s : / / g i t h u b . c o m / g i t h u b / g i t i g n o r e / b l o b / m a s t e r / P y t h o n . g i t i g n o r e [ 2 2 ] :   h t t p s : / / g i t h u b . c o m / d a t a q u e s t i o / l o a n - p r e d i c t i o n / b l o b / m a s t e r / . g i t i g n o r e [ 2 3 ] :   h t t p s : / / g i t h u b . c o m / a d a m - p / m a r k d o w n - h e r e / w i k i / M a r k d o w n - C h e a t s h e e t [ 2 4 ] :   h t t p s : / / g i t h u b . c o m / d a t a q u e s t i o / l o a n - p r e d i c t i o n [ 2 5 ] :   h t t p s : / / g i t h u b . c o m / d a t a q u e s t i o / l o a n - p r e d i c t i o n / b l o b / m a s t e r / r e q u i r e m e n t s . t x t [ 2 6 ] :   h t t p s : / / w w w . c o n t i n u u m . i o / d o w n l o a d s [ 2 7 ] :   h t t p s : / / l o a n p e r f o r m a n c e d a t a . f a n n i e m a e . c o m / l p p u b / i n d e x . h t m l [ 2 8 ] :   h t t p s : / / l o a n p e r f o r m a n c e d a t a . f a n n i e m a e . c o m / l p p u b - d o c s / l p p u b _ f i l e _ l a y o u t . p d f [ 2 9 ] :   h t t p s : / / g i t h u b . c o m / d a t a q u e s t i o / l o a n - p r e d i c t i o n / b l o b / m a s t e r / s e t t i n g s . p y [ 3 0 ] :   h t t p s : / / l o a n p e r f o r m a n c e d a t a . f a n n i e m a e . c o m / l p p u b - d o c s / l p p u b _ f i l e _ l a y o u t . p d f [ 3 1 ] :   h t t p : / / p a n d a s . p y d a t a . o r g / p a n d a s - d o c s / s t a b l e / g e n e r a t e d / p a n d a s . r e a d _ c s v . h t m l [ 3 2 ] :   h t t p : / / p a n d a s . p y d a t a . o r g / p a n d a s - d o c s / s t a b l e / g e n e r a t e d / p a n d a s . D a t a F r a m e . h t m l [ 3 3 ] :   h t t p s : / / g i t h u b . c o m / d a t a q u e s t i o / l o a n - p r e d i c t i o n / b l o b / m a s t e r / a s s e m b l e . p y [ 3 4 ] :   h t t p : / / p a n d a s . p y d a t a . o r g / p a n d a s - d o c s / s t a b l e / g e n e r a t e d / p a n d a s . D a t a F r a m e . g r o u p b y . h t m l [ 3 5 ] :   h t t p : / / p a n d a s . p y d a t a . o r g / p a n d a s - d o c s / s t a b l e / g e n e r a t e d / p a n d a s . D a t a F r a m e . a p p l y . h t m l [ 3 6 ] :   h t t p s : / / d o c s . p y t h o n . o r g / 3 / l i b r a r y / s t d t y p e s . h t m l # d i c t . g e t [ 3 7 ] :   h t t p s : / / g i t h u b . c o m / d a t a q u e s t i o / l o a n - p r e d i c t i o n / b l o b / m a s t e r / a n n o t a t e . p y [ 3 8 ] :   h t t p : / / s c i k i t - l e a r n . o r g / [ 3 9 ] :   h t t p : / / s c i k i t - l e a r n . o r g / s t a b l e / m o d u l e s / g e n e r a t e d / s k l e a r n . c r o s s _ v a l i d a t i o n . c r o s s _ v a l _ p r e d i c t . h t m l [ 4 0 ] :   h t t p s : / / e n . w i k i p e d i a . o r g / w i k i / B i n a r y _ c l a s s i f i c a t i o n [ 4 1 ] :   h t t p s : / / e n . w i k i p e d i a . o r g / w i k i / L o g i s t i c _ r e g r e s s i o n [ 4 2 ] :   h t t p : / / s c i k i t - l e a r n . o r g / s t a b l e / m o d u l e s / g e n e r a t e d / s k l e a r n . l i n e a r _ m o d e l . L o g i s t i c R e g r e s s i o n . h t m l [ 4 3 ] :   h t t p : / / s c i k i t - l e a r n . o r g / s t a b l e / m o d u l e s / g e n e r a t e d / s k l e a r n . l i n e a r _ m o d e l . L o g i s t i c R e g r e s s i o n . h t m l [ 4 4 ] :   h t t p s : / / g i t h u b . c o m / d a t a q u e s t i o / l o a n - p r e d i c t i o n / b l o b / m a s t e r / p r e d i c t . p y [ 4 5 ] :   h t t p s : / / g i t h u b . c o m / d a t a q u e s t i o / l o a n - p r e d i c t i o n / b l o b / m a s t e r / R E A D M E . m d [ 4 6 ] :   h t t p s : / / g i t h u b . c o m / d a t a q u e s t i o / l o a n - p r e d i c t i o n [ 4 7 ] :   h t t p s : / / w w w . g i t h u b . c o m / [ 4 8 ] :   h t t p s : / / w w w . d a t a q u e s t . i o / b l o g / d a t a - s c i e n c e - p o r t f o l i o - p r o j e c t / [ 4 9 ] :   h t t p s : / / w w w . d a t a q u e s t . i o / b l o g / h o w - t o - s e t u p - a - d a t a - s c i e n c e - b l o g / [ 5 0 ] :   h t t p s : / / w w w . d a t a q u e s t . i o / b l o g / b u i l d - a - d a t a - s c i e n c e - p o r t f o l i o / [ 5 1 ] :   h t t p s : / / w w w . d a t a q u e s t . i o / b l o g / f r e e - d a t a s e t s - f o r - p r o j e c t s [ 5 2 ] :   h t t p s : / / w w w . d a t a q u e s t . i o / b l o g [ 5 3 ] :   h t t p s : / / g i t h u b . c o m / L C T T / T r a n s l a t e P r o j e c t
您需要登录后才可以回帖 登录 | 立即注册

本版积分规则