기본 콘텐츠로 건너뛰기

[ML] 결정트리(Decision Tree) 모델

대상값이 속하는 구간 나타내기(ing)

기준 구간에서 대상값이 속하는 구간을 나타낼 필요가 있다.
단지 구간을 표시하기 위해 pd.cut() 함수를 사용하면 된다.
그러나 이 함수는 기준 구간을 별도로 객체화 할 수 없다.
이 경우 다음 함수를 사용할 수 있다.

pd.Intereval(left, right, closed='right')
이 함수는  left< value <= right 즉, (left, right]로 결과를 반환하는 함수이다.
위 결과 중 '(': 개구간(open interval)
 '[': 폐구간(closed interval)
이 함수의 인수중 closed는 폐구간의 위치를 설정하는 것으로 그 인수는 다음과 같다.
'left;, ;right', 'both', 'neither'을 선택할 수 있고 기본값은 'right'이다.

In [1]: a=np.random.randint(1, 100, 5)
예로 사용할 데이터를 만들기 위해 임의의 수를 추출했다. 그 객체는 코드 [2]와 같다.
In [2]: a
Out[2]: array([14, 26, 46, 76, 53])

코드 [2]의 결과를 기준으로 기준이 되는 10개의 구간을 생성하기 위해 각 구간의 값들을 linspace() 함수를 사용하여 추출하였다. 이 함수는 지정한 구간에 일정한 길이로 지정한 수 만큼을 생성한다.

In [3]:a_int=np.linspace(min(a)-1, max(a)+1, 10)
In [4]: a_int
Out[4]:
array([ 13.        ,  20.11111111,  27.22222222,  34.33333333,
        41.44444444,  48.55555556,  55.66666667,  62.77777778,
        69.88888889,  77.        ])
위의 결과에 객체 a의 각 원소가 어느 위치에 속하는 가를 나타내기 위해 pd.cut()함수를 사용한다.

In [5]: b=pd.cut(a, bins=a_int)

In [6]: b
Out[6]:
[(13.0, 20.111], (20.111, 27.222], (41.444, 48.556], (69.889, 77.0], (48.556, 55.667]]
Categories (9, interval[float64]): [(13.0, 20.111] < (20.111, 27.222] < (27.222, 34.333] < (34.333, 41.444] ... (48.556, 55.667] < (55.667, 62.778] < (62.778, 69.889] < (69.889, 77.0]]

위의 결과를 바탕으로 기준이 되는 구간 (코드 [6]결과의 Categories)을 사용하고자 할 경우 이 결과를 별개의 객체로 나타낼 수 없다. 그러므로 pd.Interval()을 사용한다.

In [7]: inter_ref=[pd.Interval(a_int[i-1], a_int[i], closed='left') for i in range(1, len(a_int))]
In [8]: inter_ref
Out[8]:
[Interval(13.0, 20.111111111111111, closed='left'),
 Interval(20.111111111111111, 27.222222222222221, closed='left'),
 Interval(27.222222222222221, 34.333333333333329, closed='left'),
 Interval(34.333333333333329, 41.444444444444443, closed='left'),
 Interval(41.444444444444443, 48.555555555555557, closed='left'),
 Interval(48.555555555555557, 55.666666666666664, closed='left'),
 Interval(55.666666666666664, 62.777777777777771, closed='left'),
 Interval(62.777777777777771, 69.888888888888886, closed='left'),
 Interval(69.888888888888886, 77.0, closed='left')]

코드 [8]의 결과는 코드 [6]의 Category 값들과 같다.
이러한 결과를 가지고 a의 각 원소가 inter_ref의 어느 구간에 속하는 가를 표로 나타내 보자.
이러한 표현을 위해 inter_ref의 값을 인덱스로 하고 그에 해당하는 값을 모두 0으로 하는 표를 작성한다.
코드 [9]에서 사용된 함수
np.repeat(value, repeats, axis=None);
value를 지정한 반복수(repeats)만큼 생성하여 DataFrame을 생성한다. axis에 의해 축을 결정할 수 있다.
In [9]: z=pd.DataFrame(np.repeat(0, len(inter_ref)), index=inter_ref)
In [10]: z
Out[10]:
                                0
[13.0, 20.1111111111)           0
[20.1111111111, 27.2222222222)  0
[27.2222222222, 34.3333333333)  0
[34.3333333333, 41.4444444444)  0
[41.4444444444, 48.5555555556)  0
[48.5555555556, 55.6666666667)  0
[55.6666666667, 62.7777777778)  0
[62.7777777778, 69.8888888889)  0
[69.8888888889, 77.0)           0

코드 [11]에서 생성한 테이블에 대상 객체의 원소가 속하는 구간에 그 값 또는 그 값의 인덱스등을 입력하는 방식으로 작성한다.

In [11]: z=pd.DataFrame(np.repeat(0, len(inter_ref)), index=inter_ref)
In [12]:
for j in a:
    for i in inter_ref:
        if j in i:
            z.ix[i,0]=j
            break

In [13]: z
Out[13]:
                                 0
[13.0, 20.1111111111)           14
[20.1111111111, 27.2222222222)  26
[27.2222222222, 34.3333333333)   0
[34.3333333333, 41.4444444444)   0
[41.4444444444, 48.5555555556)  46
[48.5555555556, 55.6666666667)  53
[55.6666666667, 62.7777777778)   0
[62.7777777778, 69.8888888889)   0
[69.8888888889, 77.0)           76

그러나 이 경우 대상값 중에 같은 값이 있을 경우 최종 것만 채워진다.
In[14]: z=pd.DataFrame(np.repeat(0, len(inter_ref)), index=inter_ref)
In[15]:
for j in [14, 14, 45, 56]:
    for i in inter_ref:
        if j in i:
            z.ix[i,0]=j
            break

In[16]: z
Out[16]:
                                 0
[13.0, 20.1111111111)           14
[20.1111111111, 27.2222222222)   0
[27.2222222222, 34.3333333333)   0
[34.3333333333, 41.4444444444)   0
[41.4444444444, 48.5555555556)  45
[48.5555555556, 55.6666666667)   0
[55.6666666667, 62.7777777778)  56
[62.7777777778, 69.8888888889)   0
[69.8888888889, 77.0)            0

댓글

이 블로그의 인기 게시물

[Linear Algebra] 유사변환(Similarity transformation)

유사변환(Similarity transformation) n×n 차원의 정방 행렬 A, B 그리고 가역 행렬 P 사이에 식 1의 관계가 성립하면 행렬 A와 B는 유사행렬(similarity matrix)이 되며 행렬 A를 가역행렬 P와 B로 분해하는 것을 유사 변환(similarity transformation) 이라고 합니다. $$\tag{1} A = PBP^{-1} \Leftrightarrow P^{-1}AP = B $$ 식 2는 식 1의 양변에 B의 고유값을 고려한 것입니다. \begin{align}\tag{식 2} B - \lambda I &= P^{-1}AP – \lambda P^{-1}P\\ &= P^{-1}(AP – \lambda P)\\ &= P^{-1}(A - \lambda I)P \end{align} 식 2의 행렬식은 식 3과 같이 정리됩니다. \begin{align} &\begin{aligned}\textsf{det}(B - \lambda I ) & = \textsf{det}(P^{-1}(AP – \lambda P))\\ &= \textsf{det}(P^{-1}) \textsf{det}((A – \lambda I)) \textsf{det}(P)\\ &= \textsf{det}(P^{-1}) \textsf{det}(P) \textsf{det}((A – \lambda I))\\ &= \textsf{det}(A – \lambda I)\end{aligned}\\ &\begin{aligned}\because \; \textsf{det}(P^{-1}) \textsf{det}(P) &= \textsf{det}(P^{-1}P)\\ &= \textsf{det}(I)\end{aligned}\end{align} 유사행렬의 특성 유사행렬인 두 정방행렬 A와 B는 'A ~ B' 와 같

[matplotlib] 히스토그램(Histogram)

히스토그램(Histogram) 히스토그램은 확률분포의 그래픽적인 표현이며 막대그래프의 종류입니다. 이 그래프가 확률분포와 관계가 있으므로 통계적 요소를 나타내기 위해 많이 사용됩니다. plt.hist(X, bins=10)함수를 사용합니다. x=np.random.randn(1000) plt.hist(x, 10) plt.show() 위 그래프의 y축은 각 구간에 해당하는 갯수이다. 빈도수 대신 확률밀도를 나타내기 위해서는 위 함수의 매개변수 normed=True로 조정하여 나타낼 수 있다. 또한 매개변수 bins의 인수를 숫자로 전달할 수 있지만 리스트 객체로 지정할 수 있다. 막대그래프의 경우와 마찬가지로 각 막대의 폭은 매개변수 width에 의해 조정된다. y=np.linspace(min(x)-1, max(x)+1, 10) y array([-4.48810153, -3.54351935, -2.59893717, -1.65435499, -0.70977282, 0.23480936, 1.17939154, 2.12397372, 3.0685559 , 4.01313807]) plt.hist(x, y, normed=True) plt.show()

R 미분과 적분

내용 expression 미분 2차 미분 mosaic를 사용한 미분 적분 미분과 적분 R에서의 미분과 적분 함수는 expression()함수에 의해 생성된 표현식을 대상으로 합니다. expression expression(문자, 또는 식) 이 표현식의 평가는 eval() 함수에 의해 실행됩니다. > ex1<-expression(1+0:9) > ex1 expression(1 + 0:9) > eval(ex1) [1] 1 2 3 4 5 6 7 8 9 10 > ex2<-expression(u, 2, u+0:9) > ex2 expression(u, 2, u + 0:9) > ex2[1] expression(u) > ex2[2] expression(2) > ex2[3] expression(u + 0:9) > u<-0.9 > eval(ex2[3]) [1] 0.9 1.9 2.9 3.9 4.9 5.9 6.9 7.9 8.9 9.9 미분 D(표현식, 미분 변수) 함수로 미분을 실행합니다. 이 함수의 표현식은 expression() 함수로 생성된 객체이며 미분 변수는 다음 식의 분모의 변수를 의미합니다. $$\frac{d}{d \text{변수}}\text{표현식}$$ 이 함수는 어떤 함수의 미분의 결과를 표현식으로 반환합니다. > D(expression(2*x^3), "x") 2 * (3 * x^2) > eq<-expression(log(x)) > eq expression(log(x)) > D(eq, "x") 1/x > eq2<-expression(a/(1+b*exp(-d*x))); eq2 expression(a/(1 + b * exp(-d * x))) > D(eq2, "x") a * (b * (exp(-d * x) * d))/(1 + b