기본 콘텐츠로 건너뛰기

[ML] 결정트리(Decision Tree) 모델

회귀분석을 위한 주가데이터 만들기_DayInInterRetStockS 해설

일일주가 데이터에서 지정한 열을 기준으로 일중 수익률, 일간 수익률, 그리고 지정한 일전(preday)의 자료와 결합합니다.
목표한 자료를 위해 사용자 정의 클래스를 작성하였습니다.

import numpy as np
import pandas as pd
import copy

class DayInInterRetStockS:
    def __init__(self, da):
        self.da=da
        self.nme=[i for i in self.da.columns]
    def InRetS(self, DeColN):
        nme0=copy.deepcopy(self.nme)
        nme1=self.nme[DeColN]
        del(nme0[DeColN]) 
        nme2=[ ]
        for i in nme0:
            nme2.append(nme1+":"+i+":ret")
            m=0
        re=pd.DataFrame()
        for j in nme0:
            re[nme2[m]]=(self.da[nme1]-self.da[j])/ self.da[j] *100
            m=m+1
        self.Inday=re.drop(nme2[len(nme2)-1], axis=1)
        return(self.Inday)
    def IntRetS(self, Int=1):
        nme1=[i+':intRet' for i in self.nme]
        self.intrad=((self.da-self.da.shift(Int))/self.da.shift(Int)*100)
        self.intrad.columns=nme1
        return(self.intrad)
    def ShiftdS(self, int=3):
        self.d=self.da.shift(int)
        self.d.columns=['olag','hlag','llag','clag','vlag']
        return(self.d)

클래스 객체를 만들기 위해 시가, 고가, 저가, 종가, 거래량으로 구성되어 있는 원 객체를 전달하여야 합니다.

>>> kl_da=DayInInterRetStockS(kl1)
종가를 기준으로 일중, 일간 수익률을 계산합니다.
>>> kl_cpIn=kl_da.InRetS(3)
>>> kl_cpIn.head(1)
                              Close:Open:ret  Close:High:ret  Close:Low:ret
2017-09-20 15:30:00       -0.444708       -1.409278       0.629308
일간수익률을 계산하기 위해서는 당일을 기준으로 얼마전의 데이터를 대상으로 할지를 정해야 합니다. 그러므로 Int라는 매개변수에 인수를 전달합니다. 기본값은 1입니다.
당일을 기준으로 그 이전의 값들은 계산되지 않습니다.
>>> kl_cpInt=kl_da.IntRetS(2)
>>> kl_cpInt.head(3)
Out[180]:
                     Open:intRet  High:intRet  Low:intRet  Close:intRet  \
2017-09-20 15:30:00          NaN          NaN         NaN           NaN 
2017-09-21 15:30:00          NaN          NaN         NaN           NaN 
2017-09-22 15:30:00    -0.652238    -0.939518   -1.048846     -1.220965 

                     Volume:intRet
2017-09-20 15:30:00            NaN
2017-09-21 15:30:00            NaN
2017-09-22 15:30:00        15.1339

마지막으로 당일을 기준으로 몇일전의 자료를 당일과 같은 행으로 할지를 정해야 합니다. 이것은 ShiftS() 메소드에 의해 계산됩니다.

>>> kl_cpShift=kl_da.ShiftdS()
>>> kl_cpShift.head(4)

                        olag     hlag     llag     clag        vlag
2017-09-20 15:30:00      NaN      NaN      NaN      NaN         NaN
2017-09-21 15:30:00      NaN      NaN      NaN      NaN         NaN
2017-09-22 15:30:00      NaN      NaN      NaN      NaN         NaN
2017-09-25 15:30:00  16865.0  17030.0  16685.0  16790.0  13680836.0

위의 결과와 원 결과를 모두 결합하여 최종 사용할 자료를 생성하기 위해 다음 사용자 정의 함수를 작성합니다.

def InInterShiftS(da, DeColN, inter=1, shiftd=3):
    d=DayInInterRetStockS(da)
    din=d.InRetS(DeColN)
    dinter=d.IntRetS(inter)
    dshift=d.ShiftdS(shiftd)
    tot=pd.concat([da, din, dinter, dshift], axis=1)
    tot1=tot.dropna()
    return(tot1) 

>>> da=InInterShiftS(kl1, 3)
>>> da.head(1)
                      Open   High    Low  Close   Volume  Close:Open:ret  \
2017-09-25 15:30:00  16600  16650  16490  16575  9337207       -0.150602 

                     Close:High:ret  Close:Low:ret  Open:intRet  High:intRet  \
2017-09-25 15:30:00        -0.45045       0.515464    -0.925097     -1.30409 

                     Low:intRet  Close:intRet  Volume:intRet     olag  \
2017-09-25 15:30:00   -0.121139     -0.060295     -40.720964  16865.0 

                        hlag     llag     clag        vlag
2017-09-25 15:30:00  17030.0  16685.0  16790.0  13680836.0


댓글

이 블로그의 인기 게시물

[Linear Algebra] 유사변환(Similarity transformation)

유사변환(Similarity transformation) n×n 차원의 정방 행렬 A, B 그리고 가역 행렬 P 사이에 식 1의 관계가 성립하면 행렬 A와 B는 유사행렬(similarity matrix)이 되며 행렬 A를 가역행렬 P와 B로 분해하는 것을 유사 변환(similarity transformation) 이라고 합니다. $$\tag{1} A = PBP^{-1} \Leftrightarrow P^{-1}AP = B $$ 식 2는 식 1의 양변에 B의 고유값을 고려한 것입니다. \begin{align}\tag{식 2} B - \lambda I &= P^{-1}AP – \lambda P^{-1}P\\ &= P^{-1}(AP – \lambda P)\\ &= P^{-1}(A - \lambda I)P \end{align} 식 2의 행렬식은 식 3과 같이 정리됩니다. \begin{align} &\begin{aligned}\textsf{det}(B - \lambda I ) & = \textsf{det}(P^{-1}(AP – \lambda P))\\ &= \textsf{det}(P^{-1}) \textsf{det}((A – \lambda I)) \textsf{det}(P)\\ &= \textsf{det}(P^{-1}) \textsf{det}(P) \textsf{det}((A – \lambda I))\\ &= \textsf{det}(A – \lambda I)\end{aligned}\\ &\begin{aligned}\because \; \textsf{det}(P^{-1}) \textsf{det}(P) &= \textsf{det}(P^{-1}P)\\ &= \textsf{det}(I)\end{aligned}\end{align} 유사행렬의 특성 유사행렬인 두 정방행렬 A와 B는 'A ~ B' 와 같

[matplotlib] 히스토그램(Histogram)

히스토그램(Histogram) 히스토그램은 확률분포의 그래픽적인 표현이며 막대그래프의 종류입니다. 이 그래프가 확률분포와 관계가 있으므로 통계적 요소를 나타내기 위해 많이 사용됩니다. plt.hist(X, bins=10)함수를 사용합니다. x=np.random.randn(1000) plt.hist(x, 10) plt.show() 위 그래프의 y축은 각 구간에 해당하는 갯수이다. 빈도수 대신 확률밀도를 나타내기 위해서는 위 함수의 매개변수 normed=True로 조정하여 나타낼 수 있다. 또한 매개변수 bins의 인수를 숫자로 전달할 수 있지만 리스트 객체로 지정할 수 있다. 막대그래프의 경우와 마찬가지로 각 막대의 폭은 매개변수 width에 의해 조정된다. y=np.linspace(min(x)-1, max(x)+1, 10) y array([-4.48810153, -3.54351935, -2.59893717, -1.65435499, -0.70977282, 0.23480936, 1.17939154, 2.12397372, 3.0685559 , 4.01313807]) plt.hist(x, y, normed=True) plt.show()

R 미분과 적분

내용 expression 미분 2차 미분 mosaic를 사용한 미분 적분 미분과 적분 R에서의 미분과 적분 함수는 expression()함수에 의해 생성된 표현식을 대상으로 합니다. expression expression(문자, 또는 식) 이 표현식의 평가는 eval() 함수에 의해 실행됩니다. > ex1<-expression(1+0:9) > ex1 expression(1 + 0:9) > eval(ex1) [1] 1 2 3 4 5 6 7 8 9 10 > ex2<-expression(u, 2, u+0:9) > ex2 expression(u, 2, u + 0:9) > ex2[1] expression(u) > ex2[2] expression(2) > ex2[3] expression(u + 0:9) > u<-0.9 > eval(ex2[3]) [1] 0.9 1.9 2.9 3.9 4.9 5.9 6.9 7.9 8.9 9.9 미분 D(표현식, 미분 변수) 함수로 미분을 실행합니다. 이 함수의 표현식은 expression() 함수로 생성된 객체이며 미분 변수는 다음 식의 분모의 변수를 의미합니다. $$\frac{d}{d \text{변수}}\text{표현식}$$ 이 함수는 어떤 함수의 미분의 결과를 표현식으로 반환합니다. > D(expression(2*x^3), "x") 2 * (3 * x^2) > eq<-expression(log(x)) > eq expression(log(x)) > D(eq, "x") 1/x > eq2<-expression(a/(1+b*exp(-d*x))); eq2 expression(a/(1 + b * exp(-d * x))) > D(eq2, "x") a * (b * (exp(-d * x) * d))/(1 + b