기본 콘텐츠로 건너뛰기

[최적화] 계산하는데 10분이나 걸려요

동료가 고객사에서 "2~3분 걸리는 작업을 10분 걸린다고 말한다"며 화면에 걸리는 시간을 표시해야겠다고 합니다.
10분은 아니지만 2~3분도 사용자의 인내심을 요구하는 시간이기 때문에 프로그램 최적화를 하기로 했습니다.
아래는 진행중인 프로젝트(Cable AutoRouting) 대상으로 진행한 최적화에 대한 내용입니다.

1. 상황에 맞는 자료 구조를 선택해야 합니다.

Map 클래스의 Node 접근이 빈번하게 일어난다고 할때,

Nodes 자료 구조로 List를 사용했다고 하면 접근을 위해 아래와 같은 코드가 필요합니다.

return map.Nodes.Cast<Node>().Where(c1 => c1.ObjectID == oFeature.ObjectID).FirstOrDefault();

이때 걸리는 시간은 $O(n)$이 됩니다.

하지만 자료 구조를 Dictionary를 사용한다면 접근하는데 걸리는 시간은 $O(1)$이 됩니다.

if(this._Nodes.ContainsKey(oFeature))
{
	return this._Nodes[oFeature];
}

2. 속도를 위해 공간을 희생합니다.
계산을 시작하기 전에 필요한 모든 정적 데이타를 메모리에 올리는 것이 속도에 이득이 됩니다.
처음에는 에지를 생성하면서 노드를 생성하는 로직이었는데 모든 노드를 생성한 후에 노드간 에지를 연결하는 방식으로 바꾸었습니다.
이렇게 함으로 에지를 생성하기 위해 노드를 찾는 부분을 제거할 수 있었습니다. 그리고 로직도 좀더 단순화 되었습니다.

3. 빈번하게 호출되는 부분을 최소화합니다.

빈번하게 호출되는 함수의 결과를 저장하여 재사용하는 것이 속도를 높일 수 있습니다. 그리고 이 함수를 캡슐화하여 외부로부터 숨기는 것이 디자인 측면에서 좋습니다. 함수 호출보다 저장해둔 결과를 사용하도록 유도해야 합니다.

아래 코드는 OrientedRangeBox 속성을 참조할때마다 GetOrientedRangeBox 함수를 호출하여 OrientedRangeBox를 구하고 있습니다.

public virtual OrientedRangeBox OrientedRangeBox
{
    get
    {
        return CommonUtil.GetOrientedRangeBox(this._oFeature);
    }
}

아래와 같이 바꾸면 처음 OrientedRangeBox 속성을 참조할때만 계산을 하고 나머지는 계산된 결과를 사용하게 됩니다.

protected OrientedRangeBox _OrientedRangeBox = null;
public virtual OrientedRangeBox OrientedRangeBox
{
    get
    {
        if(this._OrientedRangeBox == null)
        {
            this._OrientedRangeBox = CommonUtil.GetOrientedRangeBox(this._oFeature);
        }          
        return this._OrientedRangeBox;
      }
 }

4. 비용이 많이 드는 호출을 최소화합니다. 

OrientedRangeBox의 Intersects 함수는 RangeBox의 Intersects 함수보다 비용이 많이 듭니다.
따라서 
OrientedRangeBox의 Intersects를 사용하기 전에 미리 RangeBox의 Intersects를 이용하여 OrientedRangeBox의 Intersects 함수 사용을 최소화합니다.

모든 노드의 OrientedRangeBox의 Intersects를 호출하는 것이 아니라 RangeBox의 Intersects를 호출하여 교차 가능성이 있는 노드들에 대해 다시 OrientedRangeBox의 Intersects를 호출하여 최종 교차 여부를 판단합니다.

List<Node> oIntersectsWithRangeBox = Map.Nodes.Where(x => x.Range.Intersects(oVirtualNode.Range)).ToList();
  List<Node> oIntersectsWithOrientedRangeBox = oIntersectsWithRangeBox.Where(x => x.IntersectsWithOrientedRangeBox(oVirtualNode)).ToList();

5. 프로파일러을 이용하여 병목 부분을 확인하고 최적화를 진행합니다.

VS의 성능 프로파일러를 통하여 가장 호출 빈도수가 높은 부분을 확인하여 최적화를 진행합니다. 여기서는 GetConnectedNodesByFeature 함수의 호출 빈도수가 높게 나왔습니다.


최적화 후에 기존 2분이 소요되던 부분이 30초로 줄어들었습니다.


댓글

이 블로그의 인기 게시물

80040154 오류로 인해 CLSID가 {xxxx-...}인 구성 요소의 COM 클래스 팩터리를 검색하지 못했습니다.

원문보기 .NET 으로 만든 응용프로그램에서 com 객체를 호출한 경우 Windows7 64bit 에서 제목과 같은 에러가 발생했다. Win32 COM 과 .NET 프로그램간의 호환성 때문에 생긴 문제였다. 원인은 .NET 실행시 JIT 컴파일러에 의해 최적화된 기계어로 변환되기 때문.. Win32 COM은 컴파일시.. Win32 COM에 맞춰 빌드 속성에서 하위버전으로 맞춰 컴파일을 다시하는 방법도 있지만 메인 프로젝트가 .NET이라면 참조되는 모든 프로젝트를 다 바꿔야할 노릇.. 또 다른 방법은 COM+를 이용하여 독립적으로 만드는 것이다. 분리시키는 방법은 아래 주소해서 확인할 수 있다. http://support.microsoft.com/kb/281335 나의 경우는 Win32 COM DLL을 64비트 .NET 프로그램에서 참조하니 COM 객체를 제대로 호출하지 못하였습니다. 그래서 .NET 프로그램의 Target Machine을 x86으로 설정하니 제대로 COM 객체를 호출하였습니다.

[Pyinstaller] 실행 파일 관리자 권한 획득하기

고객사에서 일부 사용자에게서 프로그램 오류가 발생한다며 아래와 같이 에러 캡처를 보내왔습니다. 프로그램에서 로그를 남기기 위해 로그 파일을 생성하는데 권한의 문제로 로그 파일을 생성하지 못해 프로그램 오류가 발생한 것 같습니다. 처음에는 Python 코드에서 관리자 권한을 요청하는 코드를 넣으려고 했는데, 실제로 Stackoverflow를 찾아보면 이런 내용이 나옵니다. 프로그램이 관리자 권한으로 실행되지 않았다면 관리자 권한으로 다시 프로그램을 실행시키는 코드입니다. import os import sys import win32com.shell.shell as shell ASADMIN = 'asadmin' if sys.argv[-1] != ASADMIN: script = os.path.abspath(sys.argv[0]) params = ' '.join([script] + sys.argv[1:] + [ASADMIN]) shell.ShellExecuteEx(lpVerb='runas', lpFile=sys.executable, lpParameters=params) sys.exit(0) 하지만 개인적으로 이런 방식은 마음에 들지 않았고 조금 더 찾아보니 Pyinstaller로 exe 파일을 만들 때 옵션을 설정하여 관리자 권한을 요청하도록 할 수 있다고 합니다. --uac-admin을 옵션에 추가하면 프로그램 실행 시 관리자 권한을 요청할 수 있습니다. pyinstaller.exe --uac-admin sample.py 하지만 안타깝게도 이 방식은 원하는 대로 동작하지 않았습니다. 마지막으로 manifest 파일을 이용하여 시도해보았습니다. spec 파일을 이용하여 pyinstaller로 빌드하면 <실행 파일 이름>.manifest 라는 파일이 생성됩니다. 파일에서 아랫부분을 찾아볼 수 있습니다. <security> <re

초간단 프로그램 락 걸기

프로그램에 락을 걸 일이 생겨났다. 하드웨어 락을 걸면 쉬울텐데 그 정도는 아니고 프로그램의 실행 날짜를 제한 해 달라고 한다. 그래서 파일(license.lic)을 가지고 락을 걸리고 결정을 했다. 요구 사항은 아래와 같다. 1. license.lic 파일이 없으면 프로그램을 실행 할수 없게 한다. 2. 지정한 날짜를 넘어서는 프로그램을 실행 할수 없게 한다. 3. 사용자가 시스템 날짜를 되돌렸을때 인식하여 프로그램을 실행 할수 없게 한다. 음.... 1.번 문제는 사용자가 프로그램을 실행하기 위해서 license.lic 파일을 받아야만 한다. license.lic 파일에는 최근 실행 날짜/종료날짜 이런식으로 적도록 한다.(물론 내용은 암호화 한다.) 최근 실행날짜는 프로그램이 실행때마다 업데이트 하도록 하고 시스템 날짜와 비교하여 시스템 날짜가 최근 실행 날짜보다 이전의 날짜면 시스템 날짜를 되돌렸다고 인식하도록 한다.(3.번 문제 해결) 시스템 날짜와 종료 날짜를 비교하여 시스템 날짜가 종료 날짜를 넘으면 프로그램을 실행 할수 없도록 한다.(2.번 문제 해결)