기본 콘텐츠로 건너뛰기

11월, 2014의 게시물 표시

다시 또 한 잔

Valgrind를 이용한 프로파일링

옛 날에는 gcc 옵션에 -pg 붙여서 컴파일하고, 실행이 끝나면 만들어진 gmon.out과 gprof를 이용해서 프로파일링을 했더랬지. Valgrind와 서브 툴을 이용하면 비슷한 작업을 할 수 있는데, kcachegrind라는 GUI툴을 이용하면 그림까지 잘 그려준다. (물론 기존 gprof를 이용해서 그림을 그리는 방법이 없는 것은 아니다) 참조: 6. Callgrind: a call-graph generating cache and branch prediction profiler valgrind --tool=callgrind 로 프로그램을 실행하고 결과로 나온 callgrind.out.[PID] 프로파일링 파일을 만들어낸다. $ valgrind --tool=callgrind ./my_example arg1 arg2 arg3... (running...) $ ls my_example callgrind.out.3321 그리고 kcachegrind 툴에서 불러오면 예쁘게 그려준다.

UTF-8 글자마다 바이트 수 세기

UTF-8 문자열에서 문자 하나가 가지는 바이트 수를 구해보자. 요점은 글자 첫 바이트를 찾아 시작점부터 그곳까지 차이를 구하는 것이다. #include <iostream> #include <string> using namespace std; constexpr auto g_src("한글123ABCabc漢字!@#$^&*()한글123ABCabc漢字"); size_t getUtf8Size(const uint8_t* ib, const uint8_t* ie) { auto s(ib); while ( ++ib not_eq ie ) { if ( ((*ib) bitand 0xc0) not_eq 0x80 ) break; } return size_t(ib-s); } size_t getUtf8Size(const uint8_t* ib) { auto s(ib); while ( *(++ib) ) { if ( ((*ib) bitand 0xc0) not_eq 0x80 ) break; } return size_t(ib-s); } int main(int argc, char* argv[]) { const uint8_t* ib(reinterpret_cast<const uint8_t*>(g_src)); const uint8_t* ie(ib + strlen(g_src)); size_t size; cout << "Type #1" << endl; while ( ib not_eq ie ) { size = getUtf8Size(ib, ie); cout << string(reinterpret_cast<const char*>(ib), size) << ": " << size << endl; ib+=size; } cout &l

Google Apps Unlimited

헐... 설마 구글이 이럴 줄은 몰랐다. Google Apps Unlimited라고 해서 기존 기업용 Google Apps보다 2배 가격을 지불하면 스토리지 무제한을 주는게 있지만, 그다지 끌리지 않아서 생각하지 않고 있었다. 근데 새 제품 나오면 써보고 싶은게 인지상정인지라, 결제 부분을 클릭클릭 하고 있었다. 설마 최종 결제 하기 전에 뭐라도 입력하라고 하겠지...했는데 그냥 구렁이 담 넘어가 듯 결제 완료. 부랴부랴 결제 취소하려고 했더니, 약정기간(1년)에 상응하는 위약금을 내야한다고. 아... 환영 메일은 겁나 빨리 보내네. 무제한 용량이네. 그나저나 주인님 한테 죽었다. 주인님께 부랴부랴 네이트온으로 이실직고. 그러나 답이 없는 주인님. 부랴부랴 전화를 해봤지만, 바쁜 일이 있어 나중에 이야기 하시자는 주인님. 끊기 전에 물어보시길... 주인님: "근데 이거 앞으로 계속 2만원씩 내야하는 거예요?" 나: ".........네" 주인님: "헐~ 바쁘니까 이따 이야기 해요." 이거 데쓰라이트인가요?

OS issue type

UNIX-like OS가 정말 많은데, FreeBSD, MacOS 등이야 대충 때려 맞출 수 있지만, RedHat계열(RHEL, Fedora, CentOS, Suse)과 Debian계열(Debian, Ubuntu) 디렉토리 위치나 이름 규칙이 미묘하게 달라서 Bash Shell에서 알고 싶을 때가 있다. 딱히 정답이 있는 것은 아니지만, /etc/os-release 값에서 ID를 추출하면 적당히 써먹을 수 있다. $ export LINUX_ISSUER=$(cat /etc/os-release | awk 'BEGIN {FS="="} /^ID=/ { print $2 }'|sed "s/\\('\\|\"\\)//g") 사실 /etc/issue를 봐도 되는데, Docker에선 단순히 "Kernel"로만 보인다.

OpenSSL supports Multi-threading

내가 스레드를 별로 좋아하지 않는데, 별 수 없이 써야할 경우가 종종 있다. 그와 별개로 OpenSSL 쓰기를 좋아하는데, OpenSSL을 멀티 스레딩 환경에서 쓰면 자칫 알 수 없는 이유로 죽곤한다. 이유는 OpenSSL 각종 알고리즘엔진이 멀티 스레딩 환경을 고려하지 않은 엔진이라, 경합이 발생하여 충돌이 발생하기 때문이다. 참조: https://www.openssl.org/docs/crypto/threads.html 멀티 스레딩 지원은 0.9.5b-dev부터 지원하였으니, 이하 버전은 포기하자. (응?) (사실 그 전에도 약간은 지원했으나, CentOS5 기준 0.9.8이니, 이전 버전은 포기하는게 정답이다) 맨페이지를 보면 "crypto/threads/mttest.c 파일에 예제가 있어요 뿌잉뿌잉~"이라는데 나중에 찾아보기 귀찮으니 블로그에 옮겨 놓...으려고 봤는데, 주석도 길고 모든 OS에 대한 전처리기도 있고, C++11도 나왔는데 구닥다리 코드를 쓸 생각이 없으니 내 맘대로 다시 구성했다. #include <openssl/crypto.h> #define OPENSSL_THREAD_DEFINES #include <openssl/opensslconf.h> #if !defined(OPENSSL_THREADS) # error "OpenSSL version is not supported multi-thread" #endif // C++11 mutex support #include <mutex> // Global locks for OpenSSL static std::mutex* g_locks(nullptr); // Locking callback function for OpenSSL static void funcLock(int mode, int type, char* file, int line) { if ( mode bitand CRYPTO_LOCK ) g_locks[

Git commit count

git을 쓰다보니, cvs, svn과 달리 revision이 숫자가 아니라서, 패키지 버전에 넣을 빌드넘버를 넣을 때 조금 불편하다. 아주 없는 것은 아니니 참고용으로... ㅎㅎ $ git rev-list HEAD --count 오호 커밋마다 해시태그가 붙는데,  그걸 가져오는 방법은 rev-parse 하면 볼 수 있다. $ git rev-parse HEAD --verify -q --short=4 뒤에 --short=4는 앞에 4바이트 크기로 잘라달라는 의미이다. 시간값을 유닉스 타임 값으로 해서 해시태그랑 같이 가져올 때는 git log를 써도 될 것 같다. $ git log HEAD -n 1 --pretty=format:'%H %ct' 도움말을 보면 PRETTY FORMAT 항목에 형식이 자세히 나온다. 대충 %H는 커밋 해시태그이고, %ct는 커밋 시간을 유닉스 타임 값으로 보여준다.

이 블로그의 인기 게시물

Bash Array, Map 정리

Bash에서 Array, Map에 대한 정리. (매번 찾기 귀찮) 찾아보진 않았지만, Bash에서 Array든 Map이든 동일하게 Map(C++에서 Unordered Map)으로 동작하는 것 같다. 왜냐하면, Array의 Index가 연속하지 않아도 동작한다. 그저 Key가 0 이상의 정수인 Map이랑 비슷하게 동작한다. 예) 1, 2, 3, 9, 10 Array # 생성 declare -a empty_array declare -a ar=(haha hoho baba "long string haha hoho") # 접근 echo "ar[0]=${ar[0]}" echo "all as array=${ar[@]}" # 큰따옴표 안에서 각 원소를 따로따로 전달한다. echo "all as one=${ar[*]}" # 큰따옴표 안에서 각 원소를 문자열 하나로 합쳐 전달한다. echo "indexes=${!ar[@]}" echo "indexes=${!ar[*]}" echo "length=${#ar[@]}" echo "length=${#ar[*]}" echo "last=${ar[-1]}" echo "last=${ar[@]: -1}" # 콜론 뒤에 빈 칸이 꼭 필요하다. 옛 방식 # 현재 상황 declare -p ar #(출력) declare -a ar=([0]="haha" [1]="hoho" [2]="baba" [3]="long string haha hoho") ar[100]=hello # 인덱스를 건너 뛰어도 동작한다. declare -p ar #(출력) declare -a ar=([0]="haha" [1]="hoho" [2]="baba" [3]=&

SQLite에서 파일 크기 줄이기

간단한 개인 프로젝트를 하고 있는데, SQLite DB파일 크기가 매우 커져서 테이블에 필요 없는 레코드를 날렸다. 그런데 날리고도 파일크기가 그대로라서 여기저기 뒤져보니 VACUUM 커맨드를 사용하란다. 사용법은 매우 간단하다. 그저 "VACUUM;"이라고 날려주면 동작한다. (참조: http://sqlite.org/lang_vacuum.html ) 다만, 동작이 매우 느려서 자주 쓸만한 것은 아니다. 실제로 100MB짜리 파일을 7KB로 줄이는데 수 분이 걸렸다. 소스를 봐야겠지만, DB를 EXPORT한 뒤에, 파일을 지우고 다시 IMPORT하는게 아닐까 하는 의구심이 든다. 매번 하기 귀찮으면 "PRAGMA auto_vacuum=1;"를 하면, 새로운 빈 페이지(DELETE나 DROP TABLE 같은...)가 생길 때마다, VACUUM을 실행한다. 다만, SQLite구조 문제로 테이블을 생성하기 전에 미리 날려야하는 안타까움이 있다. (참조: http://sqlite.org/pragma.html#pragma_auto_vacuum )

Java에서 클라이언트 인증받는 TLS/SSL 연결 만들기

열심히 OpenSSL 소스 까보면서 공부해서 Java로(??!) 소켓 연결 맺기 해보는 중이다... 물론 Java에서 SSLSocketFactory에서 SSLSocket을 만들어 Buffer 연결하고 깔작거리면 얼마나 좋으련만, 세상이 녹록치 않더라. TLS/SSL은 클라이언트가 서버를 인증하는 것도 있지만, 서버가 클라이언트 인증을 필요로 할 때도 있다. 그래서 이땐 클라이언트가 사전에 서버쪽이랑 깔짝거려서 발급받은 인증서를 미리 쥐고 있다가, 서버에 접속(정확히는 접속해서 Handshake과정에서)할 때 넘겨줘야한다. SSLSocketFactory에서 그냥 깔짝깔짝 하는 걸로는 어림 반푼어치가 없더라고... SSLSocket부터 올라가보니, SSLContext라는 익숙한 놈이 있고, 이놈을 만들려면 KeyManagerFactory가 있어야 하고 TrustManagerFactory도 있어야 하는데, 각각은 KeyStore를 필요로 하고, KeyStore는 PKCS12 인증서를 필요로 하더라... 학학학 일단 잡다한 소리 집어치우고, 암호 설정한 PKCS12 인증서를 준비하자. 참고로 암호 안 걸리면 인증서 읽다가 널뽀인따 맞고 죽더라. 인증서 내보내기(export)할 때 꼭 6자 이상 암호 걸어서 내보내자. 순서는 아래와 같다. KeyStore 객체를 PKCS12 알고리즘으로 생성하고, 준비한 인증서 파일을 읽는다. KeyManagerFactory 객체를 SunX509 알고리즘으로 생성하고, 1에서 만들어진 KeyStore로 초기화한다. TrustManagerFactory 객체를 SunX509 알고리즘으로 생성하고, 1에서 만들어진 KeyStore로 초기화한다. SSLContext를 TLS 알고리즘(또는 필요에 따라 다른 것도 가능)으로 생성하고, 2, 3에서 만들어진 KeyManagerFactory와 TrustManagerFactory를 통해 만든 KeyManager[]와 TrustManager[]로 초기화한다. S