생각의 단상 - 아무런 생각이 나지 않을때는 어떻게 해야할까? 행복/나의 생각2018. 12. 19. 23:30
오늘은 이것 저것 생각하다가, 예전일이 생각이 났다.
내가 nodeJS를 처음으로 사용하기 시작한 것은 2년전 어느 이른 봄으로 기억이 된다.
당시의 나는 쏟아져 나오는 새로운 기술들과 Cloud기반의 서버 기술들을 들여다 보면서, 어떤 것을 공부를 해야할지 수 개월째 맴돌고 있었던 시기로 기억된다.
하루가 다르게 쏟아져 나오는 새로운 기술들이 눈과 귀를 즐겁게 하였지만,
"무엇을 공부해야할까?"
"무엇을 배워야 할까?"
에 대해서 나름 심각하게 고민하고 스스로에게 물어 보는 시간이 많았다.
AI와 머신러닝, ReactJava, Java 8, Lamda, 함수형 프로그래밍, V8 엔진을 기반으로한 Javascript 기반의 서버 프로그래밍 등등 말이다.
이러한 고민의 시작은 사실, 90년대에 서버 클라이언트 프로그래밍을 시작으로 2000년대 초반에는 3 Tier기반의 서버 개발로 할 때는, 모든 서버의 설치와 구성 및 설정을 위해 개발자는 당연하게 사전에 검토와 분석을 기반으로 설계를 하고 개발을 하고 운영까지 하였다. 그리고 당연하게 개발을 위한 소프트웨어 스택과 라이브러리에 대한 기능도 세세하게 검토하고, 버전을 확정한후에 개발을 시작하였다.
하지만, 현재의 AWS와 같은 Cloud 환경과 Spring과 같은 휼륭한 Framework를 사용하거나 완성도가 높은 오픈 소스를 사용하게 되면, 수개월에 걸쳐서 검토하고 기능을 익혔던 과정은 불필요한 작업이 되었다.
내 생각을 덧붙이자면, 누구나 쉽게 개발할 수 있는 환경이 된 것이다.
이전에 MSDN CD 또는 DVD를 통해서 학습했던 내용들은 인터넷을 이용하면 바로 바로 이용가능한 예제와 설명들을 찾을 수 있다.
새로운 시대가 도래한 것이다.
그런데, 어떻게 나는 무엇부터 시작을 해야 할지, 알수가 없었다. 몇몇 사람들과 이야기를 나누어 보았는데, 나와 비슷한 고민을 하는 사람들이 있었다.
알파고의 파도가 지나간지 얼마 되지 않았기에 AI를 공부하고 싶다는 생각이 들었지만, 나는 엔지니어적인 관점에서 접근하고 싶었다. 내가 DB엔진을 만지지않고, DB를 사용하는 것과 마찮가지로 AI와 머신러닝이 어는 정도 성숙된 이후에 공부하고 싶었다. (요즘이 그 때인것 같다.)
이러 저러한 여러 가지 생각을 하다가, 아무것도 시작을 못하고 있었는데,
그러다가 내린 나의 생각은 이랬다.
결론은,
무엇이 되었던, 일단 한가지씩 시작해 보는 것이다.
별다른 고민을 하지 않고, 크지 않은 새로운 과제에 nodeJS를 사용해 보기로 하였다.
마침 VS Code를 사용하면서, NodeJS와도 궁합이 잘 맞는다는 것을 알았기 때문에, 바로 사용을 할 수 있었던 것 같다.
꼭 NodeJS를 사용해서 원하는 작업을 해야만 하는 것은 아니었다.
Perl 또는 Python 또는 Groovy를 이용해서 Batch 스크립트를 만들어도 되는 간단한 작업 이었기 때문에,
그리고, 새로운 언어를 하나 더 배울 수 있다라는 측면과 호기심에서 시작을 하게 되었다.
아~ 갑자기 생각났다. 그때 AWS에 새로운 가능으로 Lamda가 추가되었는데, 지원하는 언어중에 하나가 바로 NodeJS 였다.
그때 해야 했던 작업은 배치작업을 만들어야 했는데, RestAPI를 정기적으로 호출해서 DB 테이블에 비어 있는
필드를 채워서 테이블을 확인하고 업데이트 하는 것이었다.
NodeJS의 비동기적인 동작에 대해서 잘 알지 못하는 상황이어서, Async와 I/O Non-Blocking에 대해서 작업이 필요한 상황이었다. (지금이라면, 굳이 NodeJS를 사용하지 않습니다. )
작업순서는 다음과 같았다.
먼저 AWS의 S3 에서 로그를 다운로드 받는다. 다운로드 받은 로그를 약간의 분석을 위해서 메모리에 Map형태로 잘 말아서 올린다. 그리고, DB Table에 비어 있는 필드를 찾아서 업데이트 하는 작업과 Rest API를 호출해서 DB상의 테이블의 구멍난 부분을 찾아서 채워는 작업이었다.
기본적으로 배치로 돌기 때문에, 시간적으로는 제한을 받지 않기 때문에 기존의 Sync 작업으로 진행해도 되었지만, NodeJS를 사용한다라는 것은, Async에 대한 기본적이 고민이 선행될 필요가 있다. (물론, 지금이라면 await과 async 키워드를 이용하거나, Promise를 사용하면 되겠지만...)
비동기 처리는
내가 원하는 작업 순서에 따라서 로그를 찍지 않는다, 파일을 읽어 올때나, DB에서 쿼리를 실행해 결과를 가져올
때나, 서버로 부터 API 호출하고 Response를 받을때도, 비동기로 찍어주는 로그는 내 예상과 다른 순서와 시점에 로그를 까만 화면에 번쩍이면서 찍고내고 있었다.
사실 비동기 프로그램은 비주얼 베이직에서 이벤트를 받아 처리하거나, 콜백 함수를 이용한 메소드의 실행 측면으로 이해한다면, 이해적인 측면에서 쉬울 수 있지만, 순차에 따른 호출을 하고 싶은 경우에는 중복된 콜백 메소드의 호출을 보게된다. call-back hell이라고 부르는 그것을 말이다.
Call-Back Hell을 피하기 위해서 메시지 루프와 같은 형태로 Event를 처리하는 방법을 사용해서 피해보기도 하였으나, 마음에 들지 않는 방식이었다.
그러다가, 네트워크 작업과 DB 쿼리가 비동기로 호출되는 상황에 대해서 고민을 하면서, 만들어 낸 솔루션은
Task를 큐에 넣고, 호출하고, 결과를 비교하는 콜백 함수를 이용하는 방식으로 마무리 하였다.
그리고, 동기처리가 필요한 작업순서를 지정하기 위한 방식으로 Perl을 이용했었다.
순전히 Call-Back을 중첩하여 사용하기 싫어서 사용한 방법이었는데, 나름 메시지 큐를 만들고, 들어오는 결과를 처리하는 방식이어서, 간단하지만 좋은 방식이었다.
만약, 지금이라면 또 다른 방식으로 해결할 것인데, 공부하는 측면에서는 도움이 많이 되었다.
NodeJS는 장점도 많지만, 단점도 많다, 하지만 장점이 워낙 커서 단점을 가릴 정도로 훌륭하다.
'행복 > 나의 생각' 카테고리의 다른 글
| 하루를 반문하다. (0) | 2011.10.24 |
|---|---|
| 변화의 시절의 내가 살아가는 것. (0) | 2011.07.30 |
| 사진없는 독일 출장기 (2) (0) | 2011.07.30 |
| 사진없는 독일 출장기 (1) (0) | 2011.01.16 |
| 벌써 1년이 지났다. 앞으로는... (2) | 2010.10.31 |
