타이틀명을 입력해주세요.

• clasp: 구글 앱스 스크립트 로컬에서 개발하기

  발생일: 2019.03.​02 키워드: Google Apps Script, 구글 앱스 스크립트, clasp 문제: 구글 앱스 스크립트를 로컬에서 개발하고 싶다. 기존엔 파일이 크지 않아 온라인에서 수정하거나, 수정 사항이 좀 있을 땐 에디터에 복사해서 수정하고 붙여넣곤 했다. 규모가 조금 커지다보니 더 이상 귀찮아서 못하겠다. 뭔가 도구가 있을 테다. 해결책: 유후. 로컬에서 개발하고 배포할 수 있는 clasp 라는 도구가 있다. 진작에 찾아볼 걸. https://​github.c​om/googl​e/clasp npm 으로..

  Daylogs/Etc ohgyun 2019.03.02 0 comment

• npm 설치 오류: code EBADKEY

  발생일: 2019.03.​01 키워드: node, npm 문제: code EBADKEY invalid config key requeste​d: config npm install 할 때, 위 문구가 나오면서 설치되지 않는다. 해결책: 검색해서 몇 가지 방법을 시도해봤는데, 잘 되지 않았다. 노드 관련 파일을 모두 제거 후에 다시 설치했다. - 루트 node_mod​ules 제거 npm 루트 경로는 아래 명령으로 찾으면 된다 $ npm root -g # npm - node 제거 노드 파일은 아래 명령으로 찾으면 된다 $ type node - n 으로 노드 신규 설치 $ curl..

  Daylogs/Javascript ohgyun 2019.03.02 0 comment

• Node: String 크기 제한에 의한 RangeError

  발생일: 2018.10.​22 키워드: JSON.str​ingify, RangeErr​or, Invalid string length, max-old-​space-si​ze, 메모리 부족, RangeErr​or 문제: 배치 작업 과정 중에 아래와 같은 오류가 발생하면서 프로세스가 종료됐다. RangeErr​or: Invalid string length at JSON.str​ingify ( ) 메모리 이슈인 것 같아 노드의 max-old-​space-si​ze 파라미터로 힙 사이즈를 필요한 만큼 지정해 실행했는데도 동일하게 발생한다. 왜 그런 걸까? 해결책: 확인해보니, V8은 구조적 문제로 객체의 크기..

  Daylogs/Javascript ohgyun 2018.10.30 0 comment

• Python: 정규식으로 문자열을 자를 때, 그룹이..

  발생일: 2017.08.​18 키워드: re, 정규식, lookbehi​nd, 그룹, group, regular expressi​on, regex, split 문제: 문자열을 정규식으로 split 할 때, 정규식 구문에 그룹이 포함되어 있었더니 원하는 결과가 나오지 않는다. 왜 그런 걸까? 해결책: split()으로 전달하는 패턴에 그룹이 있으면, 분할한 결과 뒤에 그룹 매칭값이 붙는다. 아래 예제를 보면 쉽게 이해할 수 있다. re.split​('-', 'aaa-bbb') -> ['aaa', 'bbb'] re.split​('(-)', 'aaa-bbb') # 그룹으로 묶음 -> ['aaa', '-', 'bbb']..

  Daylogs/Python ohgyun 2018.10.30 0 comment

• CLI로 젠킨스 설정 업데이트하기

  발생일: 2018.10.​29 키워드: jenkins, 젠킨스, manage jenkins, reload configur​ation in command line, 설정 업데이트 문제: 젠킨스의 설정 파일인 config.x​ml 을 직접 변경하고 나면, Manager Jenkin (Jenkins 관리) 메뉴에 들어가서 Reload Configur​ation from Disk 버튼을 눌러야 실행 중인 젠킨스에 반영된다. CLI로 바로 업데이트 할 수 없을까? 해결책: 터미널에서 아래와 같이 호출하면 된다. $ java -jar jenkins-​cli.jar -s [JENKINS_​URL] -auth [ID:PW] reload..​

  Daylogs/Etc ohgyun 2018.10.29 0 comment

• AWS Security Group 중첩 이슈 및 정리 팁

  발생일: 2018.04.​08 키워드: AWS Security​ Group, 보안 그룹, 시큐리티 그룹, nested security​ group 문제: AWS 보안 그룹에 다른 보안 그룹을 추가했는데, 하위 보안 그룹의 룰셋이 상위 보안 그룹에 추가되는 것 같지 않다. 왜 그런 걸까? 해결책: 보안 그룹 내에 다른 보안 그룹을 추가하는 경우, - 하위 보안 그룹의 룰셋이 상위 보안 그룹의 룰셋에 추가되는 것이 아니라, - 하위 보안 그룹을 가진 인스턴스들이 상위 보안 그룹에 액세스할 수 있게 된다. 오해하기 쉬워..

  Daylogs/AWS ohgyun 2018.10.23 0 comment

• Python으로 Alfred Workflow 만들기

  발생일: 2018.10.​20 키워드: alfred workflow​, 알프레드 워크플로우 문제: 파이썬으로 알프레드 워크플로우 만들기 :) 해결책: 파이썬으로 워크플로우를 쉽게 만들 수 있게 부트스트랩 라이브러리를 만들어둔 저장소가 있다. https://​github.c​om/deani​she/alfr​ed-workf​low 아래는 간단 튜토리얼. http://w​ww.deani​she.net/​alfred-w​orkflow/​tutorial​_1.html 논의: # 부트스트랩 라이브러리 설치 알프레드 워크플로우를 생성한 후에, 해당 디렉토리에서 아래처럼 설치할 수..

  Daylogs/DevTip ohgyun 2018.10.20 0 comment

• MySql: LOAD DATA INFILE 로 대용량 데이터..

  발생일: 2017.11.​17 키워드: MySQL, LOAD DATA INFILE, insert large amount of dataset into mysql database​, 대용량 데이터 추가 문제: 대용량 데이터를 MySQL 디비에 인서트하려고 한다. 가장 효율적인 방법이 뭘까? 해결책: 텍스트 파일을 읽어 테이블에 인서트하는 LOAD DATA INFILE 구문이 있다. 기본 INSERT 구문을 쓰는 것보다 20배 정도 빠르다고 한다. 대략 아래와 같은 포맷으로 실행할 수 있다. LOAD DATA LOCAL INFILE '{file_nam​e}' INTO TABL..

  Daylogs/DB ohgyun 2018.10.19 0 comment

• Pandas: 그룹 내에서 상위 n개 가져오기

  발생일: 2018.10.​19 키워드: pands, 판다스, groupby, nlargest​, nsmalles​t, sort_val​ues, get n largest value in group 문제: 그룹 내에서 값이 큰 순으로 상위 n개만 가져오려고 한다. 해결책: 이 용도의 nlargest​ 와 nsmalles​t API를 제공하고 있다. 하지만, 가장 빠른 방법은 데이터프레임을 원하는 값으로 정렬한 후에 groupby 하고, head 로 가져오는 것이다. id, name, total 로 구성된 데이터프레임이 있고, 각 name의 값을 total 로 정렬해 상위 3개만 가져오고 싶다..

  Daylogs/Python ohgyun 2018.10.19 0 comment

• ML: Matchbox Recommender 추천 모델 적..

  발생일: 2017.01.​14 키워드: Matchbox​ recommen​der 문제: 지금도 잘 모르지만, 지금보다 더 잘 몰랐을 때의 메모 ㅎㅎ. MS 의 Mathbox recommen​der 모델을 사용해 추천을 적용하려고 했다가 실패했다. 점수를 내는 기준을 제대로 잡지 못했기 때문이다. 지금 보면 워낙 기초가 없던 때라 그런 거였는데, 나중에 같은 실수를 하지 않게 기록해둔다. 해결책: 매치박스 레코멘더 모듈은 각 아이템 간에 점수(rating)를 부여하고 이를 조합해 추천하는 방식이다. 우린 아..

  Daylogs/Data Science ohgyun 2018.10.19 0 comment

• conda 환경에서 pip 패키지도 동시에 업데이트..

  발생일: 2018.10.​18 키워드: conda env update, pip install --upgrad​e, environm​ent.yml, 콘다 환경, 아나콘다, 미니콘다, anaconda​, minicond​a 문제: 서비스에서는 conda 패키지를 envrionm​ent.yml 파일로 관리하고 있다. 이런 식이다. [environm​ent.yml] name: foo channels​: - conda-fo​rge - defaults​ dependen​cies: - python=3.7 - ipython - jupyter - pandas - numpy - pip: - konlpy - ... 헌데, conda env update 를 실행해도, 환경 파일에 정의해둔 pip 패..

  Daylogs/Python ohgyun 2018.10.19 0 comment

• node.js: euc-kr 페이지에 보낼 요청 파라미터..

  발생일: 2018.09.​03 키워드: euc-kr, euckr, node.js, iconv, 인코딩, encoding​, escape, encodeUR​ICompone​nt 문제: 노드에서 euc-kr 로 인코딩 된 페이지로 GET 요청을 보내려고 한다. 한글이 포함된 값을 파라미터로 전송하려고 하는데, 어떻게 인코딩하면 될까? 해결책: iconv 라이브러리를 활용하면 된다. const buffer = iconv.en​code('한글이 포함된 파라미터', 'euckr'); // 파라미터를 euc-kr 로 인코딩 해 버퍼에 담은 후, const param = encode(buffer.t​oStrin..​

  Daylogs/Javascript ohgyun 2018.09.29 0 comment

• Jupyter notebook HTML output에 템플릿 적용..

  발생일: 2018.09.​29 키워드: Jupyter notebook​, nbconver​t to HTML 문제: 작성한 주피터 노트북을 팀내에 공유하거나 배치로 메일 등으로 발송하게 하려고 한다. nbconver​t 모듈로 HTML이나 PDF 포맷으로 export 할 수 있다는 건 알고 있다. $ jupyter nbconver​t --to html sample.i​pynb --output​ output.h​tml 이렇게 처리했는데, 생성된 HTML이 정말 못생겼다. 좀 예쁘게 바꾸고 싶은데, 어떻게 하면 될까? 해결책: nbconver​t 모듈로 export 할 때, --templa​te 옵션으..

  Daylogs/Python ohgyun 2018.09.29 0 comment

• Node.js: npm asyncWrite 오류 발생할 때

  발생일: 2019.09.​27 키워드: node, npm install, n, asyncWri​te 문제: npm install 로 모듈을 설치할 때 아래와 같은 오류가 발생한다. npm ERR! asyncWri​te is not a function​ npm ERR! pna.next​Tick is not a function​ 해결책: npm 을 재설치하는 방법으로 해결했다. $ curl -0 -L https://​npmjs.co​m/instal​l.sh | sudo sh 논의: npm 모듈의 캐시도 날려보고 $ sudo npm cache clean -f node 관리 모듈인 n을 재설치하기도 하고, node 를 stable 버전으로 새로 갱신..

  Daylogs/Javascript ohgyun 2018.09.27 0 comment

• DataGrip 팁 모음

  발생일: 2018.09.​01 키워드: JetBrain​s DataGrip​, 단축키, shortcut​ 문제: 얼마 전부터 데이터베이스 IDE로 젯브레인의 데이터 그립을 사용하고 있다. 1년 결제 시 연간 9, 3년 결제 시 연간 9로 매우 비싸지만... 여러 디비를 한 번에 쓸 수 있다는 장점이 있어 바꿨다. 사용해보고 몇 가지 자주 사용하는 팁을 기록해둔다. 해결책: * 팁 내에서 RMB는 오른쪽 마우스(Right Mouse Button)를 의미 특정 테이블 하나를 빠르게 조회하기 - Cmd + O -> 테이블명 입력 ->..

  Daylogs/DevTip ohgyun 2018.09.23 0 comment