데이터를 사랑하고 궁금해하는 기록쟁이입니다! 😉 Super Data Engineer가 되는 그날까지🏃‍♀️ 화이팅!

2022년/Developement

요근래 영상처리 모델링을 좀 진행했었다. 이를 조금 정리해보려한다. 모델은 다음 문제를 해결해야했다. 1.내가 작업해야할 모델링의 데이터들은 real-time detection 이 이루어져야했다. 2. Object의 이동속도가 상당히 빨랐기때문에 Detection Time 또한 최소화해야했다. 3. Object가 겹치는 경우가 상당히 많았다. 1. real-time detection 1-Stage detector와 2-Stage detector란? 직선을 기준으로 위가 2-Stage Detector들이고 아래가 1-Stage Detector들이다. Regional Proposal과 Classification이 순차적으로 이루어진다. Regional Proposal 이란? 기존에는 이미지에서 object ..

2022. 5. 31. 10:51

2022년/Developement

GitHub - deviantony/docker-elk: The Elastic stack (ELK) powered by Docker and Compose. The Elastic stack (ELK) powered by Docker and Compose. - GitHub - deviantony/docker-elk: The Elastic stack (ELK) powered by Docker and Compose. github.com 원래 docker elk로 유명한 것은 위의 레포였다. star 수만 봐도 알 수 있다. 그런데 묘하게 불편했다(내가 초보라 그런다) 그러다가 아래의 레포를 찾았다. 무언가 더욱 더 확장된 기능이 많고 커스터마이징이 직관적으로 가능한 것 같았다. GitHub - sherifabd..

2022. 4. 15. 18:00

2022년/Developement

GitHub - ultralytics/yolov5: YOLOv5 🚀 in PyTorch > ONNX > CoreML > TFLite YOLOv5 🚀 in PyTorch > ONNX > CoreML > TFLite. Contribute to ultralytics/yolov5 development by creating an account on GitHub. github.com yolov5에서 train.py 코드 내에 아래와 같이 하이퍼파라미터가 기본적으로 들어가는 것을 알 수있다. parser.add_argument('--hyp', type=str, default=ROOT / 'data/hyps/hyp.scratch-low.yaml', help='hyperparameters path') 이 파일은 data..

2022. 4. 12. 17:51

2022년/Developement

근 몇년 책을 처음 오랫동안 읽고 있다. 점심을 빨리 먹고 책을 읽는 것에 빠져있다. 소프트웨어 장인이라는 책으로 인터넷에서 한 개발자 분이 추천해주시길래 지인 개발자분들께 여쭈어보니 이미 유명한 책이었다. 한 장,, 열 장.. 그렇게 읽다보니 웃음도 나고 눈물도 나는 책이었다. 만일 모든 구성원들이 이 저자처럼 생각하고 운영되는 개발팀이라면 정말 평생 일할 수있지 않을까?(해고당하지 않는다면) 나 또한 반성을 하게하는 책이었다. 본 책에서는 시킨 일만 하는 개발자는 프로페셔널하지 않고, 그저 공장 노동자와 다름없다 라는 표현을 하고있다. 나는 대체로 스스로 많이 찾아서 하는편이긴 하지만 저 책을 읽으니 다시 한 번 다짐하게되었다. 크리에이티브하고 호기심 많은 개발자가 되리라... 지금 반 정도 읽은 것..

2022. 4. 12. 12:57

2022년/Developement

로그는 서비스나 시스템 가동 시 발생되는 이벤트의 기록이다. 많은 사람들이 알고있겠지만, 경험적으로도 로그는 매우 중요하다. 로그를 어떻게 쌓아야하고 어떻게 관리하는지 알아보자. 위에서 이벤트의 기록이라고 했는데, 이 외에 사용자 로그 데이터와 이벤트 로그 로도 불리운다고 한다. 과거에 선박 속도 측정을 위해 칩 로그라는 것을 썼다고 한다. 배의 앞에서 통나무를 띄어서 배의 선미까지도 도달하는 시간을 재는 방식에 로그를 사용했다. 위에 짤도 그래서 나온 것 같당. 일반적인 로그의 형태는 ket-value 이다. 로그가 중요한 이유는 가장 기본적인 시각정보이기때문이다. 개발자들 입장에서도 시스템이 다운되었을 때 이 로그를 보고 이슈해결이 가능하다. 로그 데이터는 어떻게 관리해야할까? 해커들은 이 로그를 변..

2022. 4. 11. 11:53

2022년/Developement

http://slides.com/openstack/sktechx11th 를 보고 공부한 내용입니다 🙄 사전 작업: aws, twitter 가입 :) 1. 트위터 앱 생성하기 아래 링크로 이동하면 트위터 앱을 어렵지않게 만들 수 있다. acess token이 생성된다. 잘 메모해두자. 잘 메모해두자! Use Cases, Tutorials, & Documentation Publish & analyze Tweets, optimize ads, & create unique customer experiences with the Twitter API, Twitter Ads API, & Twitter Embeds. developer.twitter.com 2. AWS EC2에서 인스턴스 생성하기 인스턴스를 생성하고 나면..

2022. 3. 15. 16:51

2022년/Developement

정말 나태해졌다... 꿈도 희망도 어쩌다가 이렇게까지 된 건지 모르지만... 사실 안다 오늘 또 서칭 중에 좋은 것을 알게되었다. 그 것은 바로 TIL 날마다 내가 공부한 것을 적어놓는 것이다. 이미 개발계에선 유명하신 진유림님의 http://milooy.github.io/TIL/ TIL을 보고 감명을 받았다. 뭐,, 어떻게 보면 티스토리 블로그도 TIL이긴하지만 짤막짤막하게라도 매일 적는걸 목표로 해보려한다. 이와같이 또 세팅하는데에 시간을 빼앗기고싶진않고,, 이전에 생성해둔 깃헙 블로그를 이와같이 사용해보는게 좋겠다고 생각했다.. 요즘 블로그도 잘 안하고 증말... 뭐하는건지... 후.... ...왜이랫! 아무튼 해당 깃헙블로그의 아카이브 기능을 사용하면 아래처럼 TIL 목록을 볼 수 있어서 좋은 것..

2022. 3. 14. 17:06

2022년/Developement

출처: https://mattturck.com/data2021/ 도랐다.. 공부할거 너무많은데 뇌는 점점 쭈그러드는 기분이고.. 하우우 그래도 얼마전 조금은 큰?일이 있었다. 나를 재정비해야한다.! 공부좀 하자 '^'/// ! 1. 서핏 전반적인 개발관련해서 글을 크롬에서 볼 수있어서 너무 애정한다. 짱이다 :) https://www.surfit.io/ 서핏 - 매일 성장하는 사람들의 커리어 플랫폼 새 탭에서 펼쳐지는 맞춤 커리어 콘텐츠. 매일 성장하고 더 멋지게 일하세요! www.surfit.io 2.DataCamp Blog 영어공부도 .. 할겸 ^^.. 그리고 데이터관련해서 좋은 글들이많다. https://www.datacamp.com/blog/category/big-data 3.Data Engine..

2022. 3. 8. 14:27