본문 바로가기

전체55

견고한 데이터 엔지니어링-리뷰 1탄 (2023.06.26) 좋은 책이라고 소문만 듣다가 드디어 읽게 되었다. 아래 걸어둔 저자의 글 또한 공감할 부분이 많다. 앞에 베타리더, 추천사, 책에 대한 안내 등이 꽤 길어 공을 많이 들였겠다 생각이 들었다. 이 책은 '데이터 엔지니어링 수명주기'에 대해 주로 다룬다. 클라우드에 대해서도 짚고 넘어가는데 온프렘으로 회귀하는 경우도 있다. 대부분 보안 문제로 인해 온프렘, private cloud를 고려하게 되는데 나 또한 public cloud가 거시적으로는 이기지 않을까 생각한다. 지금이야 문제가 생기겠지만 최근 주목받는 양자컴퓨팅 같은 게 보안에서 혁신을 가져온다면 또 다른 해결책을 주지 않을까? 현업에서 논의할 만한 부분도 굉장히 많기 때문에 DE라면 내용을 자세히 훑는 걸 추천한다. 1. 데이터 엔지니어링 수명 주.. 2023. 8. 27.
프로덕트 매니지먼트(2023.06.08) 갈수록 어떤 서비스나 시스템, 혹은 그보다 더 큰 분야의 흐름을 모니터링 해야할 필요가 있다. 그리고 가끔 심심할 때 혹은,, 회사일이 지겨울때..(ㅎ) 토이프로젝트를 참여하는데 꼭 조장이 되거나 암튼 비공식 PM이 된 것 같은 기분이 들 때가 있다. 체념하고 우리에게 주어진 리소스를 잘 활용하기 위한 계획을 짜주고 진행상황을 확인하는데 어느 순간 너무 무작정 할 때가 있더라. 확실히 책을 읽으니 실제 어떻게 PM 업무를 해야 할 지 감이 오는 부분이 있었다. 이게 아무리 IT라 하더라도 비즈니스와 돈 계산은 떼려야뗄 수 없는 이야기다 보니 읽으면서 공감가는 부분도 많았다. 엔지니어링을 하는 주니어들 중엔 간혹 난 돈과 상관이 없다고 생각하는 경우가 종종 있었다. 그렇지 않다는 걸 얘기하고 싶다..^^ .. 2023. 8. 1.
외워서 끝내는 네트워크 핵심이론 - 기초(인프런 강의) L3 수준에서 외울 것들 1. 패킷의 생성과 전달 데이터를 패킷으로 만들어서 택배기사 전달(gateway) 현관은 집 host 와 만나는 접점을 타고 패킷이 나감. 택배 -> gateway ->routing함(모앗다가 어쨌다가) -> IPv4의 목적지 주소를 보고 영희네 찾아옴 -이름(port 번호)을 보고 호스트 내부에서 process 이해하면 인생이 바뀌는 TCP/IP 송수신구조 Network 장애 1. Loss 유실 2. Re-Transmission : Ack Duplicated 3. Out of order : 1-> 2-> 4 거의 네트워크 문제 4. Zero Window : 여유공간 크기를 window size 이게 zero가 되었다는 것. 여기가 full이 난 것임. 네트워크의 송수신 속도가 .. 2023. 7. 30.
파이썬 웹 프로그래밍 기초편 파이썬을 배우고 웹 프로그래밍을 하고 싶은 사람을 위한 책이다. 책 순서는 먼저 웹 개발이란 무엇인지부터 시작한다. 대략적으로 프론트엔드, 백엔드의 개념을 알고 나서 파이썬의 웹 표준 라이브러리를 배운다. 파이썬 웹 표준 라이브러리 내용의 경우는 필수는 아니기 때문에 당장 만들어보는 게 급하다면 2장은 생략해도 되겠다. 이후 장고에 대한 개념을 학습 후, 설치부터 프로그래밍 방식, 설계, 프로젝트 뼈대 등을 만드는 방법을 배운다. 그 후엔 장고의 핵심 기능을 배우는데 여기서 각종 어드민 사이트를 꾸민다던가 파이썬 셸로 데이터를 조작한다던가, 템플릿 시스템이나 폼 작성 등에 대해 더 배운다. 그 후 실습 예제를 하나 만들어보면서 파이썬으로 앱을 만드는 감을 익힌다. 배포하는 것까지 해볼 수 있도록 안내되어.. 2023. 3. 26.