데이터 분석을 목적으로 파이썬을 이용하는 경우 특히 정형화된 데이터 형식은 Pandas를 많이 이용하게 된다. 데이터에 대한 인사이트를 뽑아낼 때는 여러 개의 데이터를 결합하고, 합쳐서 분석하게 되는데 Pandas의 메서드는 이를 굉장히 편리하게 만들어준다. 여기서는 가장 기본적인 3가지 메서드를 정리해보고자 한다. 1. 데이터 series를 단순히 이어붙이는 경우 - pd.concat()pd.concat()은 여러 개의 DataFrame을 행, 열 기준으로 이어붙일 때 사용하게 된다. 보통 데이터 형태가 동일하여 단순 누적시킬 때 사용하게 되며 월별 매출 데이터, 일별 트래픽 데이터를 누적할 때 사용할 수 있다. 행 방향으로 이어붙일 때 axis=0열 방향으로 이어불일 때 axis=1 2. 데이터를 공..

📙 2025년 4월 제10회 빅데이터 분석기사 필기 합격 후기 지인짜 오랜만에 블로그 글을 남기게 되는데...그 이유는 회사에서 너무나 밀도있게 바빴던 나머지퇴근하면 아무것도 할 기력이 남아있지 않았기 때문그렇지만 그와중에 성취한 것이 있어서스스로에 대한 뿌듯함과 앞으로의 늘어짐을 방지하고자 후기를 남긴다. 1. 빅분기 선택 이유빅분기를 도전하게 된 계기는회사에서 관련된 일을 하고 있기도 하고 비전공자인 내가 최소한의 자격요건을 갖추기 위해서이번 10회 빅데이터 분석기사 자격증 취득에 도전했다! 그래서 나의 배경 지식은 거의 없으나회사 일 때문에 조금씩 맛보기로만 들어만 본 정도였다. 2. 필기 공부 기간과 문제집기간은 대략 2주정도 공부했다. 필기 공부는 가성비로 유튜브 영상과 블로그 정리본들을 통..

ML/DL의 가장 중요한 자원인 데이터는 분석 목적에 따라 전처리를 적합하게 해주는 것이 중요하다. 적합한 데이터 전처리 과정이 모델의 성능을 높일 수 있는 요인이 된다. 오늘은 기초적인 map 함수에 대한 사용법과 numpy, pandas를 사용했을 때의 차이에 대해 정리해보고자 한다.  먼저, map 함수에 대한 설명은 아래 블로그에 잘 정리되어 있다.  https://dotiromoook.tistory.com/28 [python] map 함수 사용법, 동작원리 및 특징 (예제포함)python에 map 함수에 대해 알아봅시다. Python의 map() 함수는 여러 개의 데이터를 받아서 각각의 요소에 함수를 적용한 결과를 반환하는 내장 함수입니다. 리스트, 튜플 등의 반복 가능한(iterable) 객체..

군자 포르타로싸 - 위치: 군자역 1번 출구에서 5분거리- 시간: 11:00 ~ 22:00 (월 정기휴무, 일 11:00 ~ 15:00, 화 17:00 ~ 22:00) - 총평: ⭐️⭐️⭐️⭐️군자에서 아담하고 빈티지한 공간에서 와인 데이트를 즐길 수 있는 곳! 군자에는 생각보다 특색있는 파스타 맛집이 많다.여기도 그중 하나이다! 지도에 가고싶은 곳이라고 표기는 오래전에 해두었지만오늘 드디어 처음으로 방문하게 되었다. 골목길로 조금 들어가다보면 빨간색 문의 아담한 가게가 보인다.  가게 크기가 크진 않아서 테이블이 4개 정도 있었던 것 같다.주말 점심에 방문해서 창가자리만 남아있었다.  메뉴판을 보면 간단하게 브런치로 먹을 수도 있고커피뿐만 아니라 하이볼, 맥주, 와인 바틀/글라스도 모두 가능하다.사진에..

감상회사에서 만난 인생 선배와 잔잔히 이야기를 나누며 희망과 용기를 다시 갖게 만드는 책나는 평소 목표한 기준치에 도달하지 못하면 스스로 실망감을 많이 느낄 때가 많은데, 그렇게만 느낄 필요가 없다고 위안을 받은 느낌이다. 인상깊은 말행운은 많은 순간 사람의 얼굴을 하고 나타난다. 평생 일하며 살아야 하는 우리에게 있어 운을 좋게 만든다는 건, 무엇보다 내 인생에서 마주치는 사람들을 충실하게 대하는 일 아닐까?  매사에 완벽하려 할 때 우리는 항상 어딘가는 부족한 사람일 수밖에 없다. 하지만 자기만의 장점과 단점, 강점과 약점을 가진 채로도 온전히 해낼 수 있다고 용기를 낼 때 커다란 가능성과 마주할 수 있다. 완벽으로 가는 과정에는 반복이 필요하다. 완벽하지 않아도 팽개치지 않겠다는 마음을 가지고 결과..

울루울루- 위치: 뚝섬역 3번출구에서 5분거리- 시간: 11:30 - 22:00 (일 12:30, 월 정기휴무) - 총평: ⭐️⭐️⭐️⭐️뚝섬과 성수 쪽에서 힙하고 이국적인 분위기와 함께 리조또를 맛있게 즐길 수 있는 곳! 긴 설 연휴를 보내고 오랜만에 남자친구와 주말 데이트를 즐기러 뚝섬 쪽을 방문하였다. 뚝섬은 성수보단 사람이 적고, 주거지가 많은 동네이지만 성수만큼 힙한 플레이스도 곳곳에 많다. 그래서 이곳저곳 돌아다니는 재미가 있다.우리는 서울이라면 당연한 웨이팅을 피하기 위하여캐치테이블로 울루울루를 예약해서 다녀왔다.  울루울루 위치는 생각보다 골목 안쪽으로 들어가야 했다.여기가 맞나? 하는 생각으로 잘 찾아가보면사진에서 보이는 것처럼 평범하지 않은 입구를 발견할 수 있다.    신비한? 은색 ..

1월의 마지막 날을 앞두기도 하고, 연말도 마무리되는 시점에서 쓰는 생각 어김없이 재작년이나 작년이나 올해나 길었던 연휴는 똑같이 빠르게 흘러갔다. 본가가 대구여서 기차를 타고 서울로 올라왔는데, 오는 중에 우연히 유튜브에서 본 영상이 있다.  https://youtu.be/as1ZiGIzyJI?si=zdkCqPz-MLYnQPmd  이 영상에서는 어제보다 더 나은 내일을 위해 오늘을 열심히 살아가는 모토도 중요하지만 그저 살아가는 것, 나의 실존 자체가 의미있다는 말을 한다. 예전에 취업하고 나서 얼마 되지 않았을 때에 친구랑 무심코 가족들, 연인들, 친구들이 어우러진 봄날의 광장을 바라보면서, 그런 대화를 한 적이 있다. 우리가 소위 말하는 평범한 삶을 이루고 유지해나가는게 정말 대단한 노력이 필요한 ..

개요회사에서 담당하고 있는 AI서비스는 매영업일 새로운 데이터를 바탕으로 작동하고 있습니다. 조직이 클수록 갖고 있는 데이터의 양도 방대하고, 동시다발적으로도 매우 다양한 데이터의 트랜잭션이 이루어집니다. 특히 금융권에서는 데이터의 정확성 및 정합성을 유지하기 위해 대규모의 복잡한 배치 시스템이 구축되어 있고, 이를 관리하기 위한 담당 조직의 노력도 꽤 크게 요구되고 있습니다.  저도 최근 현재 담당 업무를 부여받으면서 사내 구축되어 있는 대규모의 배치 시스템에 대해 인지할 수 있었고, 실제 현업에서 하나의 서비스가 운영되기 위해서는 적시에 정확한 데이터가 적재되어야 하는 중요성을 체감할 수 있었습니다. 학업을 통해 프로젝트를 구현할 때에는 내가 직접 필요한 데이터를 구하거나 만들어서 쓰면 문제가 되지 ..