Low코드 데이터분석 : 비개발자 비전공자의 e-커머스 데이터 탐험

인스타그램 팔로워 분석 5. 게시 및 업데이트 설정하기

1. 보고서 게시하기파워BI 데스크탑에서 완성된 보고서는 게시 버튼을 눌러 웹에 게시할 수 있습니다.웹에 게시한다는 건, 보고서를 클라우드 상에서 접근할 수 있도록 업로드한다고 생각하시면 되겠습니다.  위의 파워BI 데스크탑 화면에서 게시 버튼을 누르면 작업영역 선택화면이 나타납니다.  보고서을 게시할 작업영역을 선택합니다. 원하는 영역이 없다면, 파워BI웹에서 작업영역을 만들 수 있습니다.작업영역을 게시하면 다음 이미지처럼 해당 작업영역에 보고서와 보고서의 데이터 모델을 확인할 수 있습니다.여기서 의미체계모델은 원본 데이터 집합이라고 생각하면 되고, 보고서는 그 데이터 집합에서 가져온거라고 할 수 있습니다.2. 보고서 새로고침 설정하기좀 더 우측의 빨간 네모 박스를 보면 가장 최근 새로고침한 시간과 그..

인스타그램 팔로워 분석 4. 파워BI 데스크탑 데이터 보고서 만들기

파워bi 데스크탑은 종종 대시보드라고도 불리는 보고서 화면을 제작하는 툴입니다.데스크탑이라는 명칭이 붙은 만큼, PC에 설치하여 사용하는 소프트웨어입니다. 이전 포스팅에서 작업했던 데이터플로우는 파워bi 웹 또는 파워bi 클라우드라고 구분하겠습니다.이 두가지를 기능상 아주 간단하게 구분해보자면1. 데스크탑으로 보고서를 제작하고, 2. 웹으로 보고서를 공유합니다.   👇자세한 내용은 다음 마이크로소프트 가이드를 참고해주세요https://learn.microsoft.com/ko-kr/power-bi/fundamentals/service-service-vs-desktop Power BI Desktop 및 Power BI 서비스 비교 - Power BIPower BI Desktop 다운로드 애플리케이션과 클라..

인스타그램 팔로워 분석 3. 크롤링 데이터를 파워BI 데이터플로우 업로드 및 파워쿼리 작업

데이터플로우를 활용하여 수집한 인스타그램 팔로워 데이터를 전처리하는 방법을 소개합니다.❓데이터플로우가 뭔가요?🧑‍💻 데이터 플로우는 파워BI 클라우드에 저장하는 데이터 테이블입니다.파워 쿼리를 통해 전처리한 데이터를 클라우드에 저장해두는 기능을 가지고 있습니다. 보통 데이터플로우는 간단한 수준에서 구성합니다.1개의 데이터플로우에 1가지 성격의 데이터를 담아둡니다. (품번별 재고정보, 품번별 품절정보 등)    👇파워 BI 가이드에서 자세한 내용을 찾아볼 수 있습니다. https://learn.microsoft.com/ko-kr/power-bi/transform-model/dataflows/dataflows-create 데이터 흐름 만들기 - Power BIPower BI에서 기존 데이터 흐름을 기반..

인스타그램 팔로워 분석 2. 작업스케쥴러를 사용하여 RPA 실행 자동화

작업스케줄러란?미리 정의된 시간이나 지정된 시간 간격 뒤에 프로그램이나 스크립트를 실행하는 프로그램입니다. 예를 들면 매일 6시에 RPA를 세팅한다면? 👉 매일 오전 6시에 RPA가 실행되서 인스타그램 팔로워 자료를 수집합니다.단, PC가 켜져 있어야 하겠죠?  제 PC는 매일 빽빽하게 작업 스케줄러가 설정되어 있습니다.퇴근 이후에도 제 PC 🤖 는 쉴새 없이 일하는 거죠   작업스케줄러 세팅 방법  1. 작업스케줄러 시작하기 윈도우 검색에서 작업 스케줄러를 찾아줍니다. 2. 작업 만들기 작업스케줄러 화면에서 오른쪽에 있는 기본 작업 만들기를 클릭해줍니다.  3. 기본 작업 만들기 마법사 실행 기본 작업 만들기 마법사를 이용하면 작업 스케줄을 쉽게 생성할 수 있습니다. 실행할 작업의 이름을 먼저 적어..

인스타그램 팔로워 분석 1. RPA를 통한 데이터 수집 자동화

제가 사용하고 있는 RPA 툴은 마이크로소프트의 Power Automate (파워 오토메이트)입니다. 이번에는 파워 오토메이트를 사용하여 인스타그램 팔로워 데이터를 수집하는 과정을 설명하겠습니다.  1. 소셜블레이드 회원가입 인스타그램 데이터를 수집하기 위해서, 소셜블레이드라는 웹사이트를 이용합니다. 다음 링크로 이동하여 회원가입을 먼저 진행해 주세요👇https://socialblade.com/ 소셜블레이드에서는 유튜브, 트위터, 페이스북, 인스타그램 등 다양한 SNS 채널의 데이터를 확인할 수 있습니다. 2. 소셜블레이드 수집 데이터 확인 저장할 정보는 다음 이미지의 검색 창에 인스타그램 계정을 검색하면 확인할 수 있습니다. 예시로 삼성전자의 계정을 조회했을 때 화면입니다.👇업로드 숫자, 팔로워 숫..

인스타그램 팔로워 분석 0. INTRO

인스타그램 팔로우 데이터를 수집하고, 수집한 데이터를 대시보드로 제작하는 작업을 진행해봅니다. 이 과정은 데이터 수집부터 구현된 대시보드까지 전 과정 자동화하여 구현하는 것을 목표로 합니다. 📍해결과제 👉경쟁사의 인스타 계정을 모니터링하는데 시간이 너무 많이 들어요. 👉한 화면에서 여러 경쟁사의 팔로워 증감 수치를 그래프로 보고 싶어요 👉팔로워가 1만 이상인 계정은 정확한 수치를 확인할 수 없어요 🧑‍💻RPA로 소셜블레이드에서 데이터 수집하는 것을 자동화하고, 파워 BI로 그래프를 만들어보면 될 것 같아요. ❗예상난이도 🔴🔴⚪⚪⚪ 단계가 길지만, 데이터가 많지 않아 어렵지 않습니다. 필요한 리소스: 파워BI 데스크탑, 파워오토메이트 데스크탑, MS 패브릭 평가판, Office365, 윈도우 작업스케줄러 ..

(RPA) 사방넷 주문 데이터 수집 자동화 - 01. 사방넷 자동 로그인

이번에는 파워오토메이트(RPA) 를 사용해서 사방넷의 주문데이터를 자동으로 수집합니다. 사방넷 주문 데이터를 확보하면 다음의 데이터들을 추가로 생성할  수 있습니다. - 합배송여부(동종합포, 이종합포, 단포) - 연관상품구매(크로스셀링) - 쇼핑몰별 예상 수수료 및 예상수수료율- 고객의 구매 빈도와 금액을 이용한 VIP고객정보- 구매고객이 많은 지역정보 (특별시/도 ~ 시군구) 각 케이스 별 쿼리 구성 및 BI구성은 추후에 개별 포스팅하겠습니다. 1. 사방넷 주문서 양식 사전설정하기주문 데이터를 다운로드받으려면,어디서 어떤 데이터를 받을 것인지 사방넷 구조를 먼저 이해하고, 다운로드할 주문서 양식을 미리 만들어두어야 합니다. 사방넷에 접속합니다.www.sabangnet.co.kr 사방넷 - No.1 쇼핑..

(RPA) 사방넷 주문 데이터 수집 자동화 - 02. 사방넷 주문정보 수집

지난 포스팅에서 RPA로 사방넷에 로그인하도록 만들었습니다. 👇🏻2024.10.21 - [RPA-Power Automate] - (RPA) 사방넷 주문 데이터 수집 자동화 - 01. 사방넷 자동 로그인  이 포스팅에서는 RPA를 사용해서 사방넷 데이터를 다운로드 받도록 자동화해보겠습니다.  1. 오늘 날짜를 가져와서, 루프로 반복 동작 설정하기  사방넷에서는 주문서를 수집한 후, 수집한 주문서를 사방넷에 저장된 코드와 매칭을 해주는 작업을 진행합니다. 이를 주문서 확정 작업이라고 하는데, 엑셀 파일 다운로드는 이 작업 이후의 주문서 확인처리 단계에서 진행합니다.   주문서확인처리 페이지입니다.일자 기준을 선택하고, 이전 포스팅에서 설정해둔 주문서 출력양식을 선택하여 다운로드할 예정입니다.   파워오토..

(파워BI) 사방넷 주문 데이터 수집 자동화 - 03. 데이터흐름 및 파워쿼리 작업

사방넷에서 수집한 데이터를 파워쿼리로 전처리하고, 데이터 흐름(클라우드)에 저장해보겠습니다.  01. 새 데이터 흐름 생성하기  왼쪽 메뉴 중 작업영역을 클릭하고, 새 작업영역을 추가합니다.   작업영역에 사용할 이름을 지정합니다.     작업 영역 상단의 새 항목을 클릭합니다.   항목 중에 데이터 흐름을 선택합니다.  새 테이블 추가를 클릭합니다.   폴더를 선택합니다.폴더 내의 데이터 파일을 모두 가져오는 커넥터 입니다.   폴더의 경로를 넣어주고, 게이트웨이 설정을 마친 후, 저장을 선택합니다.   데이터 미리보기 화면이 나오면 데이터 변환을 클릭합니다.   02. 쿼리 생성하기  폴더 내에 수집해두었던 주문서 파일들이 모두 나타납니다. 여기서 Content열 우측의 화살표를 클릭합니다.   파일..

(파워BI) 사방넷 주문 데이터 수집 자동화 - 04. 주문 지역 대시보드 제작

지난 포스팅에서 만들어둔 사방넷 주문 정보의 도, 시군구 정보를 가지고,주문자의 지역정보를 볼 수 있는 다음 BI 보고서를 작성해보겠습니다.01. 대시보드 개요사방넷 주문자의 지역 정보를 볼 수 있는 BI입니다. 사방넷 주문 정보로는 더 다양한 화면을 만들 수 있지만, 여기에서는 다음 이미지 1개만 제작해보겠습니다.  이 화면에는 지역별 주문 수량과 판매금액이 포함됩니다.    상단 슬라이서의 쇼핑몰에서는 각 쇼핑몰을 필터할 수 있습니다.  도, 시군구 슬라이서로는 지역을 필터할 수 있습니다.02. 데이터 불러오기 및 관계설정파워bi 데스크탑에서 상단 메뉴 - > 데이터 가져오기 - > 데이터 흐름을 클릭합니다. 탐색창에서 지정한 작업영역으로 들어갑니다. 이전 단계에서 만들어두었던, 데이터흐름을 로드합니..

(RPA) 파워오토메이트 사용법 03. outlook 메일 보내기

파워오토메이트 데스크탑 (PAD) 에서 OUTLOOK을 통해 메일 보내는 설정을 해보겠습니다. PAD에는 메일 보내는 동작이 여러개가 있는데, 실제로 사용해 본 것은 1가지 밖에 없습니다.  다음 두가지 작업은 무료 기능인 것 같습니다. (아쉽게도 저는 이 기능이 잘 동작하지 않았습니다.) 다음 오피스365의 OUTLOOK 기능은 365를 구독하는 구독형 요금제에만 사용할 수 있습니다. 다음 동작 중에서 메일보내기 (V2)를 사용하여 메일을 보낼 수 있습니다.  저는 이 기능을 보통 PAD 동작 중에 특정 상황에 도달했을 경우,알림을 위해 제 메일로 특정 내용을 담아 보내는 역할로 많이 사용합니다. 예를 들면, 10시 이전에 PAD가 동작되면 다음과 같이 메일을 보내서 시간을 체크하여 다시 실행해달라는 ..

(RPA) 파워오토메이트 사용법 02. 화면 캡쳐하기

RPA를 사용해서 사용중인 화면을 캡쳐하는 방법을 포스팅하겠습니다. 캡쳐야 간단한 동작을 추가하면 끝인데, 문제는 캡쳐한 이미지를 어떻게 활용할지가 될 것 같네요 PAD 흐름 만들기 저는 이 화면 캡쳐를 다음 용도로 보통 사용합니다. 파워BI 화면 캡쳐 👉🏻 이미지 폴더에 저장 👉🏻 저장한 이미지를 가지고 와서 경고 메일 보내기 이렇게 흐름을 만드려면 Power automate premium을 사용해야 하고, onedrive에서 저장한 이미지를 가지고 와야 하기에 오피스 365도 사용해야 합니다. 이유가 잘 기억은 안나지만, 윈도우즈 11 pro 버전을 사용해야 했던 것 같기도 하네요. 이 흐름을 잠깐 보여드리면 다음과 같습니다. 파워오토메이트 클라우드 흐름 화면입니다. 앞부분에는 BI트리거가 있고, 트..

(RPA) 파워오토메이트 사용법 01. PAD UI 요소 관리하기

파워오토메이트 PAD에서 흐름이 길어지게 되면, UI요소가 점점 많아지게 됩니다.나중에는 이게 무슨 용도로 만들었던 요소인지, 이 동작은 뭘 의미하는지 확인이 어려워져요 오늘은 UI 요소를 추가하고, 관리하는 방법을 알아보겠습니다. 이번 예시 캡쳐화면을 준비하면서 AMAZON(아마존) 관리자 페이지에서 작업을 해봤는데요아마존은 UI 요소를 캡쳐하는게 특히 더 애로사항이 많았습니다.그래서 오늘 포스팅에는 UI 요소를 캡쳐하기 어려울 경우의 팁을 더 담았습니다. 01. UI 요소 추가 및 이름 관리하기PAD 화면에서 오른쪽에 위치한 UI요소를 클릭해봅니다.UI요소 추가라는 화면이 나타나고, 아랫쪽에는 흐름 리포지토리 및 그 동안 만들었던 UI 흐름들이 있습니다.브라우저 UI 및 데스크톱 UI가 모두 확인이 ..