본문 바로가기

Archive109

Tableau SSO 인증(SAML) (둘 다 외부 인증 솔루션) * OPENID Google 등의 IdP(ID 공급자)에 로그인할 수 있도록 지원하는 표준 인증 프로토콜 IdP 로그인하면 자동으로 Server login OpenIDConnect(OIDC) 를 사용하기 위해서는 서버가 로컬 ID 저장소를 사용하도록 구성되어야 함 Active Directory나 LDAP ID 저장소는 지원 불가 * SAML(Security Assertion Markup Language) 보안 웹 도메인이 사용자 인증 및 권한 데이터를 교환할 수 있는 XML 표준 외부 IdP가 SAML 2.0 이용해 사용자 자격 증명을 인증 후 사용자 ID에 대한 정보를 가지고 있는 Tableau Server로 보안 정보 전송 Server.. 2022. 12. 5.
Data Engineering - 데이터 엔지니어는 데이터 사이언티스트와 협업하는 업무 (1) 수집, 가공, 저장 1. 서비스들에서 나오는 수많은 데이터들을 수집하기 위해서 데이터 파이프라인을 설계, 구축함 2. 쉽게 사용할 수 있도록 가공처리, 데이터에 따라 스트리밍 및 배치 처리 작업 - 스트리밍 데이터 수집기 : logstash, fluentd, MQ(Kafka, rabbitMQ), Redis - 스트리밍 데이터 가공 : storm, flink, spark streaming - 해당 처리를 하는 환경에서는 프로그래밍 필요 : python, Scala, java 등 - 저장 : HDFS, AWS A3, GCP(Google Cloud Platform), RDB, Google Bigquery (2) 분석 Hadoop, Spark, H.. 2022. 11. 16.
Tableau HA Server (1) 단일 노드 설치 (Default) 단일 컴퓨터에서 모든 서버 프로세스가 실행되며, 문제가 발생할 경우 중복성 및 안전 장치가 부족, 프로세스와 사용자 및 데이터 요구 사항 처리에 충분한 리소스가 있는지 확인해야 함 (2) 분산 설치 다중 노드 설치, 여러 대의 컴퓨터 필요, 중복성 및 추가 컴퓨팅 성능 제공해 안정성 및 효율성 확장 가능, 자동 리포지토리 장애 조치 기능 사용 가능 (3) HA(고가용성) 설치 주요 서버 구성 요소의 장애를 전체 서버 기능의 손실 없이 하도록 설계된 특수 형태 분산 설치. 분산 배포 과정에서 고가용성 배포 만드는 추가 단계 포함 3개 이상의 노드 추가, 주요 프로세스(리포지토리, 파일 저장소, 파일 서비스)의 여러 인스턴스가 다른 컴퓨터에 포함됨. 다중 파일 저장소.. 2022. 11. 7.
[Tableau] Chart Examples https://www.vizwiz.com/2022/10/chart-chooser.html#chartguide Which chart type should you use? I get asked quite often how I know which chart to choose and when. There are lot of times now when I don't really think about it, but that b... www.vizwiz.com https://public.tableau.com/app/profile/kevin.flerlage/viz/TheTableauChartCatalog/TableauChartExamples The Tableau Chart Catalog The Tableau Chart.. 2022. 10. 31.
ODS, DW, DM, ETL - ODS : Operational Data Source 많은 양의 데이터를 정형화시켜 저장하는 공간, DW가 활용할 수 있는 임시 운영 데이터 저장, 운영계에서는 최종 데이터 형상으로 데이터를 주로 관리하기 때문에 ODS로 시계열로 변환해 이력 데이터 보관 소스 데이터를 가져와 정제, 통합, 변환된 형태로 보관하고 DW로 공급해주는 데이터 준비 공간(Operational Data Source) - DW : Data Warehouse 활용할 수 있는 형태로 만들어 저장, 관리, 분석할 수 있는 시스템 - DM : Data Mart DW의 일부, 특정 분야에서 필요한 데이터들만 꺼내 저장 - ETL : Extraction-Transformation-Load ODS에서 DW, DM까지 데이터 추출, 변형, .. 2022. 10. 31.
[Tableau] refresh-environment-variables.txt @ECHO OFF REM this script assumes that cmd extensions are enabled :check_cygwin REM Cygwin binaries should not be on the PATH before the native windows binaries, in particular find.exe find /? >NUL 2>&1 if %ERRORLEVEL% NEQ 0 ( ECHO The find.exe executable did not work as expected. Cancelling. ECHO If you are using Cygwin ensure that the Windows CLI executables, most importantly find.exe, come be.. 2022. 9. 19.
[Tableau] Tableau-server-obliterate.txt @ECHO OFF @SETLOCAL enableextensions enabledelayedexpansion REM Make sure Windows binaries are on the PATH before custom ones SET PATH=%SystemRoot%\System32;%PATH% :check_bitness REM Running a 32-bit shell on 64-bit systems may cause trouble when working with the Windows registry. IF %PROCESSOR_ARCHITECTURE% == x86 ( ECHO Warning: Running in a 32-bit shell. ECHO It is recommended that you start .. 2022. 9. 19.
Data analyst skills 1. Data Analyst Career Path | How to Become a Data Analyst + What to Do Next (Alex The Analyst) https://www.youtube.com/watch?v=5MZo2RoS8Yo (1) How to get the job - Must haves : SQL, EXCEL, Tableau/Power BI (visualization tools) - Wish Lists : Python, AWS/Azure (2) Where to go after that - Python/R - ETL (SSIS, Azure Data Factory, AWS Glue) - Data Modeling - Predictive Modeling/Analytics - Data .. 2022. 5. 15.
Types of Data Analysts 1. Market research analyst 시장조사 분석가 2. Business analyst 비즈니스 분석가 3. Business intelligence analyst 비즈니스 인텔리전스 분석가 (1) Market research analyst 시장조사 분석가 (2022/05/13 ver.) https://www.coursera.org/articles/market-research-analyst What Is a Market Research Analyst? 2022 Guide Market research analysts pore over trending keywords, survey responses, social media mentions, and more to understand markets,.. 2022. 5. 15.
Data Analyst VS. Data Scientist 1. Data Analyst 2. Data Scientist 3. Data Analyst VS. Data Scientist + 참고 : Coursera (2022/05/03 ver.) 1. Data Analyst https://www.coursera.org/articles/what-does-a-data-analyst-do-a-career-guide What Does a Data Analyst Do? 2022 Career Guide Data analyst taking notes on a computer screen www.coursera.org - Data analyst : 데이터 애널리스트, 데이터 분석가 문제를 해결하기 위해 데이터셋을 수집, 정제, 해석하며 비즈니스, 금융, 법, 과학, 의학, 정부 .. 2022. 5. 15.