JIHYUN JEONG

제플린(Zeppelin)을 활용해서 Spark의 대한 기능들을 살펴보도록 하겠습니다. 기본적인 적들은 아래와 같은 구문을 통해서 활용할 수 있습니다. 스파크는 rdd라는 개념을 사용합니다. AWS S3에 있는 parquet 데이터를 불러 올때는 아래와 같은 명령어를 통해 사용합니다. 스파크에서도 DataFrame 형식으로 데이터를 읽을 수 있습니다. 판다스의 DataFrame을 떠올리면 됩니다. %pyspark from datetime import datetime raw = sqlContext.read.format("parquet").load("s3://spotify-data-artist/top-tracks/dt=2020-03-18/top-tracks.parquet") # 일자별로 들어오게 할 경우 # ..

2월 20일 수요일 Oracle SQL 강의 시작 à 모든프로그램 à Oracle Database 11g Express Edition à Run SQL Command Line 실행 SQL> create user scott identified by tiger; //user 생성 User created. SQL> grant dba to scott; //권한 부여 Grant succeeded. SQL> alter user hr identified by hr; //기존 user 비번 변경 User altered. SQL> alter user hr account unlock; //계정 unlock User altered. SQL> conn hr/hr; //접속 아이디/비번 (무조건 제일 먼저 연결을 해줘야 함.)..