# colab
Today I learned)Data Analysis
Data Analysis - Python Using colab what is colaboratory(Colab)? the environment where user can study data analysis using Python online(browser) why do we use colab? -don't need to install python -access everywhere when the internet is enabled) -faster than my computer syntax -similar to Java 1) Variable can hold one value in one variable if value is digit, they can do
스파르타 코딩클럽 2주차 실습
colab은 구글이 제공하고, 1회 90분씩 이용할 수 있고 하루 12시간 한정되어 있다. ctrl + enter을 누르면 출력이 된다. 코드버튼을 누르면 새로운 코드 박스가 생성된다. concept_1) list list 안에는 무엇이든 들어갈 수 있다. concept_2) index 첫번째가 "0"부터 시작된다. (a, b, c, d, e) 라면 a는 0번째다 만약, []사이에 2개의 숫자가 있다고 하면 내가 어떻게 print 해야할까? [2,4] 라면 []를 두번 쓰면 된다. list_w = [3,4,[5,6],8] print(list_w[2]) 하면 [5,6]이 나온다. print(list_w2) 하면 5를 출력할 수 있다. concept_3) dictionary 변수를 하나하나 지정하는 것이 아니라, 데이터를 잘 정리해서 하나로 묶어서 저장하는 것 student_age = {'jack
[Python] 변수와 자료형_1
🔍 변수(Variable) 어떠한 값(value)를 담는 저장공간과 그에 상응하는 이름 ➰ 변수 이름 값의 의미를 추측할 수 있는 이름 사용 규칙 영문자 혹은 _(undersocer)로 시작 대소문자 구분 숫자로 시작할 수 없음 특수문자 사용할 수 없음 공백 사용할 수 없음 ➡ _로 이어줌 예약어(if, while, for, ...) 사용할 수 없음 ➰ 변수의 의미 변할 수 있는 것 👉🏻 값을 담는 상자 숫자, 문자, 다른 데이터 타입의 형들 모두 가능 변수를 저장하는 메모리를 자동으로 생성하고 주소가 생김 ➰ 변수의 선언 하나의 변수에 하나의 값을 대입 두 개의 변수에 같은 값을 대입 변수에 변수를 대입 ➰ 변수의 출력 print() 함수를 사용하여 출력 가능 🔍 자료형(data type) ➰ 순
AI 파이썬 자료형과 연산자
출처 프로젝트 파이썬으로 간단한 프로그램 만들고 발표하기 (결국은 알고리즘 - 문제 해결) 인터넷에서 참고하더라도 자기껄로 만들어서 제출하기! 강사님께서 주신 파일 코랩에 업로드하기 Colab Markdown language 문법 두가지 cell Code cell Text cell 출력함수: ptint() 주피터 노트북의 맨 마지막 행은 print()함수가 없어도 출력이 된다. 라이브러리 관련 명령어 전체 라이브러리 확인 pip list 현재 설치되어있는 라이브러리 현황을 보여준다 특정 라이브러리 확인 pip show pandas 특정
AI python intro
출처 조윤실 강사님 현) 가천대 컴퓨터공학과 겸임 교수 데이터를 분석할 수 있는 언어를 알아야 한다! 파이썬 랭귀지 - 리눅스 환경 프로그래머 생활 17-18년 과정 목표 요즘은 프로그래밍 리터러시 시대(디지털 리터러시 시대 다음) 데이터는 어디서 수집? 인터넷, 공공데이터 날것의 데이터를 조금 가공(전처리) 파이썬 라이브러리 SQL 언어 학습의 곡선 지수곡선처
코랩 스트림릿 연동 방법
출처: https://discuss.streamlit.io/t/how-to-launch-streamlit-app-from-google-colab-notebook/42399/6 1. 코랩 노트북을 새로 만든다. 2. 아래 코드를 순서대로 복붙+실행한다. 3. #6 코드의 결과로 나온 사이트에 접속한다. 4. #3 코드의 결과로 나온 숫자들을 복사해서 사진의 화살표로 표시된 칸에 붙여넣은 후 'Click to Submit' 버튼을 클릭한다. 5. 스트림릿 화면으로 연결된다.
[Colab] 런타임 연결 끊김 방지 & 출력 삭제
개발자 도구(F12)를 열고 Console에 아래의 코드를 입력하면 된다. 런타임 연결 끊김 방지 코드 출력 삭제 코드
VSCode와 Colab 연동하기
VSCode에서 Colab의 GPU를 사용하기 위해 연동을 시켜보자. 1. Cloudfare 바이너리 파일 설치 window의 경우 아래에서 다운로드 가능 https://developers.cloudflare.com/cloudflare-one/connections/connect-apps/install-and-setup Mac은 brew로 다운 가능하다. 2. VSCode 실행 Remote-SSH Extension 설치 command + shift + P 로 command palette를 열기 Remote-SSH : Open configuration file을 실행 /Users//.ssh/config 수정(기존파일에 추가하는 방식) Host *.trycloudflare.com HostName %h User root Port 22
colab google drive 같은 경로 파일 마운트
ipynb 파일을 만든 다음 먼저 3번째 아이콘 클릭해 Drive를 마운트 한다. colab에서 현재 파일 경로 확인 /Ccontent/MyDrive 경로에 있음
파이썬(colab) 개발 환경 세팅
다운 방법들 > 파이썬 다운로드 URL 오픈 소스 라이브러리 pandas - 데이터 분석 라이브러리 상용 라이브러리 anaconda - 많은 라이브러리들을 묶어서 패키지로 나눔 => 파이썬의 최신 버전을 따라 가지 않음. -> 파이썬, 머신 러닝, 인공 머신등등 라이브러리 존재... colab \- 연결: 브라우저를 통해 클라우드 상에 개발 환경을 하나 빌려옴(임대머신/가상 머신을 빌려옴). 해당 사이트에서 파일 > 새 노트로 열기
[Colab] ValueError: Couldn't instantiate the backend tokenizer from one of...
문제 Colab에서 transformers의 AutoTokenzier를 사용할 때 다음과 같은 에러가 발생하였다. 원인은 에러메세지 중 3번에 해당하는 것으로 sentencepiece가 설치되지 않았기 때문이다. 사용하려고 하는 토크나이저가 sentencepiece 기반이기 때문에 발생한 것으로 보인다. 해결 sentenecepiece를 설치하고 커널을 재시작하면 해결된다.
Colab ssh 사용하기
학교 졸업과제로 보이스피싱 탐지 어플을 만들고 있는데 Colab 서버를 로컬에서 사용하면서 개발하고 싶다는 생각에 이 글을 작성하게 되었다. 유튜버 테디노트님의 "Colab의 고성능 GPU를 로컬 PC에서 사용하는 방법!" 영상을 참고했다. 준비물 >1. Google Colab 계정 ngrok 계정 (ngrok.com) Visual Studio Code 사용 방법 1. Ngrok에 접속해 Colab에 토큰 넣기 ngrok에 접속하여 본인의 토큰을 복사해서 NGROK_TOKEN 변수에 저장한다. 2. Colab-SSH로 연결 
Google Colab 연결 끊김 방지
Google Colab이 종종 연결이 끊길 때가 있다. 이를 방지하기 위해 다음과 같이 해결해보자. Code Google Colab 화면을 키고 F12를 누른다. 그 다음 Console을 보면 아래에 > 로 되어있는 빈 칸이 보일 것이다. 여기에 자바스크립트 코드를 입력하자. 해결! - 2023.5.30 기준 Reference [1] https://teddylee777.github.io/colab/google-colab-런타임-연결끊김방지/
[TIL #42] Colab과 Kaggle을 이용한 머신러닝
당뇨병 예측 머신러닝 다항논리회귀를 통한 당뇨병 예측을 학습시켜보려 합니다. 이 과정은 Colab을 이용해 만들었습니다. 캐글 등록 먼저 캐글에서 데이터셋을 가져올 계획이기 때문에 캐글의 이름과 key를 등록해주겠습니다. 데이터셋 다운로드 및 압축풀기 캐글에 존재하는 데이터중 당뇨병과 관련된 데이터셋을 선택해 다운로드 받고 압축을 해제해줍니다. > 캐글에서 터미널에서 사용하는 명령어를 사용하려면 앞에 !를 붙여야합니다 사용 모듈 import 이번학습에 사용하게 될 모듈들을 불러오겠습니다. Sequential: 신경망 모델을 구성하기 위해 사용, 레이어를 선형으로 쌓아 구성하는 방식 Dense: 신경망 레이어 중 하나, fully connected 레이어를 생성합니다. Adam: 경사 하강법 알고리즘을 기반으로 하며, 학습률을 자동으로 조정하면서 효율적인 학습을 수행합니다. SGD: 확률적 경사 하강법, 각 학습 단계에서
Google Colab 파이썬 버전 바꾸기
https://www.datasciencelearner.com/change-python-version-in-google-colab-steps/ 위 글 참고하여 바꿀 수 있음
[TIL #41] Colab
Colab 구글에서 만든 개발환경으로 구글 드라이브에 파일을 올려놓고 웹상에서 직접코드를 돌릴 수 있습니다. 차별점이 있다면 코드를 박스별로 실행이 가능하고 다른 박스에서 선언하거나 할당한 값도 가져와서 사용할 수 있습니다. Colab은 Jupyter Notebook을 기반으로 하고 있어, 각 '메모장'은 셀로 이루어져 있고, 이 셀 단위로 코드를 실행하고 그 결과를 출력해볼 수 있습니다. 데이터분석/머신러닝에 자주 쓰이는 다양한 패키지들이 기본적으로 설치되어 있고, 필요에 따라 추가적으로 더 설치해줄 수도 있습니다.
Instant NGP, NeRF 개발 도전기
딥러닝 기술로 3D object를 만들 수 있을까? Neural Radiance Fields for View Synthesis ECCV 2020 Oral, Best paper Honorable Mention 논문이다. 신경망을 이용해 radiance field를 만들어 사진을 3D object로 만드는 task를 수행하는 기술로, 3D contruction 기술자가 아니어도 사진만으로 입체 영상을 만들고 편집할 수 있다는 점에서 3D 그래픽 기술의 확장 가능성을 제시하였다. Nerf overview 
colab 설정
colab 실행 https://colab.research.google.com 구글 코랩 접속 파일 → 새 노트 코드 실행: shift + enter or 왼쪽 삼각형 모양의 플레이 버튼 선택 런타임 기능 모두 실행: 긴 노트의 코드를 한 번에 실행하는 명령 실행 중단: 어떤 이유든 응답이 없거나, 긴 시간 실행중인 경우 코드를 중단하는 명령 런타임 다시 시작: 메모리에 저장된 변수나 실행 결과를 모두 초기화하고 다시 코드를 실행 명령 팔레트 도구 - 명령 팔레트 - “출력” 검색 - 모든 출력 지우기 선택(코드 실행 출력값 삭제) matplotlib 한글 설정 Colab 환경에서 matplotlib은 기본적으로 한글 폰트 미지원 매번 코드를 넣고 실행해야 한글 표기 가능 폰트 설치 → 런타임 - 런타임 다시 시작을 해야 설정 적용 Colaboratory 문서화 작업 왼쪽 목차 아이콘에서 \[+] 섹션
구글 코랩(Colab) 한글 사용 패치(한글 깨짐 현상)
jupyter notebook 웹기반 플랫폼들은 기본적으로 한글을 지원하지 않아서 한글 패치를 해주어야 하는데, 구글 colab의 시각화 라이브러리(matplotlib)도 한글 폰트를 지원하지 않기 때문에 한글이 깨져서 나오게 된다. 1. 한글 깨짐 일단 matplotlib을 import한다. '%matplotlib inline'의 의미는 코랩을 실행한 브라우저 자체(inline)에서 그림을 그려서 보겠다는 것이다. > > > 2. 한글 나눔 폰트 코랩 포함 jupyter notebook 플랫폼들은 한글을 지원하지 않기에 한글 폰트를 다운받아야 한다. > 
제로베이스 데이터취업스쿨 DAY18 EDA오리엔테이션1~3, CCTV1~2
폰트 설정 첫 번째 방법 두 번째 방법 시각화 모듈 사용 import Module : Module을 사용하겠다. import Module as md : Module을 md라는 이름으로 사용하겠다. from Module import function : Module에 포함된 function이라는 함수만 사용하겠다. ![](https://velog.velcdn.com/images/mezero402/post/ca03695f-ea7e-4cb6-bcee-9e9e3098f82e/image.jpeg