데이터엔지니어
-
Python으로 웹 스크래퍼 만들기 - 파이썬 함수 사용Python 2024. 2. 22. 19:21
파이썬 함수의 구조 1. 함수의 구조 def 함수 이름(매개변수): 수행할 문장1 수행할 문장2 print() 함수이름(인수) 1) 매개변수(parameter)와 인수(arguments)는 혼용해서 사용하는 용어이다. 입력으로 전달된 값을 받는 변수, 인수는 함수를 호출할 때 전달하는 입력값을 의미한다. 2. 주의사항 1) 인수가 없을 시 기본값을 설정해주어야 오류가 발생하지 않는다. def say_hello(user_name="anonymous"): print("hello",user_name) say_hello() # hello anonymous 2) 주석은 #으로 달기 3) Ture,False 입력시 앞글자 대문자 사용하기 4) 함수 작성 시 탭 키 or 스페이스바 사용으로 함수 내에 있다는 것을 알..
-
VARCHARDATABASE/MySQL 2024. 1. 23. 17:56
프로젝트를 진행하면서 varchar에 대하여 많은 고민이 들었었다. 그리하여 되짚어보며 궁금했던 점들에 대한 내용에 대한 검색 돌입!🤔 1. MySQL에서 VARCHAR와 TEXT 차이점은? 2. 지정된 길이보다 더 긴 문자열이 데이터베이스에 저장된다면 어떻게 될까? 1. MySQL에서 VARCHAR 와 TEXT 차이점은? TEXT(또는 CLOB)나 BLOB와 같은 대용량 데이터를 저장하는 컬럼 타입을 LOB(Large Object) 타입이라고 한다. RDBMS 에서는 LOB 데이터를 Off-Page 라고 하는 외부 공간에 저장한다. https://dev.mysql.com/doc/refman/8.0/en/char.html MySQL :: MySQL 8.0 Reference Manual :: 13.3.2 ..
-
DBeaver로 ERD생성하기DATABASE/PostgreSQL 2024. 1. 21. 19:44
프로젝트를 진행하면서 항상 dbdiagram으로 ERD를 작성했는데, 조금 더 깔끔하게 보기 쉽게 정리하는 방법에 대해 고민해 보게 되었다. DBeaver를 활용해서 DB 다이어그램을 생성하는 것도 간편하고 정돈된 느낌이 들어 공부하며 직접 만들어 보았다. 1. DBeaver 접속 후 Diagrams 우클릭 -> 새 ER 다이어그램 클릭 2. Name에 생성할 Diagram 이름 입력 -> Initial content에서 해당 DB 클릭 -> 완료 클릭 3. 생성된 ERD 확인 후 보기 쉽게 정렬하기
-
DBeaver로 PostgreSQL 연결하기DATABASE/PostgreSQL 2024. 1. 20. 19:51
1. 설치 아래 주소로 접속하여 DBeaver를 설치해 준다. https://dbeaver.io/download/ Download | DBeaver Community Download DBeaver Community 23.3.4 Released on February 5th 2024 (Milestones). It is free and open source (license). Also you can get it from the GitHub mirror. DBeaver PRO 23.3 Released on December 11th, 2023 PRO version website: dbeaver.com Trial version dbeaver.io 2. PostgreSQL 연결하기 1) 우클릭 -> Create ->..
-
PostgreSQL 사용법DATABASE/PostgreSQL 2024. 1. 19. 18:29
SQL을 사용해 보며 Postgre를 사용할 일이 생겨 처음 연결부터 데이터 확인 하는 법까지 차례차례 기록해 보았다. 목차 1. PostgreSQL 설치 2. PostgreSQL 접속 3. 사용자 생성 4. 데이터베이스 생성 5. 데이터베이스 확인 1. PostgreSQL 설치 (Mac OS) 1) 터미널에서 설치 brew postgres 2) 홈페이지에서 설치 https://www.postgresql.org/download/ PostgreSQL: Downloads www.postgresql.org 2. PostgreSQL 접속 1) 서비스 시작 brew services start postgresql 2) 터미널에서 postgre접속하기 psql postgres 3) 사용자 확인 postgres=# \..
-
3차 프로젝트 회고코린이 일기/3차 프로젝트 2023. 11. 5. 22:00
뿌듯하면서도 많은 교훈을 얻은 3차 프로젝트 회고 목차 1. 프로젝트 정의 2. 프로젝트 목표 3. 프로젝트 과정 4. 프로젝트 내용 5. 코드 문제 & 해결 6. 기억에 남는 코드 7. 느낀 점 1. 프로젝트 정의 React와 Node.js를 활용하여 3주 동안 웹 서비스의 다채로운 특징을 가진 새로운 기능을 담아낼 수 있는 사이트 구축 AWS EC2를 이용하여 백엔드 서버 구축, S3를 이용하여 사진 데이터 처리 온라인 또는 오프라인으로 팀원들과 소통하며 PET의 관점으로 웹 페이지를 분석 위치 기반 지역 마켓 플레이스 핵심 기능과 제품, 대상을 선정하여 어떠한 도메인으로 프로젝트를 진행 할 지 결정 2. 프로젝트 목표 위치 기반 지역 마켓 플레이스에 대한 특징으로 다양한 기능 개발(회원가입 기능, ..