정규표현식(해시태그, URL 파싱 등에 사용)

1. 정규표현식 sample text

1. google에서 정규표현식 연습사이트 검색해주세요.

2. 2가지 사이트를 추천받을 수 있습니다. (regex101.com과 regexr.com)

3. 그 중 regexr.com에서 실습을 하도록 하겠습니다.

RegExr: Learn, Build, & Test RegEx

Regular expression tester with syntax highlighting, PHP / PCRE & JS Support, contextual help, cheat sheet, reference, and searchable community patterns.

https://regexr.com/5nvc2

hello world
hello  world
hello, world
Hello World

hello world hello

hello
hallo
hollo
heallo
yellow

Monday Tuesday Wednesday Thursday Friday Saturday Sunday

abcdefghijklmnopqrstuvwxyzABCDEFGHIJKLMNOPQRSTUVWXYZ01234567891011121314151617181920
aaabbcaaabbcabcabc
aaa bb c aaa bb c a b c a b c
aaa1bb2c3aaa4bb5c6

[123456]
123[456]789
abc[def]ghij

010-9091-5491
010-5043-2901
010-5050-40409
010-49492-3131
010 2913 3132
01019133829
064-721-3213
010.1913.3829


paul-korea@naver.com
paul@naver.com
leehojun@gmail.com
hojun.lee@gmail.com
test.test@go.go.go


https://github.com/LiveCoronaDetector/livecod
github.com/LiveCoronaDetector/livecod
https://github.com/LiveCoronaDetector

I never dreamed about success, I worked for it.
Do not be afraid to give up the good to go for the great.

hello (hello world) hello
hello \\hello world// hello
^^
:)

[(name, leehojun), (age, 10), (height, 180), (email, paul-lab@naver.com)]
{name : leehojun, age : 10, height : 180, email : paul-lab@naver.com}

가나다라마바사아자차카타파하
ㄱㄴㄷㄹㅁㅂㅅㅇㅈㅊㅋㅌㅍㅎ
안녕_하세요
안녕-하세요
수사
수박
수상
동해 물과 백두산이 마르고 닳도록 하느님이 보호하사 우리나라 만세

2. 환경설정 및 팁

3. (실전) 일반 문자열

/hello/gm
/hello world/gm
/Hello/gm
/Hello/gim

4. (실전) 처음과 끝(Anchors)

/^hello/gm : 처음에 hello
/hello$/gm : 끝에 hello

5. (실전) 모든 문자

/./gm : 모든 문자열(*과 같은 역할)
/....../gm : 모든 6개의 문자열

6. (실전) 택1

/h[eay]llo/gm : 대괄호 안에 문자는 문자 1개에 해당!
/h[ea]l../gm : 총 5개의 문자

7. (실전) 범위

/h[a-f]llo/gm
/[a-zA-Z0-9]/gm : 모든 알파뱃과 숫자를 찾음
/[^a-zA-Z0-9]/gm : 나머지 문자열을 찾음

8. (실전) 부정

/h[^ae]llo/gm : 대괄호 안에 있다면 not에 의미

9. (실전) 서브패턴

/(on|ues|rida)/gm : 그룹 1로 3개 중 매칭되는 패턴 찾음
/(?:on|ues)/gm
/(on|ues)|(rida)/gm : 그룹1(on|ues)과 그룹2(rida)로 각각 매칭되는 패턴 찾음
/.(a|e|o)ll./gm
/hello (?!world)/gm : hello 뒤에 world가 오지 않는 것
/hello (?=world)/gm : hello 뒤에 world가 오는 것

10. (실전) 수량자

_* : 앞에 있는 문자가 0개 ~ N개
_+ : 앞에 있는 문자가 1개 ~ N개
_? : 앞에 있는 문자가 0개 ~ 1개

{3} : 3개
{3,} : 3개 이상
{1,3} : 1개 ~ 3개

_* : 앞에 있는 문자가 0개 ~ N개 ({0,})
_+ : 앞에 있는 문자가 1개 ~ N개({1,})
_? : 앞에 있는 문자가 0개 ~ 1개 ({0,1})

/[0-9]{3}[-.* ][0-9]{4}[-.* ][0-9]{4}/gm
/[0-9a-zA-Z]{2,3}[-.* ][0-9]{3,4}[-.* ][0-9]{4}/gm
/[0-9a-zA-Z]+@[0-9a-zA-Z]+.[a-zA-Z]+/gm

11. (실전) 캐릭터 클래스

/\w/gm : 워드
/\w{5} /gm : 5개의 글자와 스페이스 하나
/\W/gm : not 워드
/\d/gm : 숫자
/\D/gm : not 숫자
/\s/gm : 스페이스
/\S/gm : not 스페이스

12. (실전) 이스케이프 문자

/\[.*]/gm : 대괄호([]) 안에 감싸여진 문자열
/\(.*\)/gm : 소괄호 안에 감싸여진 문자열
/\\.*\//gm : 이미 사용되고 있는 특수문자로 감싸여진 문자열
/-.*-/gm : 이스케이프 문자를 사용할 필요가 없는 경우
/\^\^/gm : 이스케이프 문자가 필요한 경우
/:\)/gm : 이스케이프 문자가 필요한 경우

13. 언어별 실습

13.1 환경설정

• javascript로 실습을 해보실 경우 크롬에 접속하여 about:blank을 url에 입력하시고 개발자 도구를 열어주세요. window의 경우에는 ctrl + shift + i, mac의 경우에는 cmd + option + i입니다. 메뉴에서 개발자 도구를 클릭하셔서 열어도 실행 가능합니다.

• python을 사용하실 경우 google에서 colab을 접속하신 다음 새 노트를 클릭해주세요.

13.2 환경별 간단한 실습

• javascript를 사용하시는 분들은 console 창에서 아래와 같이 실습하세요.

• python을 사용하시는 분은 아래와 같이 colab에서 실습하세요.

13.3 python 메서드 설명 및 실습

re.search(패턴, 문자열, flags=0)

1. tutorial 1

import re

정규표현식 = r'([a-zA-Z]+) : (\d+)'
문자열 = 'name : leehojun, age : 10, height : 180, email : paul-lab@naver.com'
결과 = re.search(정규표현식, 문자열) 

print(f're.search(정규표현식, 문자열) : {결과}')

if 결과:
    print(f'결과값의 시작과 끝 : {결과.start()}, {결과.end()}')
    print(f'매칭 그룹핑 : {결과.group(0)}') # 그룹 0 ~ 3
else:
    print('매칭 결과 없음!')

2. tutorial 2

import re

정규표현식 = r'([a-zA-Z]+) : (\d+)'
문자열 = 'name : leehojun, age : 10, height : 180, email : paul-lab@naver.com'
결과 = re.findall(정규표현식, 문자열)

print(f're.findall(정규표현식, 문자열) : {결과}')

import re

정규표현식 = r'([a-zA-Z]+) : (\d+)'
문자열 = 'name : leehojun, age : 10, height : 180, email : paul-lab@naver.com'
결과 = re.finditer(정규표현식, 문자열)

print(f're.finditer(정규표현식, 문자열) : {결과}')

for i in 결과:
    print(i)
    print(i.start(), i.end())
    print(i.group())

3. tutorial 3

import re

정규표현식 = r'([a-zA-Z]+) : (\d+)'
문자열 = 'name : leehojun, age : 10, height : 180, email : paul-lab@naver.com'
결과 = re.split(정규표현식, 문자열)
# split(정규표현식, 문자열, [최대분할수])

결과

import re

정규표현식 = r','
문자열 = 'name : leehojun, age : 10, height : 180, email : paul-lab@naver.com'
결과 = re.split(정규표현식, 문자열, 2)

결과

4. tutorial 4

import re

정규표현식 = r','
문자열 = 'name : leehojun, age : 10, height : 180, email : paul-lab@naver.com'

결과 = re.sub(정규표현식, " !!!", 문자열)

결과

import re

문자열 = 'name : leehojun, age : 10, height : 180, email : paul-lab@naver.com'
결과 = re.compile(',').sub(" !-!", 문자열)

결과

5. tutorial 5
1. aaabbccc는 a3b2c3로 압축된다. 압축된 문자열을 정규표현식을 사용하여 다시 풀어보시오.

import re

정규표현식 = re.compile(r'([a-z])([1-9])')
문자열 = 'a3b4c2'

결과 = 정규표현식.findall(문자열)
s = ''
for i, j in 결과:
    s += i*int(j)
s

6. tutorial 6
python에 dict에 items형식을 아래와 같은 형식으로 split하시오.

import re

문자열 = '[(name, leehojun), (age, 10), (height, 180), (email, paul-lab@naver.com)]'

# split 형식
[('name', 'leehojun'),
 ('age', '10'),
 ('height', '180'),
 ('email', 'paul-lab@naver.com')]

정규표현식 = r'\((.*?), (.*?)\)'
결과 = re.findall(정규표현식, 문자열)

결과

7. tutorial 7
1. '6746-29301-28391 신한은행'와 같은 문자열이 입력되었을 때 '신한은행 !!! 6746 29301 28391'와 같이 출력해주세요.

import re

정규표현식 = r'(?P<one>\d+)-(?P<two>\d+)-(?P<three>\d+) (?P<four>\w+)'
문자열 = '6746-29301-28391 신한은행'
결과 = re.match(정규표현식, 문자열)

결과.expand('\g<four> !!! \g<one> \g<two> \g<three>')
결과.group(1)
결과.group('one')
결과.groups()
결과.groupdict()

import re

정규표현식 = r'(\d+)-(\d+)-(\d+) (\w+)'
문자열 = '6746-29301-28391 신한은행'
결과 = re.match(정규표현식, 문자열)

결과
결과.group(4)
결과.groups()
결과.groupdict()

14. 연습문제

1. 전화번호만 찾는 정규표현식을 만들어보세요.

2. 이메일만 찾는 정규표현식을 만들어보세요.

3. URL만 찾는 정규표현식을 만들어보세요.

4. 다음과 가진 패턴을 가진 숫자가 입력되었을 때 다음 패턴에 부합하는지, 부합하지 않는지 가려내는 코드를 작성하세요.
1. 자릿수는 8자리입니다.
2. 1부터 9까지의 숫자가 맨 앞에 주어집니다.
3. 두번째 숫자부터 다섯번째 숫자까지는 1010이 주어집니다.
4. 여섯번째, 일곱번째 숫자는 0부터 5까지의 숫자가 주어집니다.
5. 여덟번째 숫자는 0이어야 합니다.
6. 입출력 예시 :
1. 입력 : 71010330, 출력 : Yes
2. 입력 : 98101033, 출력 : No

5. 다음과 같은 영어 소설에서 전체문자, 숫자, 띄어쓰기, 대문자, 소문자, 특수문자의 개수를 나타내고 가능하다면 시각화 라이브러리를 사용하여 시각화 하세요.(위대한 게츠비)
www.gutenberg.org

http://www.gutenberg.org/files/64317/64317-0.txt
기본 코드 :

import requests

url = 'http://www.gutenberg.org/files/64317/64317-0.txt'
response = requests.get(url)
response.encoding = 'utf-8'
text = response.text

text

6. 약자 만들기
1. ORM, NASA, CS 등 약자를 만드는 프로그램을 작성하세요.
2. 입출력 예시:
1. 입력 : Object Relational Mapping, 출력 : ORM

7. 주사위 문제
1. 주사위 2개가 있습니다. 1번 주사위는 1~6숫자가 적혀있고, 2번 주사위는 A~D, ! 문자가 적혀 있습니다. (2번 주사위에 하나는 공란입니다. 아무 문자도 적혀있지 않습니다.)
2. 주사위 1번을 던지고 주사위 2번을 던집니다.
3. 2번 주사위는 아래와 같은 규칙을 가집니다.
1. A : 1번 주사위 점수에 2배
2. B : 1번 주사위 점수에 3배
3. C : 1번 주사위 점수에 4배
4. D : 1번 주사위 점수에 5배
5. ! : 지금까지 접수의 합의 제곱
4. 입출력 예
1. '2A3A4!'의 경우에는 4+6+4 점수에 지금까지 있었던 점수의 제곱이니 14^2로 196점이 됩니다.
2. '6!2C2C'의 경우에는 36점에 4+4를 더해야 하므로 44점이 됩니다.

15. 주피터 노트북

Google Colaboratory

https://colab.research.google.com/drive/12E0tx4nq465bTcnV5ISQZFwKkN0meCnw?usp=sharing

16. (부록) 한글 정규표현식

[ㄱ-ㅎ|ㅏ-ㅣ|가-힣]    # 모든 한글
[^[가-힣]+$]           # 한글만 허용
[^[가-힣\\s]+$]        # 공백 허용