🍅 Ch08 Advanced Tools 🍅

Regular Expression 정규 표현식

A syntactical set or phrase that represents a pattern of text or strings

문자열 내에서 특정 패턴 찾거나 조작하기 위해 사용

Enables you to represent a varying array of characters with a much smaller set of predefined characters

문자열에서 원하는 텍스트 찾음 / 간단한 식만으로 다양한 형태의 문자열에 대응 가능

Often include metacharacters

Metacharacters - characters that represent another set or group of characters or commands

특별한 의미, 동작 수행하는 문자 / 다른 문자 집합, 명령어 그룹 대신함

---

Meta characters

. (dot, period) - a character 임의의 한 문자와 일치

[] (square brackets) - any one of inside in it  대괄호 안에 열거된 문자들 중 하나의 문자와 일치

* (asterisk, splat) - zero or more characters 바로 앞 문자, 그룹이 0번 이상 반복 가능

[^.*] (caret) - match at the beginning 패턴 맨 앞에 사용하면 해당 문자열, 줄의 시작 / 대괄호 안의 맨 처음에 위치하면 뒤에 나열된 문자를 제외한 어떤 문자와도 일치 / . (dot)”와 “* (asterisk)”를 제외한 한 문자와 일치

^.*[.*] - match at the beginning and match inside in it

$ (dollar) - match at the end of line 문자열이나 줄의 끝 나타냄

\ (backslash) - remove special meaning of the following character 다음에 오는 문자의 특별한 의미 제기하여 그 문자를 일반 문자로 취급

? (question mark) - zero or one character 앞의 문자, 그룹이 0번 또는 1번 나타남을 의미

[a - z] - match all occurrences of any single letter

---

Regular Expression

[0-9] [0-9] [0-9]\.[0-9][0-9] [0-9]\.[0-9][0-9][0-9]

-> U.S. Telephone number

0부터 9까지의 한 자리 숫자

흠냐링

---

FTP (file transfer protocol)

로컬에서 FTP 클라이언트 사용해 원격 서버(10.10.54.75)에 접속하여 여러 작업 수행하는 과정 보여줌

1.  FTP 서버 접속 및 로그인

C:\ > ftp 10.10.54.75

로컬 컴퓨터의 명령 프롬프트(여기서는 C:)에서 FTP 클라이언트 실행하여 IP 주소 10.10.54.75에 접속

Id/passwd

FTP 서버에 접근하기 위해 사용자 아이디, 비밀번호 입력해 로그인

2. 원격 디렉터리 작업

> dc public_html

원격 서버에서 작업할 디렉터리를 public_html로 변경

일반적으로 FTP 명령어는 cd를 사용 / 일부 FTP 클라이언트에서는 dc 사용

> dir (or ls)

현재 디렉터리 내의 파일, 폴더 목록 출력

3. 전송 모드 설정 및 파일 전송

> asc

FTP 전송 모드를 ASCII 모드로 벽경

ASCII 모드는 텍스트 파일 전송 시 사용, 파일 내의 줄바꿈 문자 등을 서버 환경에 맞게 자동으로 변환

> put a.html

로컬의 a.html 파일을 원격 서버로 업로드

> get b.html

원격 서버의 b.html 파일을 로컬 컴퓨터로 다운로드

> mput *.html

현재 로컬 디렉터리에서 확장자가 .html인 모든 파일을 원격 서버로 일괄 업로드

mput은 multiple put의 약자로, 일치하는 파일 여러 개를 한번에 전송할 때 사용

> bi

전송 모드를 바이너리 모드로 변경 / 텍스트 이외의 파일 전송 시 사용, 파일 데이터가 원본과 동일하게 전송

> put my.jpg

로컬의 my.jpg 이미지 파일을 원격 서버로 업로드

파일의 데이터 손상을 방지하기 위해 바이너리 모드로 전송

4. FTP 세션 종료

> quit

FTP 세션을 종료하고, FTP 클라이언트를 닫음

---

grep

텍스트에서 특정 문자열이나 패턴이 포함된 줄만을 찾아 출력

파일 이름 뒤에 검색할 문자열 지정하면 해당 파일에서 일치하는 줄들을 찾음

|를 이용해 다른 명령어의 출력 결과를 받아 검색

print lines that has the string

$ grep unix30 /etc/passwd

$ get /etc/passwd | grep unix30

가져온 내용을 grep unix30으로 전달하여 검색

$ grep -v // opposite 반전 매칭

$ grep -i // ignore case 대소문자 무시

---

find

지정한 경로에서 파일이나 디렉터리를 다양한 조건에 따라 검색할 수 있는 강력한 도구

find files in directory structure

$ find / -name core 이름 기준

$ find /export -user unix300 파일 소유자 기준

$ find /export -size +2000k 파일 크기 기준

$ find / -perm -4000 파일 권한 기준

$ find / -name core 2> /dev/null 오류 메시지 무시하며 검색

---

sort

표준 입력, 파일 내용 정렬해 표준 출력으로 보냄

$ sort -t: +1 /etc/group

$ head /etc/passwd | sort -r > pass.txt 정리 후 파일에 저장

-f - ignore case 대소문자 무시

sort -f unsorted.txt

-r - reversed order

sort -r unsorted.txt

-t - set delimiter (field separator) 각 줄을 여러 필드로 구분할 때 사용할 구분자 지정

$ sort -t: +1 /etc/group

-o - set ouput file 출력 파일 지정

sort -r input.txt -o sorted.txt

---

Tee/script

Tee

표준 출력을 화면에 표시하면서 동시에 파일로 저장할 수 있도록 해줌

하나의 출력 스트림을 분할하여 두 군데에 기록 (터미널 화면(표준출력)과 파일)

split output (screen and file)

$ ps -ef | tee ps.txt - 실행 중인 프로세스 목록 출력, tee 통해 이 결과를 화면에 표시하면서 ps.txt 파일에 저장

$ telnet 10.10.54.75 | tee telnet.txt - telnet으로 원격 호스트에 접속한 후, 세션의 출력과 동시에 telnet.txt에 기록

Script

사용자의 터미널 세션(입력 명령어 및 출력 결과 전체)를 파일에 기록하여 나중에 재생하거나 분석할 수 있게 해줌

터미널에서 주고받은 모든 입력(키보드)와 출력(화면)을 파일에 그대로 기록해 주는 도구

record interactive login session

$ script [-a filename] - 세션 기록 시작 / -a 옵션 사용하면 기존 파일에 내용 추가, 없으면 새로운 파일에 기록

$ unix commands - 세션 내 명령어 실행 및 기록

...

$ exit // script is ended - 세션 종료

$ script -a mysession.log
Script started, file is mysession.log

Unix utilities Unix 유틸리티 명령어

wc - word count 줄, 단어, 문자 수 계산 (-l 줄 수, -w 단어 수, -c 바이트, -m 문자 수)

wc -l file.txt    # file.txt의 줄 수
wc -w file.txt    # file.txt의 단어 수
wc -c file.txt    # file.txt의 바이트 수

cut - extract character or words 특정 열, 범위의 문자, 구분자 기준으로 특정 필드 추출

echo "apple,banana,cherry" | cut -d',' -f2   # banana
cut -c1-5 file.txt                          # 각 줄의 1~5번째 문자

paste - file merge 여러 파일의 각 줄을 옆으로 붙여 하나의 행으로 병합

paste file1.txt file2.txt   # file1.txt의 1행 + 탭 + file2.txt의 1행 ...
paste -d',' a.txt b.txt     # 구분자를 콤마로

tr - translate character 입력한 문자들을 다른 문자로 변환, 삭제, 압축

echo "aAbB" | tr 'a-z' 'A-Z'    # 소문자 → 대문자
echo "a  b   c" | tr -s ' '     # 연속 공백 → 하나의 공백
echo "hello123" | tr -d '0-9'   # 숫자 삭제 → hello

split - file divide 큰 파일을 일정한 크기나 줄 수마다 여러 개의 작은 파일로 분할

split -l 1000 large.txt chunk_   # 1000줄씩 chunk_aa, chunk_ab ...
split -b 5m backup.tar.gz part_  # 5MB씩 part_00, part_01 ...

uniq - file compare 정렬된 파일에서 연속되어 나오는 동일 행 제거

sort names.txt \| uniq          # 중복 제거
sort names.txt \| uniq -c       # 각 이름별 등장 횟수
sort names.txt \| uniq -d       # 중복된 이름만

cmp - file compare 바이트 단위로 파일 비교해, 차이 나는 첫 위치 알려줌

cmp file1.bin file2.bin        # 첫 차이 위치 출력
cmp -l file1.bin file2.bin     # 모든 차이 바이트 출력

comm - file compare 두 개의 정렬된 파일 비교해, 각각의 파일에만 존재하는 행과 양쪽에 공통적으로 존재하는 행 서로 다른 열로 출력

comm fileA.txt fileB.txt            # 기본: 3열 모두
comm -12 fileA.txt fileB.txt        # 공통 행(3열)만
comm -23 fileA.txt fileB.txt        # fileA에만 있는 행

diff - file compare 두 파일의 내용을 행 단위로 비교해, 추가 삭제 변경된 부분 상세히 보여줌

diff old.txt new.txt               # 기본 비교
diff -u old.txt new.txt > patch.diff  # 패치 파일 생성
diff -i old.txt new.txt            # 대소문자 무시