태그>script(총 341개의 글)

'script' 관련 최근글

• [bash: sed] 대용량 파일에서 특정 위치의 행만 출력하기

  반달가면  by 반달가면|2017/01/13 22:57

  파일에서 특정한 행을 출력하기 위해서 sed 명령을 활용하게 되는데, 통상 아래의 예시와 같은 형태로 쓰게 된다. # my_data.txt 파일에서 124번째 행을 출력 sed -n 124p my_data.txt # my_data.txt 파일에서 100번째 행부터 110번째 행까지 출력 sed -n 100,110p my_dat..

  리눅스, 스크립트, linux, bash, script

• [bash: awk] 다중 문자열 검색 - 2

  반달가면  by 반달가면|2017/01/05 22:17

  예전에 적었던 awk를 이용한 다중 문자열 검색에 대한 보충. 문자열 A와 문자열 B가 모두 포함된 경우(A and B)와 둘 중 하나가 포함된 경우(A or B)에 대하여 아래와 같이 입력하여 검색할 수 있다. 교집합(and)은 "&&", 합집합(or)은 &qu..

  리눅스, 스크립트, linux, bash, script

• [bash: sed] 텍스트 파일의 문자열 수정/변경

  반달가면  by 반달가면|2017/01/04 22:50

  sed에서 -i 옵션을 추가하면 작업한 내용이 텍스트 파일에 반영되어 저장된다. 우선 간단한 예시를 보자. my_data.txt 파일에서 문자열 "abc"를 "123"으로 대체하는 경우다. -i 옵션이 없으면 대체된 내용이 화면으로 출력된다. # 파일 내용 확인 c..

  리눅스, 스크립트, linux, bash, script

• [bash: awk] 출력할 내용을 조건에 따라 여러 파일로 나누어 저장하기

  반달가면  by 반달가면|2017/01/03 22:32

  리눅스 shell에서와 유사하게, awk에서 print 명령으로 출력할 내용을 ">" 기호를 사용하면 파일로 저장할 수 있다. 아래의 예시를 보자. 우선 my_data.txt 파일의 내용이 과일의 가격이라고 가정하자. # my_data.txt 파일 내용 확인 cat my_data.txt ap..

  리눅스, 스크립트, linux, bash, script

• [bash:uniq, sort] 한글 문자열에 대한 중복 제거 문제

  반달가면  by 반달가면|2016/12/29 23:49

  같은 문자열의 행이 연속될 경우 중복을 제거하거나 중복되는 회수를 확인하기 위해 uniq 명령을 종종 사용하게 된다(uniq의 기본적인 활용에 대한 내용은 이전 게시물을 참고하자. 여기로). 매우 요긴한 기능을 제공하지만, 한글에서는 문제가 발생할 수 있다는 사실을 최근에..

  리눅스, 스크립트, linux, bash, script

• [bash: read, while] 공백을 포함한 이름을 가진 파일들에 대한 반복 ..

  반달가면  by 반달가면|2016/12/28 23:09

  예전에 for 반복문을 이용해서 여러 파일에 대한 반복작업을 하는 방식에 대해 쓴 적이 있다(여기로). 파일명에 공백이 포함된 상황을 해결하기 위해 임시 파일을 만들고 sed까지 동원해서 스크립트를 만들었는데, 그보다 훨씬 간편하고 우아한 방법이 있어서 정리해 두기로. 예..

  리눅스, 스크립트, linux, bash, script

• [bash: awk] awk에서 외부 명령을 실행하고 결과를 변수에 저장하기

  반달가면  by 반달가면|2016/12/20 21:59

  awk에서 문자열 작업을 할 때 외부 프로그램을 실행하는 방법이다. awk 자체적으로도 제공하는 다양한 함수 외에 외부 명령을 필요로 하는 상황에서 아주 요긴하다. 예시를 하나 생각해 보자. my_data.txt 파일을 읽어서 한 행마다 MD5 해쉬값을 구해야 하는 경우다. awk에는 M..

  리눅스, 스크립트, linux, bash, script

• [bash: awk] 특정 위치(field)의 문자열에서 특정 길이 만큼 문자열 ..

  반달가면  by 반달가면|2016/12/16 22:34

  awk에서도 expr의 substr 옵션과 같은 기능을 하는 함수가 존재한다. 이름도 substr로 같다. (expr의 substr 옵션에 대한 내용은 이전 게시물을 참고하자. 여기로) substr 함수의 형식은 아래와 같다. 아래의 형식에서 문자열이 들어갈 자리에 $1, $2 등 위치(field)..

  리눅스, 스크립트, linux, bash, script

• [bash: while, read, <] 텍스트 파일을 한줄씩 읽어서 작업하기

  반달가면  by 반달가면|2016/12/14 23:18

  텍스트 파일을 한줄씩 읽어서 순차적으로 작업을 해야 할 경우, while과 read 명령을 조합하고 I/O 리다이렉션(redirection)으로 파일을 열어 주면 된다. 예시를 보면 금방 감을 잡을 수 있을 것이다. 예를 들어 my_data.txt 파일을 한줄씩 읽어서 행번호와 함께 출력하는 경우..

  리눅스, 스크립트, linux, bash, script

• [bash: grep] 두개의 파일에서 공통으로 출현하는 문자열 찾기

  반달가면  by 반달가면|2016/11/30 21:00

  파일 2개를 비교해서 양쪽 파일에 공통적으로 출현하는 문자열을 찾는 방법이다. grep의 -f 옵션을 사용하면 된다. -f 옵션은 검색할 문자열을 파일로부터 한줄씩 읽어들이기 위한 것이다. 예를 들어 a.txt 파일에 있는 문자열 중에 b.txt에도 있는지 알고 싶다면, 아래와 같이 해 ..

  grep, 리눅스, 스크립트, linux, bash

• [bash: awk] 작업 시작전, 완료후에 실행할 명령어 지정(BEGIN/END)

  반달가면  by 반달가면|2016/11/18 23:58

  awk에서 텍스트 파일에 대한 작업을 시작하기 전, 또는 모든 작업이 끝난 후에 실행할 명령어를 지정해 줄 수 있다. 시작전을 나타내는 구문은 BEGIN, 끝난 후는 END로 지정한다. 아래의 예시를 보자. awk 'BEGIN { print "작업을 시작합니다." } . END { p..

  리눅스, 스크립트, awk, linux, bash

• [bash: awk] 조건에 따른 문자열 작업

  반달가면  by 반달가면|2016/11/17 01:03

  awk 구문의 가장 기본적인 형태는 아래와 같다. awk '/패턴/ {명령어}' 파일명 텍스트 파일을 한 행씩 읽으면서 일치하는 패턴(문자열)이 보이면 이에 상응하는 명령어를 실행한다. 예를 들어 my_file.txt 파일에서 "abc" 문자열이 있으면 행 전체($0)를 ..

  리눅스, 스크립트, awk, linux, bash

• [bash: read] read 명령의 요긴한 옵션 몇가지

  반달가면  by 반달가면|2016/11/07 21:56

  리눅스 shell script에서 키보드를 통한 사용자 입력을 변수에 저장하기 위해 read 명령을 사용하게 되는데, 몇가지 편리한 옵션이 있어서 정리해 두기로. 우선, 입력을 받을 때 안내문을 출력하기 위한 -p 옵션이다. echo 명령으로 출력한 후에 read 명령을 사용해도 되지만 ..

  read, 입력, 옵션, 메세지, 시간제한

• [bash: sed] sed에서 영역 구분을 이용한 문자열 재구성 작업 (역슬..

  반달가면  by 반달가면|2016/10/31 22:02

  sed에서 역슬래시-괄호를 이용하면 문자열에서의 영역을 구분할 수 있는데, 이를 이용해서 단순 문자열 대체를 넘어서 좀 더 복잡한 작업을 할 수 있다. 몇가지 예시를 보면 금방 감을 잡을 수 있을 것이다. sed를 이용한 기본적인 문자열 대체 등 일반적인 내용은 이전 게시물들을..

  sed, 문자열, 영역, 리눅스, 스크립트

• [bash: curl] ftp 접속에서 여러 서버 또는 여러 파일에 대한 업로드 자동화

  반달가면  by 반달가면|2016/09/21 21:47

  우선, curl을 이용한 ftp 자동 접속 방법은 이전 게시물을 참고하자. 여기로 우선 ftp.myserver.com 서버의 /my_dir/ 디렉토리에 파일 memo.txt, image.jpg, data.bin 이렇게 파일 세개를 업로드하는 상황을 생각해 보자. 사용자 계정은 ftp_user, 암호는 ftp_pw라고..

  리눅스, curl, 스크립트, ftp, 자동접속