[ linux ] csv 파일 column 합계 구하기

데이터 작업을 하다 보면, csv 파일 용량이 너무 커서 엑셀에서 열수가 없는 경우가 있다.

그런데 데이터 검증을 위해서 각 컬럼의 합을 확인해야되는 경우가 있는데 이떄는

리눅스 커맨드 창에서, csv 파일의 column 값의 합계를 구할 수 있다.

$ awk -F"," '{print;total+=$2}END{print "Total " total}' ./test.csv 

x,y,z
1,2,3
4,5,6
Total 7

: print 로 모든 줄을 출력하며 계산을 해준다. 일반적으로 파일이 너무 크면 print를 하게 되면 너무 오래 걸리므로 print; 부분을 제외하고 계산하는 부분만 두면 된다.
: 첫 줄이 header이건 아니건 알아서 계산은 잘 되니 신경을 쓰지 않아도 된다.

awk -F"," '{x+=($3+$4+$5+$6+$7+$8+$9+$10+$11+$12+$13+$14+$15+$16+$17+$18+$19+$20+$21+$22)}END{print "Total " x}' ./test.csv
Total 4.68736e+07

: 여러 컬럼의 값을 모두 더하는 방법