๋ณธ๋ฌธ ๋ฐ”๋กœ๊ฐ€๊ธฐ

728x90

dbeaver

1/13 ๊ธˆ 1. dbeaver Java Heap Space Error ๋ฉ”๋ชจ๋ฆฌ ๋ถ€์กฑ์œผ๋กœ ๋ฐ์ดํ„ฐ ๋‚ด๋ณด๋‚ด๊ธฐ ์ง„ํ–‰ ์‹œ ์—๋Ÿฌ๊ฐ€ ๋œธ ํ•ด๊ฒฐ ์œ„ํ•ด fetch size 1๋งŒ์—์„œ 5000์œผ๋กœ ์ค„์ด๊ณ , dbeaver.ini์—์„œ ์ตœ๋Œ€ ์‚ฌ์šฉ ๋ฉ”๋ชจ๋ฆฌ ์šฉ๋Ÿ‰(Xmx4096m - 4GB)์„ ๋Š˜๋ฆผ 2. dbeaver ํ…Œ์ด๋ธ” ๋‚ด๋ณด๋‚ด๊ธฐ_์ปฌ๋Ÿผ ์ œ์™ธ 3. MySQL ๋กœ๊ทธ ์‚ญ์ œ MySQL Console๋กœ ์ ‘์† ํ›„ use mysql; -- mysql schema ์‚ฌ์šฉ show binary logs; -- DB ์„œ๋ฒ„๋‚ด๋ถ€ ๋กœ๊ทธํ™•์ธ purge binary logs before date(now() - interval 1 day); -- DB ์„œ๋ฒ„๋‚ด๋ถ€์˜ 1์ผ๋ณด๋‹ค ์˜ค๋ž˜๋œ ๋กœ๊ทธ ์‚ญ์ œ -- ์œ„์˜ ์˜ˆ์‹œ๋Š” ๊ธฐํ•œ์„ 1์ผ๋กœ ์ฃผ์—ˆ์ง€๋งŒ day ๋Œ€์‹  second, minute, ho.. ๋”๋ณด๊ธฐ
9/6 ํ™”_DBeaver 1. dpkg dpkg -r: ๋ฐ๋น„์•ˆ ํŒจํ‚ค์ง€ ๋งค๋‹ˆ์ €๋กœ ๋ฐ๋ชฌ ํ”„๋กœ๊ทธ๋žจ/ํŒจํ‚ค์ง€ ์‚ญ์ œ 2. systemctl ๋ฐ๋ชฌ ํ”„๋กœ๊ทธ๋žจ๋“ค ๊ด€๋ฆฌ 3. .deb ํ•ด๋‹น ํ™•์žฅ์ž ์„ค์น˜ ์‹œ์—๋Š” sudo dpkg -i ํŒŒ์ผ๋ช… 4. vim ํŽธ์ง‘๊ธฐ ์ „์ฒด ์„ ํƒ: shift + v + g ๋ˆ„๋ฅธ ๋’ค d๋กœ ์‚ญ์ œ 5. ls -ltr ํŒŒ์ผ/ํด๋”, ์ƒ์„ฑ๋œ ์‹œ๊ฐ„ ๋ฐ ๊ถŒํ•œ ์กฐํšŒ 6. Hadoop / Spark Hadoop: map ํ•จ์ˆ˜ ๋ชจ๋‘ ์ข…๋ฃŒ๋˜์–ด์•ผ reduce ํ•จ์ˆ˜๊ฐ€ ์‹คํ–‰๋˜๊ธฐ ๋•Œ๋ฌธ์— ๋ฐ์ดํ„ฐ ์‹ค์‹œ๊ฐ„ ์ฒ˜๋ฆฌ ์–ด๋ ค์›€. ๋น…๋ฐ์ดํ„ฐ ๊ธฐ๋ฐ˜์˜ ๋ฐฐ์น˜์„ฑ ํ†ต๊ณ„์ž‘์—…์— ์ฃผ๋กœ ์‚ฌ์šฉํ•จ Spark: mapreduce๋กœ map ํ•จ์ˆ˜ ์ข…๋ฃŒ ์ „์ด๋ผ๋„ ๋ฐ์ดํ„ฐ ์ŠคํŠธ๋ฆฌ๋ฐ ๊ฐ€๋Šฅ. ๋ฐ์ดํ„ฐ๋ฅผ HDD๊ฐ€ ์•„๋‹Œ ๋ถ„์‚ฐ ๋ฉ”๋ชจ๋ฆฌ์— ์ €์žฅํ•จ 7. DBeaver VS Code -> EC2 -> RDS ๊ฐ€์‹œ์„ฑ ๋–จ.. ๋”๋ณด๊ธฐ

728x90