电脑知识|欧美黑人一区二区三区|软件|欧美黑人一级爽快片淫片高清|系统|欧美黑人狂野猛交老妇|数据库|服务器|编程开发|网络运营|知识问答|技术教程文章 - 好吧啦网

您的位置:首頁技術文章
文章詳情頁

使用Java 壓縮文件打包tar.gz 包的詳細教程

瀏覽:2日期:2022-08-12 17:36:43
目錄一、背景二、如何通過 Java 打包文件?2.1 添加 Maven 依賴2.2 打包核心代碼三、結語一、背景

最近,小哈主要在負責日志中臺的開發工作, 等等,啥是日志中臺?

使用Java 壓縮文件打包tar.gz 包的詳細教程

俺只知道中臺概念,這段時間的確很火,但是日志中臺又是用來干啥的?

這里小哈盡量地通俗的說下日志中臺的職責,再說日志中臺之前,我們先扯點別的?

使用Java 壓縮文件打包tar.gz 包的詳細教程

相信大家對集中式日志平臺 ELK 都知道一些,生產環境中, 稍復雜的架構,服務一般都是集群部署,這樣,日志就會分散在每臺服務器上,一旦發生問題,想要查看日志就會非常繁瑣,你需要登錄每臺服務器找日志,因為你不確定請求被打到哪個節點上。另外,任由開發人員登錄服務器查看日志本身就存在安全隱患,不小心執行了 rm -rf * 咋辦?

通過 ELK , 我們可以方便的將日志收集到一處(Elasticsearch 集群)來進行多維度的分析。

但是部署高性能、高可用的 ELK 是有門檻的,業務組想要快速的擁有集中式日志分析的能力,往往需要經過前期的技術調研,測試,踩坑,才能將這個平臺搭建起來。

日志中臺的使命就是讓業務線能夠快速擁有這種能力,只需傻瓜式的在日志平臺完成接入操作即可。

使用Java 壓縮文件打包tar.gz 包的詳細教程

臭嗨!說了這么多,跟你這篇文章的主題有啥關系?

額,小哈這就進入主題。

既然想統一管理日志,總得將這些分散的日志采集起來吧,那么,就需要一個日志采集器,Logstash 和 Filebeat 都有采集日志的能力,但是 Filebeat 相較于 Logstash 的笨重, 它更輕量級,幾乎零占用服務器系統資源,這里我們選型 Filebeat。

業務組在日志平臺完成相關接入流程后,平臺會提供一個采集器包。接入方需要做的就是,下載這個采集器包并扔到指定服務器上,解壓運行,即可開始采集日志,然后,就可以在日志平臺的管控頁面分析&搜索這些被收集的日志了。

這個 Filebeat 采集器包里面,包含了采集日志文件路徑,輸出到 Kafka 集群,以及一些個性化的采集規則等等。

怎么樣?是不是感覺很棒呢?

二、如何通過 Java 打包文件?2.1 添加 Maven 依賴

<dependency> <groupId>org.apache.commons</groupId> <artifactId>commons-compress</artifactId> <version>1.12</version></dependency>2.2 打包核心代碼

通過 Apache compress 工具打包思路大致如下:

①:創建一個 FileOutputStream 到輸出文件(.tar.gz)文件。

②:創建一個GZIPOutputStream,用來包裝FileOutputStream對象。

③:創建一個TarArchiveOutputStream,用來包裝GZIPOutputStream對象。

④:接著,讀取文件夾中的所有文件。

⑤:如果是目錄,則將其添加到 TarArchiveEntry。

⑥:如果是文件,依然將其添加到 TarArchiveEntry 中,然后還需將文件內容寫入 TarArchiveOutputStream 中。

接下來,直接上代碼:

import org.apache.commons.compress.archivers.tar.TarArchiveEntry;import org.apache.commons.compress.archivers.tar.TarArchiveOutputStream;import org.apache.commons.io.IOUtils;import java.io.*;import java.util.zip.GZIPOutputStream;/** * @author 犬小哈 (公眾號: 小哈學Java) * @date 2019-07-15 * @time 16:15 * @discription **/public class TarUtils { /** * 壓縮 * @param sourceFolder 指定打包的源目錄 * @param tarGzPath 指定目標 tar 包的位置 * @return * @throws IOException */ public static void compress(String sourceFolder, String tarGzPath) throws IOException {createTarFile(sourceFolder, tarGzPath); } private static void createTarFile(String sourceFolder, String tarGzPath) {TarArchiveOutputStream tarOs = null;try { // 創建一個 FileOutputStream 到輸出文件(.tar.gz) FileOutputStream fos = new FileOutputStream(tarGzPath); // 創建一個 GZIPOutputStream,用來包裝 FileOutputStream 對象 GZIPOutputStream gos = new GZIPOutputStream(new BufferedOutputStream(fos)); // 創建一個 TarArchiveOutputStream,用來包裝 GZIPOutputStream 對象 tarOs = new TarArchiveOutputStream(gos); // 若不設置此模式,當文件名超過 100 個字節時會拋出異常,異常大致如下: // is too long ( > 100 bytes) // 具體可參考官方文檔: http://commons.apache.org/proper/commons-compress/tar.html#Long_File_Names tarOs.setLongFileMode(TarArchiveOutputStream.LONGFILE_POSIX); addFilesToTarGZ(sourceFolder, '', tarOs);} catch (IOException e) { e.printStackTrace();}finally{ try {tarOs.close(); } catch (IOException e) {e.printStackTrace(); }} } public static void addFilesToTarGZ(String filePath, String parent, TarArchiveOutputStream tarArchive) throws IOException {File file = new File(filePath);// Create entry name relative to parent file pathString entryName = parent + file.getName();// 添加 tar ArchiveEntrytarArchive.putArchiveEntry(new TarArchiveEntry(file, entryName));if (file.isFile()) { FileInputStream fis = new FileInputStream(file); BufferedInputStream bis = new BufferedInputStream(fis); // 寫入文件 IOUtils.copy(bis, tarArchive); tarArchive.closeArchiveEntry(); bis.close();} else if (file.isDirectory()) { // 因為是個文件夾,無需寫入內容,關閉即可 tarArchive.closeArchiveEntry(); // 讀取文件夾下所有文件 for (File f : file.listFiles()) {// 遞歸addFilesToTarGZ(f.getAbsolutePath(), entryName + File.separator, tarArchive); }} } public static void main(String[] args) throws IOException {// 測試一波,將 filebeat-7.1.0-linux-x86_64 打包成名為 filebeat-7.1.0-linux-x86_64.tar.gz 的 tar 包compress('/Users/a123123/Work/filebeat-7.1.0-linux-x86_64', '/Users/a123123/Work/tmp_files/filebeat-7.1.0-linux-x86_64.tar.gz'); }}

至于,代碼每行的作用,小伙伴們可以看代碼注釋,說的已經比較清楚了。

接下來,執行 main 方法,測試一下效果,看看打包是否成功:

使用Java 壓縮文件打包tar.gz 包的詳細教程

生成采集器 tar.gz 包成功后,業務組只需將 tar.gz 下載下來,并扔到指定服務器,解壓運行即可完成采集任務啦~

使用Java 壓縮文件打包tar.gz 包的詳細教程

三、結語

本文主要還是介紹如何通過 Java 來完成打包功能,關于 ELK 相關的知識,小哈會在后續的文章中分享給大家,本文只是提及一下,歡迎小伙伴們持續關注喲,下期見~

到此這篇關于使用Java 壓縮文件打包tar.gz 包的詳細教程的文章就介紹到這了,更多相關Java 壓縮文件打包tar.gz 包內容請搜索好吧啦網以前的文章或繼續瀏覽下面的相關文章希望大家以后多多支持好吧啦網!

標簽: Java
相關文章:
主站蜘蛛池模板: 亮点云建站-网站建设制作平台 | 集装箱标准养护室-集装箱移动式养护室-广州璟业试验仪器有限公司 | 地磅-地秤-江阴/无锡地磅-江阴天亿计量设备有限公司_ | [官网]叛逆孩子管教_戒网瘾学校_全封闭问题青少年素质教育_新起点青少年特训学校 | EDLC超级法拉电容器_LIC锂离子超级电容_超级电容模组_软包单体电容电池_轴向薄膜电力电容器_深圳佳名兴电容有限公司_JMX专注中高端品牌电容生产厂家 | 线材成型机,线材折弯机,线材成型机厂家,贝朗自动化设备有限公司1 | 亮点云建站-网站建设制作平台 | 金库门,金库房,金库门厂家,金库门价格-河北特旺柜业有限公司 | 诺冠气动元件,诺冠电磁阀,海隆防爆阀,norgren气缸-山东锦隆自动化科技有限公司 | 蓄电池在线监测系统|SF6在线监控泄露报警系统-武汉中电通电力设备有限公司 | 广东教师资格网-广东教师资格证考试网| 南方珠江-南方一线电缆-南方珠江科技电缆-南方珠江科技有限公司 南汇8424西瓜_南汇玉菇甜瓜-南汇水蜜桃价格 | 合肥宠物店装修_合肥宠物美容院装修_合肥宠物医院设计装修公司-安徽盛世和居装饰 | ★济南领跃标识制作公司★济南标识制作,标牌制作,山东标识制作,济南标牌厂 | 培训无忧网-教育培训咨询招生第三方平台 | 湖州织里童装_女童男童中大童装_款式多尺码全_织里儿童网【官网】-嘉兴嘉乐网络科技有限公司 | 私人别墅家庭影院系统_家庭影院音响_家庭影院装修设计公司-邦牛影音 | 南京租车,南京汽车租赁,南京包车,南京会议租车-南京七熹租车 | AGV叉车|无人叉车|AGV智能叉车|AGV搬运车-江西丹巴赫机器人股份有限公司 | 缓蚀除垢剂_循环水阻垢剂_反渗透锅炉阻垢剂_有机硫化物-郑州威大水处理材料有限公司 | 质检报告_CE认证_FCC认证_SRRC认证_PSE认证_第三方检测机构-深圳市环测威检测技术有限公司 | 船用锚链|专业锚链生产厂家|安徽亚太锚链制造有限公司 | 作文导航网_作文之家_满分作文_优秀作文_作文大全_作文素材_最新作文分享发布平台 | 赛默飞Thermo veritiproPCR仪|ProFlex3 x 32PCR系统|Countess3细胞计数仪|371|3111二氧化碳培养箱|Mirco17R|Mirco21R离心机|仟诺生物 | 电机铸铝配件_汽车压铸铝合金件_发动机压铸件_青岛颖圣赫机械有限公司 | 阻燃剂-氢氧化镁-氢氧化铝-沥青阻燃剂-合肥皖燃新材料 | 上海璟文空运首页_一级航空货运代理公司_机场快递当日达 | 河南中专学校|职高|技校招生-河南中职中专网 | ET3000双钳形接地电阻测试仪_ZSR10A直流_SXJS-IV智能_SX-9000全自动油介质损耗测试仪-上海康登 | 【铜排折弯机,钢丝折弯成型机,汽车发泡钢丝折弯机,线材折弯机厂家,线材成型机,铁线折弯机】贝朗折弯机厂家_东莞市贝朗自动化设备有限公司 | 南溪在线-南溪招聘找工作、找房子、找对象,南溪综合生活信息门户! | 智能门锁电机_智能门锁离合器_智能门锁电机厂家-温州劲力智能科技有限公司 | 液压压力机,液压折弯机,液压剪板机,模锻液压机-鲁南新力机床有限公司 | 尚为传动-专业高精密蜗轮蜗杆,双导程蜗轮蜗杆,蜗轮蜗杆减速机,蜗杆减速机生产厂家 | 三板富 | 专注于新三板的第一垂直服务平台 | 搪瓷搅拌器,搪玻璃搅拌器,搪玻璃冷凝器_厂家-淄博越宏化工设备 | 周口风机|周风风机|河南省周口通用风机厂 | 【连江县榕彩涂料有限公司】官方网站 | 环讯传媒,永康网络公司,永康网站建设,永康小程序开发制作,永康网站制作,武义网页设计,金华地区网站SEO优化推广 - 永康市环讯电子商务有限公司 | 餐饮加盟网_特色餐饮连锁加盟店-餐饮加盟官网 | 聚氨酯催化剂K15,延迟催化剂SA-1,叔胺延迟催化剂,DBU,二甲基哌嗪,催化剂TMR-2,-聚氨酯催化剂生产厂家 |