SFTP文件上传工具类

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
213
214
215
216
217
218
219
220
221
222
223
224
225
226
227
228
229
230
231
232
233
234
235
236
237
238
239
240
241
242
243
244
245
246
247
248
249
250
251
252
253
254
255
256
257
258
259
260
261
262
263
264
265
266
267
268
269
270
271
272
273
274
275
276
277
278
279
280
281
282
283
284
285
286

import cn.hutool.crypto.SecureUtil;
import com.jcraft.jsch.*;
import lombok.extern.slf4j.Slf4j;
import org.apache.commons.io.IOUtils;
import org.apache.commons.lang3.ObjectUtils;

import java.io.*;
import java.nio.file.Files;
import java.util.ArrayList;
import java.util.List;
import java.util.Properties;
import java.util.Vector;
import java.util.zip.GZIPInputStream;

/**
* <p>SFTPUtils 文件上传</p>
*
* @author : u
*/

@Slf4j
public class SFTPUtil {

private ChannelSftp sftp;

private Session session;

/**
* SFTP 登录用户名
*/
private String username;

/**
* SFTP 登录密码
*/
private String password;

/**
* 私钥
*/
private String privateKey;

/**
* SFTP 服务器地址IP地址
*/
private String host;

/**
* SFTP 端口
*/
private int port;


/**
* 构造基于密码认证的sftp对象
*/
public SFTPUtil(String username, String password, String host, int port) {
this.username = username;
this.password = password;
this.host = host;
this.port = port;
}

/**
* 构造基于秘钥认证的sftp对象
*/
public SFTPUtil(String username, String host, int port, String privateKey) {
this.username = username;
this.host = host;
this.port = port;
this.privateKey = privateKey;
}

public SFTPUtil() {
}


/**
* 连接sftp服务器
*/
public void login() {
try {
JSch jsch = new JSch();
if (privateKey != null) {
jsch.addIdentity(privateKey);// 设置私钥
}

session = jsch.getSession(username, host, port);

if (password != null) {
session.setPassword(password);
}
Properties config = new Properties();
config.put("StrictHostKeyChecking", "no");

session.setConfig(config);
session.connect();

Channel channel = session.openChannel("sftp");
channel.connect();

sftp = (ChannelSftp) channel;
} catch (JSchException e) {
log.error(e.getMessage(), e);
}
}

/**
* 关闭连接 server
*/
public void logout() {
if (sftp != null) {
if (sftp.isConnected()) {
sftp.disconnect();
}
}
if (session != null) {
if (session.isConnected()) {
session.disconnect();
}
}
}


/**
* 将输入流的数据上传到sftp作为文件。文件完整路径=basePath+directory
*
* @param basePath 服务器的基础路径
* @param directory 上传到该目录
* @param sftpFileName sftp端文件名
* @param inputStream 输入流
*/
public void upload(String basePath, String directory, String sftpFileName, InputStream inputStream) throws SftpException {
try {
sftp.cd(basePath);
sftp.cd(directory);
} catch (SftpException e) {
//目录不存在,则创建文件夹
String[] dirs = directory.split("/");
String tempPath = basePath;
for (String dir : dirs) {
if (null == dir || dir.isEmpty()) {
continue;
}
tempPath += "/" + dir;
try {
sftp.cd(tempPath);
} catch (SftpException ex) {
sftp.mkdir(tempPath);
sftp.cd(tempPath);
}
}
}
sftp.put(inputStream, sftpFileName); //上传文件
}


/**
* 下载文件。
*
* @param directory 下载目录
* @param downloadFile 下载的文件
* @param saveFile 存在本地的路径
*/
public void download(String directory, String downloadFile, String saveFile) throws SftpException, IOException {
if (directory != null && !directory.isEmpty()) {
sftp.cd(directory);
}
File file = new File(saveFile);
sftp.get(downloadFile, Files.newOutputStream(file.toPath()));
}

/**
* 下载文件
*
* @param directory 下载目录
* @param downloadFile 下载的文件名
* @return 字节数组
*/
public byte[] download(String directory, String downloadFile) {
try {
if (directory != null && !directory.isEmpty()) {
sftp.cd(directory);
}
InputStream is = sftp.get(downloadFile);
return IOUtils.toByteArray(is);
} catch (Exception e) {
log.error("从sftp下载文件失败,url = 【{}】,= 【{}】", directory, downloadFile);
log.error(e.getMessage(), e);
}
return null;
}


/**
* 删除文件
*
* @param directory 要删除文件所在目录
* @param deleteFile 要删除的文件
*/
public void delete(String directory, String deleteFile) throws SftpException {
sftp.cd(directory);
sftp.rm(deleteFile);
}


/**
* 列出目录下的文件
*
* @param directory 要列出的目录
*/
public Vector<?> listFiles(String directory) throws SftpException {
return sftp.ls(directory);
}

public static List<String> bufferedReaderGzFile(byte[] fileBytes) {
List<String> arrayList = new ArrayList<>();
if (ObjectUtils.isEmpty(fileBytes)) {
return arrayList;
}
try (GZIPInputStream gzipInputStream = new GZIPInputStream(new ByteArrayInputStream(fileBytes));
BufferedReader reader = new BufferedReader(new InputStreamReader(gzipInputStream))) {
String line;
while ((line = reader.readLine()) != null) {
arrayList.add(line);
}
} catch (IOException e) {
log.error(e.getMessage(), e);
}
log.info("bufferedReaderGzFile.size=【{}】", arrayList.size());
return arrayList;
}

public static String encryptStr(String data) {
return SecureUtil.aes("sftpscrmsftpscrm".getBytes()).encryptBase64(data);
}

public static String decryptStr(String data) {
return SecureUtil.aes("sftpscrmsftpscrm".getBytes()).decryptStr(data);
}




public static void main2(String[] args) throws FileNotFoundException {
String filePath = "D:\\reportData2024.gz";
FileInputStream fileInputStream = new FileInputStream(filePath);
// ByteArrayInputStream byteArrayInputStream = new ByteArrayInputStream(fileInputStream);
try (GZIPInputStream gzipInputStream = new GZIPInputStream(fileInputStream);
BufferedReader reader = new BufferedReader(new InputStreamReader(gzipInputStream))) {
String line;
while ((line = reader.readLine()) != null) {
System.out.println(line);
}
} catch (IOException e) {
log.error(e.getMessage(), e);
}
}


//上传文件测试
public static void main(String[] args) throws SftpException, IOException {
SFTPUtil sftpUtil = new SFTPUtil("root", "xx", "11.21.32.142", 22);
sftpUtil.login();

Vector<?> listFiles = sftpUtil.listFiles("/data");
for (Object listFile : listFiles) {
System.out.println(listFile.toString());
}
byte[] gzBytes = sftpUtil.download("/data", "reportData2024.gz");
log.info("gzBytes size = {}", gzBytes.length);


// byte[] fileBytes = ZipUtil.unGzip(gzBytes);

List<String> strings = bufferedReaderGzFile(gzBytes);

for (String string : strings) {
System.out.println(string);
}
sftpUtil.logout();
}


}