hdfs路径 linux路径,四、记录1----获取hdfs上FileSystem的方法 记录2：正则匹配路径：linux、hdfs...
/*** 經過正則獲取該目錄下知足條件的全部目錄
*@paramluceneFilePathRegular 正則目錄，如/user/solrindex/正則表達式
*@return知足正則表達式的目錄集合 list*/
public static ListfetchDirByRegularLinux(String luceneFilePathRegular){
List list=new ArrayList<>();//分割獲取主目錄
int len= luceneFilePathRegular.lastIndexOf(EtlConstants.LINUX_ROUTE_SEGMENT)+1;
String mainDir=luceneFilePathRegular.substring(0, len);
String regular=luceneFilePathRegular.substring(len,luceneFilePathRegular.length());
File dir=newFile(mainDir);if(dir.exists() &&dir.isDirectory()){
File [] arr=dir.listFiles();for(File file : arr) {if (file.exists() &&file.isDirectory()) {
String fileName=file.getName();if(matchStr(fileName, regular)) {
list.add(file.getAbsolutePath()+SolrUtil.INDEX_DIR_SUFFIX);
}
}
}
}if(list.size()>0){
LOGGER.info("經過正則匹配到的Solr目錄有：");for(String s : list) {
LOGGER.info(s);
}
}else{
LOGGER.error("路徑{}下，不存在知足正則：{}條件的目錄", dir, regular);
}returnlist;
}/*** 經過正則獲取該目錄下知足條件的全部目錄
*@paramluceneFilePathRegular 正則目錄，如hdfs:/user/solrindex/正則表達式
*@paramnameNodeConfigPath //獲取name配置信息目錄
*@return知足正則表達式的目錄集合 list*/
public static ListfetchDirByRegularHdfs(String luceneFilePathRegular,String nameNodeConfigPath){
List list=new ArrayList<>();
FileSystem fs=HdfsUtil.getFileSystem(nameNodeConfigPath);
String prefixHdfs=luceneFilePathRegular.split(":")[0];
String hdfsPath=luceneFilePathRegular.split(":")[1];//分割獲取主目錄
int len= hdfsPath.lastIndexOf(EtlConstants.LINUX_ROUTE_SEGMENT)+1;
String mainDir=hdfsPath.substring(0, len);
String regular=hdfsPath.substring(len, hdfsPath.length());try{
FileStatus[] fileStatuses= fs.globStatus(new Path(mainDir+"*"));for(FileStatus fileStatus : fileStatuses){if (fileStatus.isDirectory() &&matchStr(fileStatus.getPath().getName(), regular)) {
list.add(prefixHdfs+":"+mainDir+fileStatus.getPath().getName()+SolrUtil.INDEX_DIR_SUFFIX);
}
}
}catch(IOException e) {
LOGGER.error("獲取hdfs目錄信息異常，路徑：{}，異常信息：{}",luceneFilePathRegular,e.getMessage());
e.printStackTrace();
}if(list.size()>0){
LOGGER.info("經過正則匹配到的Solr目錄有：");for(String s : list) {
LOGGER.info(s);
}
}else{
LOGGER.error("路徑{}下，不存在知足正則：{}條件的目錄", luceneFilePathRegular, regular);
}returnlist;
}/*** @Method Description:按正則表示是匹配字符串
*@paramstr
*@paramregular
*@return*@author: libingjie*/
public staticBoolean matchStr(String str, String regular) {
Pattern pattern=Pattern.compile(regular);
Matcher matcher=pattern.matcher(str);returnmatcher.matches();
}
總結
以上是生活随笔為你收集整理的hdfs路径 linux路径,四、记录1----获取hdfs上FileSystem的方法 记录2：正则匹配路径：linux、hdfs...的全部內容，希望文章能夠幫你解決所遇到的問題。
- 上一篇： linux 内核将两个设备相关联,lin
- 下一篇： linux 其他常用命令