Я использую jsoup для разбора таблицы HTML.Ниже приведен сценарий, в котором я должен определить правильный сегмент.Процесс определения правильного сегмента:
Везде, где я нахожу ключевое слово -> ABC , я должен выполнять итерацию, пока не получу тег <tr> HTML (для идентификации таблицы), а затем проверить, содержит ли оно ключевое слово.все 4 ключевых слова ForVote , AgainstVote , Отсутствует , NoVotes в первой строке (если нет, переходите к следующему появлению ключевого слова-> ABC ) и следуйте тому же процессу.Как только я получу 4 ключевых слова для голосования внутри таблицы, я смогу извлечь числа из таблицы.
Проблема, в которой я застрял: Если есть только одно вхождение ключевого слова ABC , я могу выполнить синтаксический анализ.Но не может, если имеется более одного вхождения ABC , что приводит к неверному сегменту для синтаксического анализа.
Мой пример HTML-кода для анализа:
<!DOCTYPE html>
<html>
<head>
<meta charset="ISO-8859-1">
<title>Correct segment to be identified for parsing table </title>
</head>
<body>
<div>ABC Keyword</div>
<!--First Occurrence of Keyword(Not a correct segment as the table below doesn't have the correct headers)-->
<div> asd xyz asdf</div>
</br>
<table border="1px">
<tbody>
<tr>
<td>For Vote</td>
<td>Against Vote</td>
<td>Some Header1</td>
<td>Some Header2</td>
</tr>
<tr>
<td>1</td>
<td>1</td>
<td>2</td>
<td>3</td>
</tr>
</tbody>
</table>
<div>
<p>Another 'ABC' is the keyword in the document</p>
<!--2nd Occurence, but not correct segment-->
</div>
<div> asd xyz jskadl</div>
</br>
<div> ABC is keyword </div>
<!-- 3rd Occurrence, this is the correct segment below which the required table with keywords ForVote, AgainstVote, Absent, NoVotes are found whose values are to be parsed-->
</br>undefined</br>undefined<div>
<table border="1px">
<tbody>
<tr>
<td>ForVote</td>
<td>AgainstVote</td>
<td>Absent</td>
<td>NoVotes</td>
</tr>
<tr>
<td>10</td>
<td>5</td>
<td>1</td>
<td>0</td>
</tr>
</tbody>
</table>
</div>
<p>Doc ends</p>
</body>
</html>
Java Code
Моя логика состоит в том, чтобы выполнять итерации, пока я не найду ABC.Найдите элемент, который включает ABC, добавьте к нему class = tagid.выберите (div.tagid).Затем найдите тег <tr>.НАЙТИ, если таблица в ожидаемом формате, то есть isVertical = 0 в коде.Затем проверьте, присутствуют ли в первой строке все четыре ключевых слова.Если да, то проанализируйте числовые значения. Не работает в случае многократного появления "ABC" :-(
import org.jsoup.Jsoup;
import org.jsoup.nodes.Document;
import org.jsoup.nodes.Element;
import org.jsoup.select.Elements;
import java.util.regex.Matcher;
import java.util.regex.Pattern;
final static String regexPattern1 = "ABC";
final static String tableregexPattern1 = "ForVotes";
final static Pattern tPat1 = Pattern.compile(tableregexPattern1);
//a function for finding occurrence of ABC
public static Element htmlIterator(String HTMLTags, String regexPattern) throws IOException {
pattern = Pattern.compile(regexPattern1, Pattern.MULTILINE | Pattern.CASE_INSENSITIVE);// compiles the matching regex
for (String tag : HTMLTags) {
Elements tagData = doc.select("div");
for (Element element1 : tagData) {
if (element1.select("div").text().trim().equals("")) {
continue;
} else {
final String dataParsedInTag = element1.select("div").text().trim();
final String dataParsedInTagClean = dataParsedInTag.replace(",", "");
final Matcher matcher = pattern.matcher(dataParsedInTagClean);
b1 = matcher.find();
if (b1) {
System.out.println(b1 + " matched");
return element1;
}
}
}
}
public static void main{
doc=Jsoup.parseHTML(input); //input is above given HTML snippet
element1 = htmlIterator(div, regexPattern1);// returns the element which has "ABC"
Elements ele = element1.getElementsMatchingText(pattern);
if(ele != null) {
Elements manipulatedElement = ele.addClass(tagid);//attach class= tagid to the identified div
//iterate till I get <tr>
while (true) {
resultTableHTML = doc.selectFirst(div+"."+tagid).nextElementSibling();
resultTableInChar = doc.selectFirst(div+"."+tagid).nextElementSibling().toString();
nextResultTable = doc.selectFirst(div+"."+tagid).nextElementSibling();
// System.out.println(resultTableInChar);
while (!resultTableInChar.contains("tr")) {
resultTableInChar = nextResultTable.nextElementSibling().toString();
nextResultTable = nextResultTable.nextElementSibling();// for continuous iteration
System.out.println("-->Iterating" + nextResultTable);
}
break;
}
//check if the table is having the keyword ForVotes and is int the expected tabular format that is an isVertical=0
Elements rows = nextResultTable.select("tr");// just select the rows and check if its empty or not
for (Element rowElement : rows) {
Matcher mat1 = tPat1.matcher(rowElement.text());
boolean isTablewithFirstHeaderKeyword = mat1.find();
if (!(rowElement.text().isEmpty()) && (isTablewithFirstHeaderKeyword) ) {
String tmpLines[] = rowElement.text().trim().replaceAll(",", "").split(" ");
String tmpRowElement = rowElement.text().trim().replaceAll(",", "");
Matcher mat5 = tPat5.matcher(tmpRowElement);
boolean typeVerticaldetected = mat5.find();//for detecting the numerical values
if (typeVerticaldetected) {
isVertical = 1;
break;
} else {
isVertical = 0;
break;
}
}
}
if (isVertical == 0) {
System.out.println("Horizontal Table Identified. Start Parsing.....");
rows = nextResultTable.select("tr");
for (Element rowElement : rows) {
//if row isn't empty then find all 4 keywords
if (!rowElement.text().isEmpty()) {
Matcher mat1 = tPat1.matcher( rowElement.toString());//tpat1 is regex for ForVotes inside table row, CAN use contains for now
Matcher mat2 = tPat2.matcher( rowElement.toString());//tpat2 is regex for AgainstVotes inside table row
Matcher mat3 = tPat3.matcher( rowElement.toString());//tpat3 is regex for Absent inside table row
Matcher mat4 = tPat4.matcher( rowElement.toString());//tpat4 is regex for NoVotes inside table row
boolean hasTableHeaderKeywords = mat1.find() && mat2.find() && mat3.find() && mat4.find();
System.out.println(mat1.find()+";"+mat2.find()+";"+mat3.find()+";"+mat4.find()+";");
if(hasTableHeaderKeywords) {
rowElement = rowElement.nextElementSibling();
String tmpLines[] = rowElement.text().trim().replaceAll(",", "").split(" ");
Matcher mat5 = tPat5.matcher(tmpLines[0]);//tpat5 is regex for numerical digits inside table 2nd row
Matcher mat6 = tPat5.matcher(tmpLines[1]);
Matcher mat7 = tPat5.matcher(tmpLines[2]);
Matcher mat8 = tPat5.matcher(tmpLines[3]);
System.out.println(mat5.matches());
System.out.println(mat6.matches());
System.out.println(mat7.matches());
System.out.println(mat8.matches());
if (mat5.matches())
{
for(int index=0 ; index < tmpLines.length ; index++) {
System.out.println("Value at index-> "+index+" is : "+tmpLines[index]);
}
System.out.println("For : "+ tmpLines[0] + "|" +"Against : "+ tmpLines[1] + "|" + "Abstain : "+tmpLines[2] + "|" +"Broker Non-Votes : "+ tmpLines[3]);
break;
}
else {
System.out.println("Numerical Values werent found in expected range for"+tmpLines);
}
}