Для онлайн-игры пишу прогу, которая позволит получать полезные данные. Есть два метода, которые возвращают стоимость конкретного оружия на рынке для одной страны и для всех стран (74) вместе.
public void getCheapestWeapon(Weapon weapon) {
//long result = 0;
Map<String, Integer> countryAndId = allCountries.getCountryAndId();
for (Map.Entry<String, Integer> item : countryAndId.entrySet()) {
//long start = System.currentTimeMillis();
getCheapestWeapon(item.getKey(), weapon);
//long finish = System.currentTimeMillis();
//System.out.println(finish - start);
//result += finish - start;
}
//System.out.println(result);
}
public void getCheapestWeapon(String country, Weapon weapon) {
long start = System.currentTimeMillis();
String link = MARKET_LINK
+ allCountries.getCountryId(country)
+ "/" + weapon.getPlaceOnMarket()
+ "/" + weapon.getQuality()
+ "/" + ADDITIONAL_LINK;
try {
Document page = Jsoup.connect(link)
.userAgent("Mozilla/5.0 (Windows NT 10.0; WOW64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/47.0.2526.106 Safari/537.36")
.cookies(cookies)
.timeout(1000)
.get();
Elements table = page.getElementsByClass("price_sorted");
Element row = table.select("tr").first();
Elements columns = row.getElementsByTag("td");
Element priceCell = columns.get(3);
String priceStr = priceCell.text();
double price = Double.parseDouble(priceStr.substring(0, priceStr.length() - 4));
System.out.println(country + " - " + price);
} catch (IOException e) {
e.printStackTrace();
}
//long finish = System.currentTimeMillis();
//System.out.println(finish - start);
}
Проблема в том, что при получении данных для всех стран, время на парсинг составляет в среднем 16-18 секунд что, согласитесь, очень много. Пробовал в первом методе засунуть getCheapestWeapon(item.getKey(), weapon) в отдельный поток. Ничего хорошего это не дало. Как можно реализовать одновременный парсинг всех 74-х страниц?