Compare commits

..

8 Commits

Author SHA1 Message Date
de9ed51968 return bites size 2023-01-04 23:53:14 +03:00
d0065503c4 fix name string 2023-01-04 23:35:30 +03:00
f511b6aea8 add app url 2023-01-04 23:31:32 +03:00
a498743e45 fix input array index 2023-01-04 23:24:03 +03:00
bc6e580c3d fix card name bug 2023-01-04 23:21:24 +03:00
8f4b8b0ebc fix cards drops bug 2023-01-04 23:16:07 +03:00
c4249a0700 some update 2023-01-04 16:56:10 +03:00
94b8b9788c fix bug 2023-01-04 15:34:05 +03:00

66
code.js
View File

@ -1,36 +1,39 @@
/** /**
* Скрипт для парсинга значков Steam * Скрипт для парсинга значков Steam
* @version 0.1.0 * @version 1.0.0
* @license Unlicense * @license Unlicense
* @author Alexander Popov <iiiypuk@fastmail.fm> * @author Alexander Popov <iiiypuk@fastmail.fm>
*/ */
/** /**
* Получает данные из элемента `div.badge_row` * Получает данные из элемента `div.badge_row`
* @param {DOM} value - div.badge_row. * @param {Array} value - div.badge_row
* @returns {Object} * @returns {Object}
*/ */
function getData(value) { function getData(value) {
/* /*
* Badge Sctruct: * Sctruct of Badge
* id: int * id: int - steam app id
* uri: str * url: str - game url in store
* name: str * card_url: str - card page url
* dropLeft: int * name: str - steam app name
* dropLeft: int - cards left drops
*/ */
// check left cards // check left cards
// для металлических карточек нет параметра 'карточек выпадет' // для карточек, у которых нет параметра 'карточек выпадет'
let cardsDropLeft = 0; let cardsDropLeft = 0;
if (value.getElementsByClassName('progress_info_bold')[0]) { if (value.getElementsByClassName('progress_info_bold').length > 0) {
cardsDropLeft = value.getElementsByClassName('progress_info_bold')[0].match(/\d/g); cardsDropsNumber = value.getElementsByClassName('progress_info_bold')[0].innerText.match(/\d/g);
if (cardsDropsNumber !== null) { cardsDropLeft = [0]; }
} }
let badgeItem = { let badgeItem = {
id: value.childNodes[1].href.split('/')[6], id: parseInt(value.childNodes[1].href.split('/')[6]),
uri: value.childNodes[1].href, url: `https://store.steampowered.com/app/${value.childNodes[1].href.split('/')[6]}/`,
name: value.childNodes[3].childNodes[1].childNodes[3].childNodes[0].nodeValue.replace(/[\r\n\t]/g, ''), card_url: value.childNodes[1].href,
dropLeft: cardsDropLeft, name: value.getElementsByClassName('badge_title')[0].childNodes[0].textContent.replace(/[\r\n\t]/g, '').trim(),
dropLeft: parseInt(cardsDropLeft),
}; };
return badgeItem; return badgeItem;
@ -38,10 +41,14 @@ function getData(value) {
/** /**
* Преобразовывает массив данных в JSON и возвращает к консоль * Преобразовывает массив данных в JSON и возвращает к консоль
* @param {Array} badgesArray - массив данных о значках. * @param {Array} badgesArray - массив данных о значках
*/ */
function exportJson(badgesArray) { function exportJson(badgesArray) {
console.log(JSON.stringify(badgesArray)); const byteSize = str => new Blob([str]).size;
json = JSON.stringify(badgesArray);
console.log(json);
console.log(`Size: ${byteSize(json)} bytes.`)
} }
/** /**
@ -49,13 +56,34 @@ function exportJson(badgesArray) {
*/ */
function getBadges() { function getBadges() {
let badges = []; let badges = [];
const collection = document.getElementsByClassName('badge_row'); let currentPage = 1;
// get total pages
const [baseURI, totalPages] = (function(element) {
return [
element[0].baseURI,
element[element.length - 1].text
];
})(document.getElementsByClassName('pagelink'));
while (currentPage <= totalPages) {
fetch(`${baseURI}?p=${currentPage}`)
.then((response) => { return response.text(); })
.then((html) => {
let parser = new DOMParser();
let doc = parser.parseFromString(html, 'text/html');
const collection = doc.getElementsByClassName('badge_row');
for (const value of Object.entries(collection)) { for (const value of Object.entries(collection)) {
badges.push(getData(value)); badges.push(getData(value[1]));
}
})
.catch((err) => console.warn('Something went wrong.', err));
currentPage++;
} }
exportJson(badges); setTimeout(() => { exportJson(badges); }, 10000); // FIX IT
} }
getBadges(); getBadges();