# Exemplos de funções de parsing ## Processamento de HTML ### `element_text` #### HTML de exemplo ```html
Este é um bom produto
12 3
``` **Extrair texto do elemento HTML e remover espaços em branco** ```json { "price": { "_fns": [ { "_fn": "xpath_one", "_args": [".//*[@id='product-price']"] }, { "_fn": "element_text" } ] } } ``` ```json { "price": "12 3" } ``` **Dado um valor string como entrada, não fazer nada** ```json { "price": { "_fns": [ { "_fn": "xpath_one", "_args": [".//*[@id='product-price']/text()"] }, { "_fn": "element_text" } ] } } ``` ```json { "price": " 12 3\n\n\n " } ``` ### `xpath` #### HTML de exemplo ```html
Meias
123.12
``` **Obter todos os itens da descrição** ```json { "description_items": { "_fns": [ { "_fn": "xpath", "_args": ["//li[@class='description-item']/text()"] } ] } } ``` ```json { "description_items": ["Very", "Nice", "Socks"] } ``` **Obter o primeiro item da descrição** ```json { "first_description_item": { "_fns": [ { "_fn": "xpath", "_args": ["(//li[@class='description-item'])[1]/text()"] } ] } } ``` ```json { "first_description_item": [ "Very" ] } ``` **Verificar se o elemento da seção de descrição existe** ```json { "description_section_exists": { "_fns": [ { "_fn": "xpath", "_args": ["boolean(//div[@class='description'])"] } ] } } ``` ```json { "description_section_exists": true } ``` **Obter preço como número** ```json { "price": { "_fns": [ { "_fn": "xpath", "_args": ["number(//div[@class='price'])"] } ] } } ``` ```json { "description_section_exists": 123.12 } ``` **Múltiplas expressões para usar como fallback caso a expressão anterior falhe** ```json { "price": { "_fns": [ { "_fn": "xpath", "_args": [ "//div[@class='product-price']/text()", <--- this does not find anything "//div[@class='price']/text()" <--- this finds the target price ] } ] } } ``` ```json { "price": [ "123.12" ] } ``` **XPath `|` operador para combinar com múltiplas expressões** ```json { "price_and_title": { "_fns": [ { "_fn": "xpath", "_args": ["//div[@class='price']/text() | //div[@class='title']/text()"] } ] } } ``` ```json { "price_and_title": [ "Socks", "123.12" ] } ``` ### `xpath_one` #### HTML de exemplo ```html
Meias
123.12
``` **Retornar a primeira correspondência** ```json { "first_description_item": { "_fns": [ { "_fn": "xpath_one", "_args": [".//li/text()"] } ] } } ``` ```json { "first_description_item": "Very" } ``` **Usando funções XSLT** ```json { "price": { "_fns": [ { "_fn": "xpath_one", "_args": ["number(.//div[@class='price'])"] } ] } } ``` ```json { "price": 123.12 } ``` ## Manipulação de strings ### `amount_from_string` #### HTML de exemplo ```html
Meias
O preço é: 123.12 pesos
``` **Extrair valor de string** ```json { "price": { "_fns": [ { "_fn": "xpath_one", "_args": [".//div[@class='price']/text()"] }, { "_fn": "amount_from_string" } ] } } ``` ```json { "price": 123.12 } ``` ### `amount_range_from_string` #### HTML de exemplo ```html
O preço é: 123.12 pesos; O preço é: 345.12 pesos; O preço é: 678.12 pesos
``` **Extrair todos os valores de uma string** ```json { "prices": { "_fns": [ { "_fn": "xpath_one", "_args": [".//div[@class='price']/text()"] }, { "_fn": "amount_range_from_string" } ] } } ``` ```json { "prices": [ 123.12, 345.12, 678.12 ] } ``` ### `join` #### HTML de exemplo ```html
O preço é: 123.12 pesos;
O preço é: 345.12 pesos;
O preço é: 678.12 pesos
``` **Juntar um array de strings em uma única string** ```json { "price_variants": { "_fns": [ { "_fn": "xpath", "_args": [".//div[@class='price']"] }, { // If we call normalize-space() in first pipeline function, // it will return only the first value. "_fn": "xpath", "_args": ["normalize-space(text())"] }, { "_fn": "join", "_args": "" } ] } } ``` ```json { "price_variants": "The price is: 123.12 pesos;The price is: 345.12 pesos;The price is: 678.12 pesos" } ``` ### `regex_find_all` #### HTML de exemplo ```html
[one description] [two description] [three description]
``` **Encontrar todas as correspondências entre dois caracteres** ```json { "descriptions": { "_fns": [ { "_fn": "xpath_one", "_args": [".//div[@class='description']/text()"] }, { "_fn": "regex_find_all", "_args": ["\\[(.*)\\]"] } ] } } ``` ```json { "descriptions": [ "one description", "two description", "three description" ] } ``` ### `regex_search` #### HTML de exemplo ```html
[one description] [two description] [three description] {the one i need}
``` **Retornar descrição entre dois caracteres** ```json { "description": { "_fns": [ { "_fn": "xpath_one", "_args": [".//div[@class='description']/text()"] }, { "_fn": "regex_search", "_args": ["{(.*)}", 1] } ] } } ``` ```json { "description": "the one i need" } ``` ### `regex_substring` #### HTML de exemplo ```html
* one description * two description * three description * {this one i would like to get replaced}
``` **Substituir parte do texto por um valor especificado** ```json { "descriptions": { "_fns": [ { "_fn": "xpath_one", "_args": [".//div[@class='description']/text()"] }, { "_fn": "regex_substring", "_args": ["{this one i would like to get replaced}", "four description"] }, { "_fn": "regex_find_all", "_args": ["\\*\\s(.*)\n"] } ] } } ``` ```json { "descriptions": [ "one description", "two description", "three description", "four description" ] } ``` ## Funções comuns ### `convert_to_*` #### HTML de exemplo ```html
123
124
456
421
100
``` **Obter a contagem de variantes de preço** ```json { "price_variants": { "_fns": [ { "_fn": "xpath", "_args": [".//div[@class='price']"] }, { "_fn": "length" } ] } } ``` ```json { "price_variants": 5 } ``` **Obter a contagem de variantes de preço em um array multidimensional** HTML de exemplo: ```html
``` ```json { "number_of_variants": { "_fns": [ { "_fn": "xpath", "_args": [".//property"] }, { "_fn": "xpath", "_args": [".//option"] }, { "_fn": "length" } ] } } ``` ```json { "number_of_variants": [ 3, 3 ] } ``` ### `select_nth` #### HTML de exemplo ```html
Meias
123.12
``` **Selecionar o primeiro item da descrição do array** ```json { "price_and_title": { "_fns": [ { "_fn": "xpath", "_args": ["//li[@class='description-item']/text()"] }, { "_fn": "select_nth", "_args": 0 } ] } } ``` ```json { "price_and_title": "Very" } ``` **Selecionar o último item da descrição do array** ```json { "price_and_title": { "_fns": [ { "_fn": "xpath", "_args": ["//li[@class='description-item']/text()"] }, { "_fn": "select_nth", "_args": -1 } ] } } ``` ```json { "price_and_title": "Socks" } ``` ## Funções matemáticas ### `average` #### HTML de exemplo ```html
123
124
456
421
100
``` **Encontrar a média de todos os preços listados** ```json { "price_average": { "_fns": [ { "_fn": "xpath", "_args": [".//div[@class='price']"] }, { "_fn": "xpath_one", "_args": ["number(text())"] }, { "_fn": "average" } ] } } ``` ```json { "price_average": 244.8 } ``` ### `max` #### HTML de exemplo ```html
123
124
456
421
100
``` **Encontrar o máximo de todos os preços listados** ```json { "price_max": { "_fns": [ { "_fn": "xpath", "_args": [".//div[@class='price']"] }, { "_fn": "xpath_one", "_args": ["number(text())"] }, { "_fn": "max" } ] } } ``` ```json { "price_max": 456.0 } ``` ### `min` #### HTML de exemplo ```html
123
124
456
421
100
``` **Encontrar a média de todos os preços listados** ```json { "price_min": { "_fns": [ { "_fn": "xpath", "_args": [".//div[@class='price']"] }, { "_fn": "xpath_one", "_args": ["number(text())"] }, { "_fn": "min" } ] } } ``` ```json { "price_min": 100.0 } ``` ### `product` #### HTML de exemplo ```html
``` **Obter a contagem de diferentes variantes de produto** ```json { "number_of_variants": { "_fns": [ { "_fn": "xpath", "_args": [".//property"] }, { "_fn": "xpath", "_args": [".//option"] }, { "_fn": "length" }, { "_fn": "product" } ] } } ``` ```json { "number_of_variants": 12 } ```