Skip to content

πŸ•·οΈ The BEST Web Scraping framework that handles everything from a single request to a full-scale crawl! Don't be shy, join here: https://discord.gg/EMgGbDceNQ and follow here for daily tips and tricks: https://x.com/Scrapling_dev

2.0 KB
Raw Blame

title: "ВСсты HTML-парсСров Python: Scrapling ΠΈ Π΄Ρ€ΡƒΠ³ΠΈΠ΅ Π±ΠΈΠ±Π»ΠΈΠΎΡ‚Π΅ΠΊΠΈ" description: "Π‘Ρ€Π°Π²Π½ΠΈΡ‚Π΅ Scrapling с Π΄Ρ€ΡƒΠ³ΠΈΠΌΠΈ Π±ΠΈΠ±Π»ΠΈΠΎΡ‚Π΅ΠΊΠ°ΠΌΠΈ Python Π² Ρ€Π°Π·Π±ΠΎΡ€Π΅ HTML, ΠΈΠ·Π²Π»Π΅Ρ‡Π΅Π½ΠΈΠΈ тСкста ΠΈ поискС ΠΏΠΎΡ…ΠΎΠΆΠΈΡ… элСмСнтов."

ВСсты ΠΏΡ€ΠΎΠΈΠ·Π²ΠΎΠ΄ΠΈΡ‚Π΅Π»ΡŒΠ½ΠΎΡΡ‚ΠΈ {#performance-benchmarks}

Scrapling Π½Π΅ Ρ‚ΠΎΠ»ΡŒΠΊΠΎ ΠΌΠΎΡ‰Π½Ρ‹ΠΉ, Π½ΠΎ ΠΈ ΠΎΡ‡Π΅Π½ΡŒ быстрый. НиТС ΠΌΡ‹ сравниваСм Π΅Π³ΠΎ парсСр с Π΄Ρ€ΡƒΠ³ΠΈΠΌΠΈ популярными Π±ΠΈΠ±Π»ΠΈΠΎΡ‚Π΅ΠΊΠ°ΠΌΠΈ.

Π‘ΠΊΠΎΡ€ΠΎΡΡ‚ΡŒ извлСчСния тСкста: 5 000 Π²Π»ΠΎΠΆΠ΅Π½Π½Ρ‹Ρ… элСмСнтов {#text-extraction-speed-test-5000-nested-elements}

# Π‘ΠΈΠ±Π»ΠΈΠΎΡ‚Π΅ΠΊΠ° ВрСмя (мс) По ΡΡ€Π°Π²Π½Π΅Π½ΠΈΡŽ со Scrapling
1 Scrapling 1,99 1,0x
2 Parsel/Scrapy 2,06 1,035
3 Чистый Lxml 2,56 1,286
4 PyQuery 23,98 ~12x
5 Selectolax 197,02 ~99x
6 MechanicalSoup 1545,15 ~776,5x
7 BS4 + Lxml 1562,1 ~785,0x
8 BS4 + html5lib 3412,73 ~1714,9x

Поиск ΠΏΠΎΡ…ΠΎΠΆΠΈΡ… элСмСнтов ΠΈ тСкста {#element-similarity-text-search-performance}

Адаптивный поиск элСмСнтов Π² Scrapling Π·Π½Π°Ρ‡ΠΈΡ‚Π΅Π»ΡŒΠ½ΠΎ ΠΎΠΏΠ΅Ρ€Π΅ΠΆΠ°Π΅Ρ‚ Π΄Ρ€ΡƒΠ³ΠΈΠ΅ Ρ€Π΅ΡˆΠ΅Π½ΠΈΡ:

Π‘ΠΈΠ±Π»ΠΈΠΎΡ‚Π΅ΠΊΠ° ВрСмя (мс) По ΡΡ€Π°Π²Π½Π΅Π½ΠΈΡŽ со Scrapling
Scrapling 2,3 1,0x
AutoScraper 12,58 5,47x

ΠšΠ°ΠΆΠ΄Ρ‹ΠΉ Ρ€Π΅Π·ΡƒΠ»ΡŒΡ‚Π°Ρ‚ усрСднён ΠΏΠΎ 100 запускам с Π·Π°ΠΌΠ΅Ρ€ΠΎΠΌ Π²Ρ€Π΅ΠΌΠ΅Π½ΠΈ. ΠœΠ΅Ρ‚ΠΎΠ΄ΠΈΠΊΠ° ΠΏΡ€ΠΈΠ²Π΅Π΄Π΅Π½Π° Π² benchmarks.py.