Szczegóły publikacji

Opis bibliograficzny

Usage of dedicated data structures for URL databases in a large-scale crawling — Zastosowanie dedykowanych struktur danych w bazach adresów URL crawlingu dużej skali / Krzysztof DOROSZ // Computer Science ; ISSN 1508-2806. — 2009 — vol. 10, s. 7–17. — Bibliogr. s. 17

Autor

Słowa kluczowe

EN: crawlingBerkeley DBcrawlerURL databaseURL repositorydata structureslarge scale
PL: robot internetowyprzeglądanie siecibaza danych URLBerkeley DBrepozytorium URLstruktury danych

Dane bibliometryczne

ID BaDAP53056
Data dodania do BaDAP2010-09-01
Tekst źródłowyURL
Rok publikacji2009
Typ publikacjiartykuł w czasopiśmie
Otwarty dostęptak
Czasopismo/seriaComputer Science

Abstract

The article discuss usage of Berkeley DB data structures such as hash tables and b-trees for implementation of a high performance URL database. The article presents a formal model for a data structures oriented URL database, which can be used as an alternative for a relational oriented URL database.

Streszczenie

W artykule omówiono zastosowanie struktur danych z pakietu Berkeley DB, takich jak: tablice z haszowaniem i b-drzewa do implementacji wysoko wydajnych baz danych adresów URL. Przedstawiono model formalny bazy danych zorientowanej na struktury pamieci, która może być alternatywa dla relacyjnie zorientowanej bazy danych linków URL.

Publikacje, które mogą Cię zainteresować

artykuł
#79900Data dodania: 21.2.2014
Staged event-driven architecture as a micro-architecture of distributed and pluginable crawling platform / Leszek SIWIK, Kamil Włodarczyk, Mateusz Kluczny // Computer Science ; ISSN 1508-2806. — 2013 — vol. 14 no. 4, s. 645–665. — Bibliogr. s. 663–665, Abstr.
dokument patentowy
#151092Data dodania: 5.1.2024
A method and a system for securing data, especially data of biotechnological laboratories / diCELLa Sp. z o.o., Kraków ; wynalazca: MISZTAL Krzysztof, Kubica-Misztal Aleksandra, SŁUŻALEC Tomasz. — Int.Cl.: H04L 9/40(2006.01). — Izrael. — Opis zgłoszeniowy wynalazku ; IL300253A ; Opubl. 2023-03-01. — Zgłosz. nr IL30025323 z dn. 2023-01-29