Packages

treewalker

0.2.0
0.4.1 0.4.0 0.3.1 0.3.0 0.2.0 0.1.1 0.1.0

A web crawler that respects `robots.txt`.

HexDocs

Current section

Files

Jump to
Readme
7 Versions
5 Dependencies
Dependants
Files
Activity
treewalker src treewalker_store.erl
Raw

src/treewalker_store.erl 

-module(treewalker_store).



%% API

-export([store/2]).



-type options() :: term().

-type page() :: treewalker_page:page().



-export_type([options/0]).



%%%===================================================================

%%% Callbacks

%%%===================================================================



-callback store(ScrapedPage :: page(), Options :: options()) -> ok.



%%%===================================================================

%%% API

%%%===================================================================



-spec store(ScrapedPage :: page(), Options :: options()) -> ok.

store(_ScrapedPage, _Options) ->

    ok.



%%%===================================================================

%%% Internal functions

%%%===================================================================