Arquivos de datafeed | Especificações | IP Netblocks WHOIS Database | WhoisXML API

Arquivos de datafeed

O feed de dados fornece um banco de dados para download dos IP Netblocks registrados (intervalos de IP) com informações detalhadas sobre cada intervalo. Alguns blocos de rede fornecidos pela API podem estar faltando no feed de dados. Isso acontece quando um bloco é igual à rota de um sistema autônomo, mas não tem um WHOIS correspondente. Esses registros têm o campo "pai" definido na resposta da API.

O banco de dados contém dados de IP whois dos principais Registros de Endereços da Internet diariamente

O banco de dados resultante é um conjunto de dados conjunto, pós-processado para obter formato e dados unificados e consistentes. O formato de saída formato de saída é JSON ou CSV, em que cada linha é um objeto JSON ou uma linha CSV separada. Ele permite o processamento paralelo em seus sistemas.

Cerca de 20% dos registros têm informações de contato parcialmente editadas, devido ao GDPR.

Os feeds de dados descritos abaixo são apresentados nas três formas a seguir:

  • Bancos de dados completos - um banco de dados completo de todos os IP Netblocks para uma determinada data em um formato JSON ou CSV unificado e consistente. Esses arquivos são nomeados no formato:
    "ip_netblocks.%DATE%.full[.v6].jsonl.gz"
    "ip_netblocks.%DATE%.full.blocks[.v6].csv.gz"
    "ip_netblocks.%DATE%.full.contacts[.v6].csv.gz", por exemplo "ip_netblocks.2018-12-19.full.contacts.csv.gz" e "ip_netblocks.2018-12-19.full.contacts.v6.csv.gz"
  • Bancos de dados incrementais diários - alterações no banco de dados completo de IP Netblocks em comparação com a data anterior. Inclui intervalos de IP adicionados, removidos e modificados desde ontem. Esses arquivos são nomeados no formato:
    "ip_netblocks.%DATE%.daily.jsonl[.v6].gz"
    "ip_netblocks.%DATE%.daily.blocks[.v6].csv.gz"
    "ip_netblocks.%DATE%.daily.contacts[.v6].csv.gz", por exemplo "ip_netblocks.2018-12-19.daily.contacts.csv.gz" e "ip_netblocks.2018-12-19.daily.contacts.v6.csv.gz"
  • Bancos de dados Lite - um banco de dados parcial dos blocos de rede IP para uma determinada data, criado para fins acadêmicos. Inclui cerca de 5% de um banco de dados IPv4 completo. Ele não fornece registros IPv6. Esses arquivos são nomeados no formato:
    "ip_netblocks.%DATE%.lite.jsonl.gz"
    "ip_netblocks.%DATE%.lite.blocks.csv.gz"
    "ip_netblocks.%DATE%.lite.contacts.csv.gz", por exemplo "ip_netblocks.2018-12-19.lite.contacts.csv.gz"

Tempo de armazenamento do arquivo: os arquivos completos e diários ficam disponíveis por 3 meses a partir da data de criação. Os arquivos Lite ficam disponíveis por uma semana.

Um novo banco de dados incremental diário é fornecido todos os dias às 02:00 PST.

1. Todos os arquivos de datafeed

Caminho básico

Amostras

Tamanhos médios de arquivos

Aqui são apresentados os tamanhos aproximados dos arquivos e os números de registros.

gzip desempacotado registros
v4 v6 v4 v6 v4 v6
Completo .jsonl 610.0MiB 111.5MiB 8.3GiB 1.4GiB 9.1M 1.3M
Completo .blocks.csv 263.3MiB 58.5MiB 1.8GiB 394.3MiB 9.1M 1.3M
Completo .contact.csv 102.8MiB 13.7MiB 619.3MiB 73.1MiB 5.2M 568.3K
Diário .jsonl 1.4MiB 339.3KiB 18.7MiB 3.7MiB 18.2K 3.6K
Diárias .blocks.csv 676.4KiB 202.3KiB 4.9MiB 1.2MiB 18.2K 3.6K
Diário .contact.csv 186.4KiB 43.2KiB 761.8KiB 176.0KiB 7.7K 1.6K
Lite .jsonl 39.1MiB - 425.9MiB - 455.8K -
Lite .blocks.csv 17.0MiB - 94.4MiB - 455.8K -
Lite .contact.csv 7.5MiB - 34.5MiB - 308.2K -

2. Arquivos de datafeed enriquecidos com BGP

Os arquivos enriquecidos do BGP incluem um arquivo pai que é a referência ao bloco do qual as informações foram emprestadas. Sua presença indica que o bloco foi obtido das tabelas de roteamento BGP.

Caminho básico

Amostras

Tamanhos médios de arquivos

Aqui são apresentados os tamanhos aproximados dos arquivos e os números de registros.

gzip desempacotado registros
BGP v4 BGP v6 BGP v4 BGP v6 BGP v4 BGP v6
Completo .jsonl 650.6MiB 137.3MiB 9.9GiB 2.5GiB 10.4M 2.1M
Completo .blocks.csv 286.3MiB 77.5MiB 2.2GiB 715.7MiB 10.4M 2.1M
Completo .contact.csv 102.8MiB 13.7MiB 619.3MiB 73.1MiB 5.2M 568.3K
Diário .jsonl 1.5MiB 378.9KiB 21.9MiB 4.9MiB 20.7K 4.4K
Diárias .blocks.csv 741.2KiB 232.4KiB 6.2MiB 1.7MiB 20.7K 4.4K
Diário .contact.csv 189.8KiB 44.1KiB 770.4KiB 178.9KiB 7.8K 1.6K
Lite .jsonl 44.8MiB - 508.4MiB - 520.1K -
Lite .blocks.csv 19.8MiB - 114.5MiB - 520.1K -
Lite .contact.csv 8.1MiB - 36.0MiB - 326.7K -

3. Feeds de dados de conformidade regulatória

Nossos feeds de IP específicos para cada país são projetados para ajudar a atender aos requisitos de conformidade regulamentar definidos por várias agências governamentais e organizações internacionais em todo o mundo. Atualmente, o serviço abrange os países listados pela OFAC países, incluindo países com sanções , como Cuba, Irã, Coreia do Norte, Rússia, Síria e várias regiões da Ucrânia (ou seja, Crimeia, Donetsk e Luhansk). As próximas versões abrangerão listas baseadas em localização listas baseadas em localização fornecidas pelo Regulamento de Tráfico Internacional de Armas (ITAR) e pela Política Externa e de Segurança Comum (CFSP), entre outras. 

Caminho básico

Amostras

Tamanhos médios de arquivos

Aqui são apresentados os tamanhos aproximados dos arquivos e os números de registros.

gzip desempacotado registros
OFAC v4 OFAC v6 OFAC v4 OFAC v6 OFAC v4 OFAC v6
Completo .jsonl 46.1MiB 3.3MiB 762.5MiB 55.9MiB 763.7K 46.0K
Completo .blocks.csv 20.5MiB 1.9MiB 156.8MiB 12.5MiB 763.7K 46.0K
Completo .contact.csv 5.3MiB 369.4KiB 18.7MiB 1.0MiB 273.5K 15.6K
Diário .jsonl 97.8KiB 9.3KiB 1.4MiB 68.0KiB 1.3K 60
Diárias .blocks.csv 48.4KiB 5.1KiB 342.6KiB 22.5KiB 1.3K 60
Diário .contact.csv 10.2KiB 2.0KiB 27.6KiB 4.7KiB 459 80
Lite .jsonl 3.2MiB - 37.9MiB - 37.9K -
Lite .blocks.csv 1.4MiB - 7.8MiB - 37.9K -
Lite .contact.csv 450.9KiB - 1.3MiB - 19.3K -

Download via HTTPS

Download via FTP

Download via FTPS

Leia mais sobre a conexão FTPS: https://en.wikipedia.org/wiki/FTPS.

Nosso servidor FTP oferece suporte à criptografia explícita de FTP sobre TLS. Você pode configurar seu cliente FTP para usar criptografia explícita de FTP sobre TLS para comunicações seguras.

Nosso servidor FTPS é acessado usando os mesmos caminhos e chaves de API de um servidor FTP comum, cujas instruções para isso estão descritas acima. Para se conectar via FTPS, selecione a opção "Require explicit FTP over TLS" em seu cliente FTP, se ele for compatível. Exemplo de configuração do FileZilla:

criptografia explícita de FTP sobre TLS