LANDER:rdns ipv4-20140201 From Predict README version: 5565, last modified: 2017-01-5. This file describes the trace dataset "rdns_ipv4-20140201" provided by the LANDER project. This dataset contains reverse DNS hostnames for all public, unicast IPv4 addresses, with data collected early in 2014. This dataset was generated by Xiyue Deng as part of the DETER project. Contents • 1 LANDER Metadata • 2 Dataset Contents • 3 Collection Method • 4 Citation • 5 Results Using This Dataset • 6 User Annotations LANDER Metadata ┌───────────────────────────┬────────────────────────────────────────────────────────────────────────────────────┐ │ dataSetName │ rdns_ipv4-20140201 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ status │ usc-web-and-predict │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ shortDesc │ Reverse DNS IPv4 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ longDesc │ Reverse-DNS mapping information for all of the IPv4 address space. │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ datasetClass │ Quasi-Restricted │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ commercialAllowed │ true │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ requestReviewRequired │ true │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ productReviewRequired │ false │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ ongoingMeasurement │ false │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ submissionMethod │ Upload │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ collectionStartDate │ 2014-02-01 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ collectionStartTime │ 00:00:00 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ collectionEndDate │ 2014-02-28 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ collectionEndTime │ 00:00:00 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ availabilityStartDate │ 2017-01-18 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ availabilityStartTime │ 23:50:23 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ availabilityEndDate │ 2030-01-01 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ availabilityEndTime │ 00:00:00 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ anonymization │ none │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ archivingAllowed │ false │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ keywords │ category:dns-data, subcategory:public-dns-data, DNS │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ format │ text │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ access │ https │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ hostName │ USC-LANDER │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ providerName │ USC │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ groupingId │ │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ groupingSummaryFlag │ false │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ retrievalInstructions │ download │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ byteSize │ 18890096640 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ expirationDays │ 14 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ uncompressedSize │ 485559593838 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ impactDoi │ 10.23721/109/1354185 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ useAgreement │ dua-ni-160816 │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ irbRequired │ false │ ├───────────────────────────┼────────────────────────────────────────────────────────────────────────────────────┤ │ privateAccessInstructions │ See https://ant.isi.edu/datasets/#getting-datasets for information on obtaining │ │ │ this dataset. │ │ │ See │ └───────────────────────────┴────────────────────────────────────────────────────────────────────────────────────┘ Dataset Contents This dataset includes reverse-DNS mapping information for all of the IPv4 address space. We have gathered this data by crawling the reverse DNS space. The crawl took place fromi Feb. to April 2014. This information is derived from public sources. This datasets consists 14 datasets, each contining the reverse DNS names for IP addresses that start with a given common first four bits: rdns.0.fsdb.bz2 rdns.1.fsdb.bz2 rdns.2.fsdb.bz2 rdns.3.fsdb.bz2 rdns.4.fsdb.bz2 rdns.5.fsdb.bz2 rdns.6.fsdb.bz2 rdns.7.fsdb.bz2 rdns.8.fsdb.bz2 rdns.9.fsdb.bz2 rdns.a.fsdb.bz2 rdns.b.fsdb.bz2 rdns.c.fsdb.bz2 rdns.d.fsdb.bz2 Each file is in Fsdb format, a tab-separated text format with # comments. The schema is: #fsdb -F t block hexip ip answer authority 01000400 01000400 1.0.4.0 ip1.ip0.ip4.ip0.reverse.bigredgroup.net.au. - 01000400 01000401 1.0.4.1 loop0.brg_mel01_7206.bigredgroup.net.au. - • block is each /24, in hex format, with trailing zeros (this field is redundant with hexip, but useful because many studies are on blocks) • hexip is the full IPv4 address in hex format • ip is the full IPv4 address in format (this field is redundant) • answer is the reverse-DNS name for the IP address, or - if none was returned. • authority is the SOA record in the authority section, if there is no answer. (If there is an answer, it is -). Each file is sorted by hexip. The file ".sha1sum" contains SHA1 checksums of individual compressed files. The integrity of the distribution thus can be checked by independently calculating SHA1 sums of files and comparing them with those listed in the file. If you have the sha1sum utility installed on your system, you can do that by executing: sha1sum --check .sha1sum Collection Method The data was collected with probing with dig done in a random order over several weeks. Dig does retries itself, but there are no long-term retries, so the dataset may be incomplete. Citation If you use this trace to conduct additional research, please cite it as: PREDICT ID: USC-LANDER/rdns_ipv4-20140201/rev5565. Traces generated on 2014-02-00. Provided by the USC/LANDER project (http://www.isi.edu/ant/lander). Results Using This Dataset We have used this dataset for some internal work, but publications are not yet released as of 2014-05-11. User Annotations Currently no annotations. Categories: • Datasets • LANDER • LANDER:Datasets