Как я могу извлечь HTML-код с помощью Scapy?

Я недавно начал использоватьscapy Библиотека для Python 2.x Я обнаружил, что есть минимальная документация по функции sniff (). Я начал играть с ним и обнаружил, что могу видеть пакеты TCP на очень низком уровне. Пока я нашел только информационные данные. Например:

Вот что я положил в терминал scapy:

A = sniff(filter="tcp and host 216.58.193.78", count=2)

Это запрос к google.com, запрашивающий домашнюю страницу:

<Ether  dst=e8:de:27:55:17:f3 src=00:24:1d:20:a6:1b type=0x800 |<IP  version=4L ihl=5L tos=0x0 len=60 id=46627 flags=DF frag=0L ttl=64 proto=tcp chksum=0x2a65 src=192.168.0.2 dst=216.58.193.78 options=[] |<TCP  sport=54036 dport=www seq=2948286264 ack=0 dataofs=10L reserved=0L flags=S window=29200 chksum=0x5a62 urgptr=0 options=[('MSS', 1460), ('SAckOK', ''), ('Timestamp', (389403, 0)), ('NOP', None), ('WScale', 7)] |>>>

Вот ответ:

<Ether  dst=00:24:1d:20:a6:1b src=e8:de:27:55:17:f3 type=0x800 |<IP  version=4L ihl=5L tos=0x0 len=60 id=42380 flags= frag=0L ttl=55 proto=tcp chksum=0x83fc src=216.58.193.78 dst=192.168.0.2 options=[] |<TCP  sport=www dport=54036 seq=3087468609 ack=2948286265 dataofs=10L reserved=0L flags=SA window=42540 chksum=0xecaf urgptr=0 options=[('MSS', 1430), ('SAckOK', ''), ('Timestamp', (2823173876, 389403)), ('NOP', None), ('WScale', 7)] |>>>

Используя эту функцию, можно ли извлечь код HTML из ответа?

Кроме того, как эти пакеты выглядят?

И наконец, почему оба этих пакета почти идентичны?

 Elias Bothell15 июл. 2016 г., 03:40
Я понял это вскоре после публикации. Я изменил его без ограничений и нашел много шестнадцатеричного кода. Могу ли я предположить, что это чистый HTML? Если нет, то что это?
 Noob12315 июл. 2016 г., 22:38
@EliasBothell вы пытались использоватьscapy-клиент? Может использоваться для разбора http в scapy.
 Elias Bothell15 июл. 2016 г., 23:32
@ Noob123 Я все еще изучаю низкоуровневые пакеты, поэтому прошу прощения за глупые вопросы. Зачем мне нужно разбирать http? Насколько я понимаю, это простой текст, понятный человеку
 grochmal15 июл. 2016 г., 03:38
count = 2 убивает его, я еще не видел кусок HTML, который был передан только в двух пакетах TCP.

Ответы на вопрос(2)

почти идентичны", потому что они являются сегментами TCP SYN и SYN-ACK, которые являются частьюTCP рукопожатиеHTTP-запрос и ответ приходят после этого во время соединения (обычно в состоянии ESTABLISHED, за исключением случаев, когда используется опция TCP Fast Open), поэтому вам нужно посмотреть на сегменты после рукопожатия, чтобы получить интересующие вас данные.

         SYN
C ---------------> S
       SYN-ACK
C <--------------- S
         ACK
C ---------------> S
    HTTP request
C ---------------> S
         ACK
C <--------------- S
    HTTP response
C <--------------- S  <= Here is the server's answer
         ACK
C ---------------> S
...

Вы можете использовать Scapy'sRaw слой для извлечения данных выше TCP в вашем случае (например,pkt[Raw])

scapy-клиент? Это отличное расширение Scapy, которое помогает с этой проблемой

Ваш ответ на вопрос