ALSA: firewire-lib: fix buffer-over-run when detecting packet discontinuity
authorTakashi Sakamoto <o-takashi@sakamocchi.jp>
Wed, 27 May 2015 15:02:59 +0000 (00:02 +0900)
committerTakashi Iwai <tiwai@suse.de>
Wed, 27 May 2015 15:44:42 +0000 (17:44 +0200)
commit31ea49baa1aa97f882ee3da8142ec5a9dac509c2
tree44c8c4280852fb0cbabe9820a6f5e959abbdc4e0
parent0d769a523a90e3e5cf20c8bb15626f82aea04c90
ALSA: firewire-lib: fix buffer-over-run when detecting packet discontinuity

When detecting packet discontinuity, handle_in_packet() returns minus value
and this value is assigned to unsigned int variable, then the variable has
huge value. As a result, the variable causes buffer-over-run in
handle_out_packet(). This brings invalid page request and system hangup.

This commit fixes the bug to add a new argument into handle_in_packet()
and the number of handled data blocks is assignd to it. The function
return value is just used to check error.

I also considered to change the type of local variable to 'int' in
in_stream_callback(). This idea is based on type-conversion in C standard,
while it may cause future problems when adding more works. Thus, I dropped
this idea.

Fixes: 6fc6b9ce41c6('ALSA: firewire-lib: pass the number of data blocks in incoming packets to outgoing packets')
Reported-by: Dan Carpenter <dan.carpenter@oracle.com>
Signed-off-by: Takashi Sakamoto <o-takashi@sakamocchi.jp>
Signed-off-by: Takashi Iwai <tiwai@suse.de>
sound/firewire/amdtp.c