Yep, é relativamente simples, precisas apenas de um programa freeware chamado VirtualDub.
Podes fazer download aqui:
http://virtualdub.sourceforge.net/ . Baixa a última stable release para o teu sistema operativo.
1 - Abres o programa.
2 - Tens várias tabs, vais à tab video e pões em Direct Stream Copy.
3 - Vais à tab de audio e pões em Direct Stream Copy tb.
4 - Vais File -> Open Video File e abres o primeiro bloco de video.
5 - Em seguida fazes File -> Append Video Segment e colocas o segundo bloco de video (se tiveres N blocos repetes N vezes este passo)
6 - Fazes File -> Save as AVI e colocas o nome do ficheiro final
Voilá, tens os varios segmentos juntos num único ficheiro.
Espero ter sido útil.