Fils de Roland Roussel, ingénieur aéronautique et d’une mère qui abandonne le foyer familial lorsqu’il a cinq ans, il passe son enfance à Sceaux (92) avec sa soeur Anne-Mary, sa belle mère et le fils de cette dernière qui deviendra prêtre. Famille recomposée dans laquelle il ne se sent pas à l’aise, il préfère la compagnie de ses copains et la rue.
En 1967, il organise, avec trois amis d’enfance, une expédition au Népal avec deux 2 CV. C’est en Iran qu’il rencontre Gérard Piloquet, ethnologue, qui deviendra une sorte de modèle. C’est également à cette époque qu’il rencontre Pierre Klein, rédacteur en chef du journal Connaissance du Monde pour qui il écrit quelques articles. Son coeur balance alors entre deux passions : le cinéma et l’ethnologie. C’est donc tout naturellement qu’il se fait admettre au département cinéma du Musée de l’Homme à Paris, placé alors sous la direction de Jean Rouch. Il effectue quelques voyages au Moyen-Orient où il tourne différents documentaires avec Gérard Piloquet, principalement sur la fabrication des tapis de nomades, sur les Tadjiks et sur les Qachquay.
Fin 1967, il part faire son service militaire au 451 GAAL à Bitburg en Allemagne. Réfractaire à la discipline, il passe une semaine à la caserne avant de rejoindre l’hôpital de Trèves et d’effectuer un séjour à la forteresse de Landau. Réformé temporaire en , il fait la connaissance de René Biaunie, un ex-mercenaire qui lui présente Bob Denard. Il obtient un passage pour le Biafra, fin 1968, où il restera une semaine pour l’agence photoKeystone.
En mai 68, il réalise avec Gérard Piloquet un film contestataire joué par des marionnettes intitulé Ainsi font.... En rupture avec sa famille il s’installe chez Piloquet à Saint-Germain-en-Laye, à la fin 1968. La vie se compose alors de jazz, d’écriture, de filles et de boissons fortement alcoolisées. Jean-Pierre Huster squatte parfois la maison de Saint-Germain-en-Laye. Il y amène son frère Francis, parfait inconnu à l’époque, Jacques Weber, Jacques Spiesser, et bien d’autres qui ont fait du chemin depuis. William Klein, qui tourne à Paris Mister Freedom fait également un court séjour à Saint-Germain-en-Laye. La belle vie ne pouvant pas durer, fin 1969, Piloquet se sépare de son épouse et la bulle éclate. Chacun retourne vivre chez soi.
Le LSD est à la mode depuis quelque temps et il s’y adonne avec curiosité. Il fréquente un peu le Living Theatre de Julian Beck avant de conclure que la création sous acide n’apporte pas grand-chose. Exit la période flower power. Il prend ses distances avec les paradis artificiels d'autant plus qu'en 1970, il part chercher une ancienne fiancée à Goa. Il ne la ramènera pas. Elle fera une overdose. Cet épisode de sa vie donnera naissance au livre Le Vent d’Ostende à Peshawar qui ne sortira qu’en 2013.
À la fin de l’année, il s’installe à Bruxelles où il réalise quelques films publicitaires et il va dépanner dans les Flandres un producteur qui vient de licencier le réalisateur. C’est ainsi qu’il réalise L’Héritage film entièrement en Flamand. Langue dont il ne connaît que trois mots ! L’année d’après, il rentre en France avec l’étiquette cinéaste belge !
Engagement politique
Il n'appartient à aucun groupe politique. Mais dès son plus jeune âge, il est allergique à l’autorité et ne laisse à personne le droit de décider de sa vie à sa place. Au collège Dupleix, il fait la connaissance de Daniel Rosenthal et surtout de son frère William. Ils passent des jours et des nuits à refaire le monde sur un mode libertaire. Quelques années plus tard, c’est tout naturellement qu’il milite dans le groupe anarchiste Louise Michel. À Sceaux, son voisin immédiat est Jean Rous, créateur des Jeunesses socialistes révolutionnaires, avec qui il échange des points de vue durant des journées entières. À la fin 1968, il juge que l’anarchie est plus une philosophie, une manière de vivre et d’être, qu’un parti politique et que c’est une aventure individuelle, une utopie de laquelle il faut le plus se rapprocher. Il n’aura donc plus que seul devise « ma liberté s’arrête où la tienne commence... » Au fil des années il ancrera ses aspirations vers un anarchisme de droite, ou libertarien qui défend l'absolue liberté individuelle.
Vie privée
L’absence de sa mère laisse en lui un cicatrice immense. On retrouve dans ses écrits ce compte qu'il ne réglera jamais avec son enfance : « Je voulais juste que l'on m'aime un peu, même que l'on fasse semblant... Ce n'était pas grand chose, mais ça m'aurait peut être fait voir le monde d'une autre couleur... » (Quand j'étais star, 2012). À la recherche d’un point d’ancrage, il enchaîne les aventures avant de trouver la femme de sa vie, Monique Teissier. Il quitte définitivement Paris à la fin de l’année 1974 pour s’installer avec sa compagne à Pont-Saint-Esprit dans le château familial. Ils se marient le et un fils, William, naîtra le . Le couple habite à Montpellier depuis 1978.
Association Poussière de vie
En 1993, en reportage au Vietnam, il visite à Hô-Chi-Minh-Ville un hôpital pour enfants victimes de l'agent orange. Si pour lui, ceux-là sont pris en charge et n'ont pas un grand avenir, il reste ces centaines d'enfants des rues qui eux, représentent l'avenir du pays. De retour en France, il crée avec l'aide de la communauté Vietnamienne de Montpellier, l'associationBui Doi, Poussière de vie. C'est le nom que l'on donne à ces 200 000 enfants qui dorment chaque nuit dans les rues de Saïgon. Les plus chanceux vont à l'école primaire le matin mais l'école étant payante, ils ne peuvent pas aller bien loin. Les plus démunis et les infirmes attendent sur le trottoir que leurs aînés leur donnent leurs surplus de nourriture, quand surplus il y a. Beaucoup sont orphelins, pour d'autres, les parents ont démissionné : famille trop nombreuse, père infirme sans ressource ou alcoolique sans espoir. Très peu mendient, ils vendent des journaux, achètent des cartes postales à la poste pour 5000 dôngs pour les revendre 6000 (bénéfice 15 centimes). C'est pour cette fierté et cette rage de vivre que Poussière de vie a été créée. Connaissant bien la corruption des fonctionnaires dans ce pays, il est décidé de ne pas envoyer de produits à ces enfants mais de créer directement un centre d'hébergement. Tous les capitaux collectés en France seront envoyés et géré directement pas ce centre. C'est ainsi qu'il rencontre le père Houlmann, un pasteursuisse qui a déjà un petit centre d'hébergement. Il est secondé par la soeur Lê Thi Thanh. Ainsi la première année, le centre bénéficie d'une installation d'eau de la ville, et peut agrandir un bâtiment. Si Poussière de vie existe toujours, Gilbert Roussel en a laissé le gouvernail à d'autres mais il suit toujours le mouvement.
1980 : Glissez pour entrer par les trois trous, avec Cyril Val
1980 : Le Second Voyage de noces (ou Folles Nuits pour petits culs soumis), avec Nadine Roussial, Laura Clair, Jack Gatteau, Jean-Pierre Armand, Guy Royer
1984 : Les Profondeurs du clitoris (ou Antilles, Cream and Chocolate) avec Piotr Stanislas
1984 : Ecole pour salopes très spéciales, avec Christophe Clark et Eva Kleber
1984 : Partouze collective pour sonophanes (ou Arsène Lapin et le collier de la princesse indienne), avec Christophe Clark, Leïla, Marianne Aubert, Jérôme Proust
1984 : Chattes rousses en nylon noir, avec Agnès Ardant, André Kay
1984 : Croupes en chaleur pour s'éclater, avec Agnès Ardant, André Kay
1984 : Le Camping des putes, avec Jacky Arnal
1984 : Réserves à putes pour commandos, avec Jacky Arnal, Laura Clair et André Kay
1984 : Soubrette obscène très très spécialisée, avec Cyril Val, Anna Lombardi et Éric Dray
1984 : Baise ou crève, avec Cyril Val, Anna Lombardi et Éric Dray
1984 : Week-end obscène chez les sadiques, avec Cyril Val, Anna Lombardi et Éric Dray
1984 : James Bande 069, agent secret pour obsédées sexuelles, avec Jacky Arnal, Laura Clair, André Kay, Cyril Val, Anna Lombardi
1984 : Demandes sadiques pour pute pervertie, avec Cyril Val
1984 : L'Ecole des sodomisées, avec Christophe Clark et André Kay
1984 : Vierge cherche mâles experts, avec Christophe Clark et André Kay
1984 : Des filles possédées du plaisir, avec Marilyn Jess, Patrick Marin, André Kay
1984 : Sodomise-moi encore, avec André Kay
1984 : Tu me fais mal mais j'aime ça, avec Jean-Pierre Armand, André Kay