Могу я сразу же ехать дальше, если меня остановил дружинник, а не ИДПС?

тебе не кажется , что ты сам ответил на свой вопрос???
насколько я знаю, это правда. Он не является сотрудником дпс и не имеет права останавливать!

Формально - да, можете ехать, так как остановка - незаконна. Но, Вы либо проедете до настоящего инспектора, если он стоит по пути следования, либо есть вероятность, что за Вами поедет машина гайцов и потребует остановится. И в-первом, и во-втором случае, Вам будут вменять в вину то, что Вы не остановись по требования инспектора. Вряд ли, Вам удастся доказать, что остановил Вас дружинник (или "медведь из леса"), а не инспектор. Ответственность не самая страшная - 700 рублей, но не зачем искушать судьбу - см. ниже.
И про презумпцию невиновности не вспоминайте, слово это иностранное и гайцам, и судьям - незнакомое.
Лучше, с точки зрения реальности, поступить так.
1. Если Вы не хотите общаться с дружинником (сомнительный юридический статус), то можете или отказаться от разговора с ним, попросив пригласить инспектора, или, на малой скорости подьехать, к инспектору с вопросом: "Почему меня задерживают?"
2. Либо, не предьявляя своих документов, поинтересоваться у дружинника (что это, вообще, за статус, в свете работы гайцов?): "А что случилось?" (В смысле, сообщите причину остановки моей машины). И, пока, он Вам внятно не обьяснит основания, по которым он Вас остановил, и не делать ничего на его требования или просьбы. А оснований таких - немного, единственно реальное - нарушение ПДД. Таким образом, Вы не сильно нагнетая ситуацию, выясните ситуацию - может быть, действительно, Вам что-то существенное вменяют в вину. И, если опасения оправданы, то у Вас будут варианты развития событий.
Конечно, все данные (время остановки, подробные данные документов этого дружинника, номер машины гайцов) могут сильно пригодится и их лучше записать.

Если глубже капнуть в правовую основу то после того как ИДПС покажет жезлом место остановки то можно остановиться и сразу уезжать так как другого требования от сотрудника ИДПС не поступало,вы выполнили все требования и за такой уезд с вас не спросить,но это в случае если судья в законах разбирается лучше чем в овощах.Но в россии сами знаете,даже по телеку показывают как за невыполнение пункта пдд 2.1.1 вменяют ст.19.3КоАП хотя она там никаким боком не светит.

Если еще глубже капнуть то даже если вас остановит идпс то вы можете после остановки сразу ехать так как требование остановиться вы выполнили а других требований к вам не поступало