As a rule of thumb:
Is it possible to replace the subject with ihr? -> 2nd person plural
Is it possible to replace the subject with wir? -> 1st person plural
or more complicated:
Duden - Das Wörterbuch der sprachlichen Zweifelsfälle (Chapter 2.1) says:
Bei der Verbindung von Subjektteilen in der 2. (du/ihr) und 3. Person (er/sie) ist das Gesamtsubjekt austauschbar mit ihr; Verb und Pronomen werden entsprechend in die 2. Person Plural gesetzt.
Sind eine 2. Person und eine 3. Person mit und verbunden, richtet sich das Verb nach der 2. Person Plural. Die beiden Subjekte können durch ihr zusammengefasst werden.
So as you can replace Du und deine Geschichten with ihr it's
„Du und deine Geschichten habt mir ...“