Слово "довлеть" мы привыкли воспринимать как "давить", "опускать тяжесть" (слова, убеждения, физической силы, иллюзий и тд).

На самом деле "довлеть" означает "быть достаточным", "удовлетворять". Вот какие предложения нужно с ним строить:

1. Довлеть себе – не зависеть ни от чего, иметь самостоятельное, самодовлеющее значение.

2. Творческая мысль сама себе довлеет.

3. Созданный им мир довлел только ему одному.

4. Я недавно устроился на работу и новое место мне довлеет (иными словами "новое место меня удовлетворяет")

А вот и цитата:

Этою песнею он создал свой особенный, только одному ему довлевший мир. (Белинский, О жизни и сочинениях Кольцова).

То есть логика такова, что после "довлеть" должно стоять существительное в дательном падеже.

Вывод: совершенно неправильно говорить "Надо мной довлели обстоятельства", "Надо ним довлеет прошлое" и тд. Лучше говорить так: Одно обстоятельство не дает мне покоя или Меня не отпускает прошлое.