Oh, somehow I overlooked this one. No, this is entirely not correct, up to the point of being nonsense.
Задумывать/задумать is mentally decide to do something or mentally choose something.
Они задумали ограбление - They decided to commit a robbery.
Задумай число от 1 до 10.
What you need here is something like:
Единственное, что заставляет меня задуматься...
Единственное, что ставит меня в тупик (like a deadend)