根據《中華人民共和國刑法》第二百三十三條規定：“索財、威脅、非法限制人身自由或者以其他手段實施詐騙罪，是指以非法占有為目的，限制他人財產權利，或者限制、威脅他人人身自由，或者以其他手段實施詐騙的行為。” 因此，如果你在與別人做買賣時，雙方達成協議，你收了錢，可是沒有辦成事，而錢開始一點一點往回退，則可視為詐騙行為。