从小父亲就未管过我成天和别的女人鬼混有钱也不给我难道不算遗弃吗？

你好：你父亲有遗弃行为，但不构成遗弃罪。
遗弃行为必须达到情节恶劣程度的，才构成犯罪。也就是说，情节是否恶劣是区分遗弃罪与非罪的一个重要界限。遗弃行为情节恶劣是指：由于遗弃而致被害人重伤、死亡的；被害人因被遗弃而生活无着，流离失所，被迫沿街乞讨的；因遗弃而使被害人走投无路被迫自杀的；行为人屡经教育，拒绝改正而使被害人的生活陷一危难境地的；遗弃手段十分恶劣的（如在遗弃中又有打骂、虐待行为的）等等。