Вам нужно получить результат, используя метод подстроки, как показано ниже
String total_points = potential_points.getText();
int startIndex=total_points.indexOf(":")+2;
int endIndex=total_points.length();
String result=total_points.substring(startIndex,endIndex);
int no=Integer.parseInt(result);
Упрощенный код выше, как показано ниже
String result=total_points.substring(total_points.indexOf(":")+2,total_points.length());
int no=Integer.parseInt(result);