Пример страницы показывает, что все, что вам нужно сделать, это использовать плагин jQuery для любых элементов, для которых вы хотите иметь собственную полосу прокрутки.
$('.use-scrollbarpaper').scrollbarPaper();
И это добавляет div с классами scrollbarpaper-track
, scrollbarpaper-container
и scrollbarpaper-drag
, которые, как я полагаю, стилизуются по умолчанию в предоставленном CSS, поэтому вы можете стилизовать их по мере необходимости.