Моя конечная цель - потоковая передача Twitter (используя tweepy в python3), запись данных (df или csv) и периодический сброс этих данных в таблицу SQL (с использованием SQLAlchemy).Я видел очень простые примеры этого (siraj, sentdex и т. Д.), И у меня есть функциональный скрипт, но мне бы очень хотелось узнать, как это должно быть реализовано в крупномасштабной производственной среде .
Спросил еще один вопрос: как выглядит масштабный проект (на примере которого это делается), когда он создается опытными программистами ?(по общему признанию я - нуб.)
Вообще, я хотел бы знать, как улучшить мою игру как программиста с помощью программ пуленепробиваемости с обширной обработкой ошибок и модульностью моих сценариев в профессиональные пакеты, и что бы там ни было,что я не знаю, что мне следует делать.
Может ли кто-нибудь предоставить ресурсы или дать совет о том, как начать мой переход от функционального кодера к профессиональному программисту ?
Заранее спасибо!