Использование Amazon AWS для создания автономной базы данных - PullRequest
2 голосов
/ 21 ноября 2008

Постановка задачи: Я хотел бы создать автономную базу данных для поиска цен / информации о n самых полезных книгах для продажи в Соединенных Штатах (где n, вероятно, составляет 3 миллиона или около того).

Вопрос: Итак, мой вопрос (и я открыт для других подходов здесь), я пытаюсь выяснить, как использовать Amazon AWS для загрузки списка n самых продаваемых книг, которые продаются, а также некоторую информацию о книге ( т. е. название, цены и т. д ...).

Что я сделал до сих пор: Во-первых, что-то подобное уже существует (asellertool.com), однако я подумал, что это будет интересный проект для работы, и, честно говоря, мы недостаточно серьезны, чтобы платить по подписке в 30 долларов в месяц.

Теперь, AWS великолепен (и прост), если у вас есть несколько предметов, которые вы хотите найти, но я не могу понять, как перечислить рейтинг продаж. Первоначально я надеялся перечислить все элементы книги, которые Amazon имела в ISBN. Но и этого не было. Тогда я подумал, что смогу найти список всех номеров ISBN, но это тоже тупик. Наконец, я подумал, что смогу создать свой собственный список номеров ISBN, но, выполнив некоторые подсчеты конвертов, я подумал об этом лучше, так как моим решениям потребуется примерно год, чтобы пройти треть пространства из 10 цифр при 100 /. второй (и это все равно было излишним).

Итак, я снова в рейтинге продаж, который в настоящее время кажется тупиковым. Так что, если у вас есть какие-либо мысли, я был бы признателен.

Ответы [ 4 ]

1 голос
/ 30 июля 2009

У Amazon есть служба подачи данных, которую вы можете использовать, которая содержит XML-файлы GZipped всех своих продуктов на основе категорий верхнего уровня. Он обновляется один раз в день и содержит около 20 ГБ / 110 ГБ сжатых / несжатых данных. Так как вам нужны только книги, это больше в области 4 ГБ / 31 ГБ. Единственное, я не уверен, кто может это использовать и что связано с получением аккаунта. Насколько я знаю, они ничего не пишут об этом на своем веб-сайте, поэтому вам, скорее всего, придется связаться с кем-то там, чтобы узнать больше об этом. Мы используем это на работе для того, что делаем с ними, и это одна из самых безумных обработок xml, которые мне приходилось делать.

1 голос
/ 13 декабря 2008

Взгляните на Зона AWS , в разделе Amazon E-Commerce Service.

0 голосов
/ 19 июля 2009

Я тоже не программист, но любопытный и дешевый. Asellerstool, вероятно, отлично, но их не было бы рядом, если бы не бесплатная база данных Amazons. Ну, я думаю, никто не заботится о цены на подержанные книги?

0 голосов
/ 11 декабря 2008

Мне было интересно, какой из сервисов Amazon AWS вы хотите использовать? Или ты не знаешь?

А зачем вам автономная база данных? Почему бы не делать запросы на все, что вам нужно, и создать временный кеш?

Добро пожаловать на сайт PullRequest, где вы можете задавать вопросы и получать ответы от других членов сообщества.
...