?

Log in

Previous Entry | Next Entry

Big Data

Облакаааа,беласнежные лашадкииии...

Еще одна тема в longterm portfolio это Big Data.
Если кратко,то нынче почти любая отрасль упирается в потребность эффективной обработки больших объемов данных.
Системщикам,думаю,рассказывать об этом не надо.
К слову,есть возможность проявить патриотизьм-
"To ring the bell,to meet people..."
Dmitry Loschinin.

Luxoft,айпиошнулись по 18 месяц назад,нынче 22,объем конечно хиленький,но все это (как всегда) не важно.
Важно то,что, возможно,наступит в скором будущем момент,когда Big Data станет темой а-ля Интернет-рилейтед стартап в конце 90-х.
Плюс в том,что в массе своей народ очень слабо понимает что это за дата большая и с чем ее едят,поэтому времени нагрести соответствующих стоков было и еще будет достаточно.
Ну а,для нетерпеливых патриотов-
http://nysebigstage.com/leaders/big-data-global-presence
lxft

P.S. TSLA скоро отчитывается,что-то мне подсказывает,что все у них пучком.

Comments

( 24 комментария — Оставить комментарий )
sintetik
22 июл, 2013 20:16 (UTC)
Хранилища данных как бы моя прямая специализация, и я бы не был столь оптимистичен, пока что бигдата скорее кандидат на то же место что и ошибка 2000. Еще толком не научились монетизировать просто дату, а уже замахиваются на биг. Пока что бигдата это просто заплатка для криворуких архитекторов и разработчиков. Типа как дешевая память для тупых и ленивых кодеров, чтобы не оптимизировать алгоритмы, но и не тормозить.
pratrader
22 июл, 2013 20:21 (UTC)
Big Data-это не про хранение,а про обработку,которая замечательно монетизируется.
http://ru.wikipedia.org/wiki/%C1%EE%EB%FC%F8%E8%E5_%E4%E0%ED%ED%FB%E5
true_flipper
22 июл, 2013 20:35 (UTC)
Так оно все обрабатывается на опен сорс решениях по большей части либо на продуктах грандов по базам - тот же Oracle.
move_yo
22 июл, 2013 23:10 (UTC)
в этом секторе hadoop считается лидером, но это конечно только начало
pratrader
23 июл, 2013 06:34 (UTC)
Хадуп надо причесать и кастомизировать,плюс кто-то должен отвечать за надежность.
Поэтому есть такие конторы как cloudera.
my_1st_m
23 июл, 2013 08:27 (UTC)
Лидер конечно Cloudera и Hortonworks. Своя сборка есть и у IBM - BigInsights, с инсталлятором и разными плюшками типа BigSQL
Также к BigData относятся решения для обработки потоковой информации - типа Oracle GoldenGate и IBM Streams.
Ну и визуализация поиска в больших данных - Oracle Endeca и IBM Vivisimo
sintetik
23 июл, 2013 06:06 (UTC)
"серия подходов, инструментов и методов обработки структурированных и неструктурированных данных огромных объёмов", "методы класса Data Mining" - в переводе на русский это поиск "не знаю чего" в свалке(помойке) данных, авось выужу что ценное. Примеры монетизации у нас есть?

Это при том что по статистике 7 из 10 ИТ проектов - фэйл, 9 из 10 хранилищ(структурированных, когда точно знаем что лежит и точно известны запросы) не успешны(либо фэйл, либо технически работают, но не используются, либо используются но не приносят денег, в лучшем случае ускорили отчетность). И 10 из 10 внешних заказов это откаты.

На моей памяти только одна организация которой сделали хранилище смогла извлечь из него пользу - X5Group, но у них была предельно четко сформулирована задача и очень узкая область.
pratrader
23 июл, 2013 06:50 (UTC)
Их масса в каждой отрасли.
Из публичных SPLK например.
А так,сумологик,таблеау,да дофига примеров.
Вообще,ресирч-дело каждого.
Я обозначил,а там,есть желание-можно порыть,нет желания-посмотреть через несколько лет,постфактум так сказать.
stroyu_dom
23 июл, 2013 08:09 (UTC)
Вы назвали производителей софта, и не все их решения это биг дата. Я спрашивал про российские компании извлекших прибыль из внедрения биг дата?
Я думаю их максимум 2 озон и яндекс, которые просто смотрят на свои западные аналоги, весь остальной рынок пытается переварить хотя бы то что им "навнедряли" за последние 5-8 лет.
my_1st_m
23 июл, 2013 08:31 (UTC)
Скоро будут референсы;) работа идет в банках по скорингу (ТКС уже использует Kreditech и ZestFinance), по поиску новых клиентов на потреб.кредиты
stroyu_dom
23 июл, 2013 08:37 (UTC)
было бы интересно взглянуть, они соцсети потрошить что ли хотят?
то что банки основные потребители алгоритмов майнинга это известно, но их данных хорошо структурированы и объемы вполне разумные, чтобы обойтись обычными ROLAP|MOLAP движками. Экзадаты то впаренные простаивают ))
my_1st_m
23 июл, 2013 10:57 (UTC)
Конечно! Потрошат соцсети и твиттер на предмет ключевых фраз (типа "коплю на паровоз", "хочу купить слона") и потом предлагают этим людям кредит. Или оперативно реагируют на проклятья в свой адрес в тех же соцсетях
pratrader
23 июл, 2013 08:36 (UTC)
Я для себя не вижу смысла разделять планету на страны.
Какая разница как оно в России или в Зимбабве,если чуть левее и вверх на шарике сервис пользуется спросом,монетизируется и клиенты довольны?
Если взять топ сайтов интернета,все они часть выручки отстегивают на биг дата.
И чем дальше,тем ниже эта потребность будет проникать.
Точнее,скажем так,потребность на самом деле была всегда,проникать будет понимание,что ее можно удовлетворить с помощью таких сервисов.
Я исхожу из соображений,что спустя некоторое время вся система образования будет меняться в сторону обучения поиску,не более того.
Плюс какая-то специализация.
А данные будут храниться не в голове,а где-то там.
Из грубых примеров-перевод на лету.Нет смысла сейчас языки учить,лет через 5-10 будет какая-нибудь хреновина в ухе,которая переводит без задержек с любого языка на твой родной.
stroyu_dom
23 июл, 2013 08:44 (UTC)
ну если не разделять то да, но я то с местного рынка внедрений кормлюсь, увы
stroyu_dom
5 авг, 2013 13:07 (UTC)
Нормуль, скоро стяжка, ждем включения коммуникаций.
my_1st_m
23 июл, 2013 08:22 (UTC)
Я занимался в IBM продвижением Big Data, сейчас в Oracle имею к этому отношение

Edited at 2013-07-24 08:30 (UTC)
(Удалённый комментарий)
stroyu_dom
23 июл, 2013 08:39 (UTC)
бывшие коллеги? может знакомы?
у меня сейчас наоборот IBM платформа, Netiza осваиваем
my_1st_m
23 июл, 2013 10:58 (UTC)
Я в IBM продавал Netezza;)
stroyu_dom
5 авг, 2013 13:08 (UTC)
Сэйл? Я в оракле 6 лет в пресэйле проработал.
my_1st_m
7 авг, 2013 08:28 (UTC)
Я теперь тоже перешел в ORA, в BI к Семенееву
pratrader
23 июл, 2013 09:15 (UTC)
Есть ощущение,что Big Data это один из Next Big Things?
my_1st_m
23 июл, 2013 11:01 (UTC)
Если ROI подтвердит, то да. Думаю что как минимум в скоринге и обслуживании клиентов будет прорыв.
Также возможно пойдет геотаргетинг рекламы в риалтайм.
( 24 комментария — Оставить комментарий )

Метки

Разработано LiveJournal.com
Designed by Tiffany Chow