Перепрыгнеть в содержание


* * * * * 1 голосов

Объединение усилий по сбору и организации БД по футболу


222 ответов в эту тему

#141 OFFLINE   Bambuk

    Специалист


  • mp
  • 6322 сообщения
602

Добавлено 17 May 2015 - 19:29

Сообщенияtester.nt, on 17 May 2015 - 19:00, сказал:

Vladislove, скажите, Вам все понятно из видео или может возникают какие-то трудности? Вы пробуете открывать рабочие файлы? Все работает?

Bambuk, как у Вас дела со сводными таблицами? Немного разобрались?
Вчера скачал все надстройки для екселя10 со сводными пока не начал разбираться....но буду потихоньку что-то познавать (тише едешь дальше будешь...)
В текущий момент меня интересует сможет ли Атлетико М. забить Барсе или нет.....

Отредактировано Bambuk, 17 May 2015 - 19:32.


#142 OFFLINE   Vladislove

    Специалист


  • Участник II
  • ПипПипПип
  • 165 сообщения
53
  • МестоположениеРоссия

Добавлено 17 May 2015 - 19:43

Сообщенияtester.nt, on 17 May 2015 - 19:00, сказал:

Vladislove, скажите, Вам все понятно из видео или может возникают какие-то трудности? Вы пробуете открывать рабочие файлы? Все работает?

Видео нравятся, спасибо за то, что их делаете, потихоньку вникаю) Единственное, что для меня не очень удобно, то что когда читаешь перевод объяснения на русском языке, то ни всегда успеваешь обратить внимание, куда Вы нажали или что сделали в экселе, приходится иногда перематывать или жать на паузу. По мне, было б удобней, если б Вы как в первом видео, сами по русски говорили бы что делаете и параллельно показывали, что да как. Ну а так, конечно же делайте как Вам удобней, в любом случае видео полезные и в целом всё понятно пока что.

По поводу файлов. Как я уже говорил, у меня офис стоит 2010. Надстройки пока еще я не искал и не устанавливал. С файлами у меня ситуация следующая, они открываются. Но по файлам ко второму видео если говорить, то когда я их открываю, у меня просто пустой белый лист:
Прикрепленный файл  2015-05-17_22-28_Microsoft Excel.png   136.18K   2 Количество загрузок

Ну а по файлу к третьему видео, ситуация следующая:

Прикрепленный файл  2015-05-17_22-26_Microsoft Excel.png   192.29K   3 Количество загрузок

Я так понимаю, что всё это связано с тем, что у меня не установлены надстройки.

Отредактировано Vladislove, 17 May 2015 - 19:44.


#143 OFFLINE   tester.nt

    Специалист


  • Участник II
  • ПипПипПип
  • 192 сообщения
61

Добавлено 17 May 2015 - 19:48

СообщенияBambuk, on 17 May 2015 - 19:29, сказал:

Вчера скачал все надстройки для екселя10...
Это уже шаг вперед )

#144 OFFLINE   tester.nt

    Специалист


  • Участник II
  • ПипПипПип
  • 192 сообщения
61

Добавлено 17 May 2015 - 20:23

СообщенияVladislove, on 17 May 2015 - 19:43, сказал:

Видео нравятся, спасибо за то, что их делаете, потихоньку вникаю) Единственное, что для меня не очень удобно, то что когда читаешь перевод объяснения на русском языке, то ни всегда успеваешь обратить внимание, куда Вы нажали или что сделали в экселе, приходится иногда перематывать или жать на паузу. По мне, было б удобней, если б Вы как в первом видео, сами по русски говорили бы что делаете и параллельно показывали, что да как. Ну а так, конечно же делайте как Вам удобней, в любом случае видео полезные и в целом всё понятно пока что.

По поводу файлов. Как я уже говорил, у меня офис стоит 2010. Надстройки пока еще я не искал и не устанавливал. С файлами у меня ситуация следующая, они открываются. Но по файлам ко второму видео если говорить, то когда я их открываю, у меня просто пустой белый лист:
привязанность 2015-05-17_22-28_Microsoft Excel.png

Ну а по файлу к третьему видео, ситуация следующая:

привязанность 2015-05-17_22-26_Microsoft Excel.png

Я так понимаю, что всё это связано с тем, что у меня не установлены надстройки.

Благодарю за отзыв!
Скорее всего данный формат видео подходит только для демонстрации возможностей, когда можно быстро увидеть конечный результат. А чтобы вникнуть в суть - нужны объяснения. В любом случае, отзыв постараюсь учесть.

Что касается надстроек, то они должны быть установлены. А еще, когда мы загружаем данные во внутреннюю модель, то они не хранятся на рабочем листе. И увидеть их можно только используя надстройку PowerPivot.

Что касается ошибки, то причина или в отсутствии надстроек, или в несовместимости 2010-й и 2013-й версий.
Я уже говорил, но повторюсь: для того, чтобы установить PowerQuery необходим Windows 7 и выше.

Ну и из новостей: как я и предполагал, в 2016 Excel будут встроены и активированы обе эти надстройки. Так что есть смысл использовать эту технологию хотя бы потому, что ее поддержка и интеграция с другими продуктами пока будет только расти.

#145 OFFLINE   Vladislove

    Специалист


  • Участник II
  • ПипПипПип
  • 165 сообщения
53
  • МестоположениеРоссия

Добавлено 17 May 2015 - 20:31

Сообщенияtester.nt, on 17 May 2015 - 20:23, сказал:

Что касается надстроек, то они должны быть установлены. А еще, когда мы загружаем данные во внутреннюю модель, то они не хранятся на рабочем листе. И увидеть их можно только используя надстройку PowerPivot.

Что касается ошибки, то причина или в отсутствии надстроек, или в несовместимости 2010-й и 2013-й версий.
Я уже говорил, но повторюсь: для того, чтобы установить PowerQuery необходим Windows 7 и выше.

Ну и из новостей: как я и предполагал, в 2016 Excel будут встроены и активированы обе эти надстройки. Так что есть смысл использовать эту технологию хотя бы потому, что ее поддержка и интеграция с другими продуктами пока будет только расти.

Скорее всего причина всё же в отсутствии в моей версии надстроек....в ближайшее время займусь этим вопросом)
А по поводу эксель 2016 не знал что намечается.....не знаете, когда примерно релиз намечается?

#146 OFFLINE   Bambuk

    Специалист


  • mp
  • 6322 сообщения
602

Добавлено 17 May 2015 - 20:46

СообщенияVladislove, on 17 May 2015 - 20:31, сказал:

Скорее всего причина всё же в отсутствии в моей версии надстроек....в ближайшее время займусь этим вопросом)
А по поводу эксель 2016 не знал что намечается.....не знаете, когда примерно релиз намечается?
Не скорее всего, а так оно и есть---у Вас на скринах этих вкладок на ленте нет, когда программы установлены они автоматически появляются хоть на пустом листе не сохранённой книги и их по идее и подключать-то не надо, если проги установлены а на листе их нет, то можно попробовать посмотреть надстройки компонентных объектов (СОМ) там если в окне есть эти две проги, то они должны быть выбраны галочками (надстройки СОМ находятся на вкладке разработчик).

#147 OFFLINE   Vladislove

    Специалист


  • Участник II
  • ПипПипПип
  • 165 сообщения
53
  • МестоположениеРоссия

Добавлено 17 May 2015 - 21:23

СообщенияBambuk, on 17 May 2015 - 19:29, сказал:

Вчера скачал все надстройки для екселя10
А где Вы скачали надстройки, не могли бы сказать?

#148 OFFLINE   Bambuk

    Специалист


  • mp
  • 6322 сообщения
602

Добавлено 18 May 2015 - 07:45

www.microsoft.com/ru-RU/download/details.aspx?id=7609 PowerPivot для Excel 2010


Внимание! При выборочной установке Microsoft Office 2010 надо установить и Excel 2010, и общие компоненты Office, чтобы использовать PowerPivot для Excel.
При установке 32-разрядной версии Excel следует использовать 32-разрядную версию PowerPivot. При установке 64-разрядной версии Excel следует использовать 64-разрядную версию PowerPivot.


После установки PowerPivot для Microsoft® Excel можно осуществлять доступ к документам из окна PowerPivot, нажимая кнопку «Справка» или клавишу F1. Рекомендуется использовать самую свежую версию документации, доступную на веб-сайте Справка в Интернете по PowerPivot для Microsoft® Excel. Дополнительные статьи, блоги и другое содержимое, созданное пользователями, можно найти на Странице PowerPivot TechNet.


www.microsoft.com/ru-ru/download/confirmation.aspx?id=39379 Microsoft Power Query для Excel

Отредактировано Bambuk, 18 May 2015 - 07:46.


#149 OFFLINE   tiltownsme

    Новичок


  • Участник
  • Пип
  • 6 сообщения
0

Добавлено 18 May 2015 - 09:44

Приветствую вех форумчан,и выражаю вам благодарность за интересную информацию. В особенности ТС и andre48..
Прочитал всю ветку. Сразу скажу, что я не являюсь ни профессиональным капером, ни программистом(четыре месяца консультируюсь и перенимаю опыт от своего друга капера параллельно проставляя его ставки, но со следующего сезона планирую подключиться к ставкам полноценно.), поэтому мое мнение может показаться сырым, но хотелось бы высказаться и задать пару вопросов.


Подход моего друга заключается в непрерывном просмотре матчей в определенных лигах, в целях выявления актуальной формы, тренерской установки и тд. Так же он анализирует трансферы, травмы и другие игровые и стратегические показатели, выявляя недооцененные команды или матчи. Хотя он и показал очень хороший РОИ в текущем сезоне, в его подходе как мне видится не хватает статистический подоплеки, которая дала бы большой толчок в его развитии. В чем бы я и хотел со своей стороны разобраться.

Сразу несколько вопросов к tester.nt

В 26 посте ты приводил пример рабочего листа. Насколько я понимаю, у тебя в нем указана(по оси у) гипотетическая прибыль, при размещении на конкретный исход. В чем она измеряется? В единицах флетовых ставок? Насколько я понимаю там уже все с коэффициентом от бк? То есть если мы ставили все матчи на победу Ювентуса, то мы бы получили около 16 флетовых ставок за 3 сезона? Или я что-то перепутал.

Какие кэфы учитывается в твоей статистике? Которые выкатил букмекер или к которым пришел рынок к началу матча? Кстати по сервису кэфов мне больше нравится www.oddsportal.com/, вроде больший выбор БК и линий. Можно ли к примеру подключить в БД оба вида кэфов? Существенная часть прибыли капера, насколько я понимаю, идет именно на своевременном заборе недооценённых матчей, которые потом выравниваются рынком, и посчитать ожидаемый валуй можно только по первому кэфу.

Вообще можно как-то с тобой посотрудничать? За лето хотели бы обкатать несколько моделей по предыдущим сезонам, но опыта в программировании нет, может и мы могли бы чем-то быть тебе полезны.

Отредактировано tiltownsme, 18 May 2015 - 09:49.


#150 OFFLINE   tiltownsme

    Новичок


  • Участник
  • Пип
  • 6 сообщения
0

Добавлено 18 May 2015 - 14:14

Bambuk
Кстати по поводу разрядности, я так и не нашел 32х разрядный PowerPivot. Пришлось ставить 2013тый эксель, со встроенным. Вдруг у кого такая же проблема будет.

Отредактировано tiltownsme, 18 May 2015 - 14:14.


#151 OFFLINE   Vladislove

    Специалист


  • Участник II
  • ПипПипПип
  • 165 сообщения
53
  • МестоположениеРоссия

Добавлено 18 May 2015 - 14:40

Сообщенияtiltownsme, on 18 May 2015 - 14:14, сказал:

Bambuk
Кстати по поводу разрядности, я так и не нашел 32х разрядный PowerPivot. Пришлось ставить 2013тый эксель, со встроенным. Вдруг у кого такая же проблема будет.

Прикрепленный файл  2015-05-18_17-39_PowerPivot.png   31.91K   6 Количество загрузок

#152 OFFLINE   tester.nt

    Специалист


  • Участник II
  • ПипПипПип
  • 192 сообщения
61

Добавлено 18 May 2015 - 16:05

Сообщенияtiltownsme, on 18 May 2015 - 14:14, сказал:

Bambuk
Кстати по поводу разрядности, я так и не нашел 32х разрядный PowerPivot. Пришлось ставить 2013тый эксель, со встроенным. Вдруг у кого такая же проблема будет.

Название 32-х разрядной версии заканчивается символами "х86".

Я еще оставлю ссылки на англоязычную версию сайта.
PowerQuery
PowerPivot (ver. 10.50.4000.0)
PowerPivot (ver. 11.0.3129.0)

Не знаю, чем отличаются эти две версии PowerPivot, но оказывается, такие есть.

#153 OFFLINE   tester.nt

    Специалист


  • Участник II
  • ПипПипПип
  • 192 сообщения
61

Добавлено 18 May 2015 - 16:45

Сообщенияtiltownsme, on 18 May 2015 - 09:44, сказал:

Приветствую вех форумчан,и выражаю вам благодарность за интересную информацию. В особенности ТС и andre48..
Прочитал всю ветку. Сразу скажу, что я не являюсь ни профессиональным капером, ни программистом(четыре месяца консультируюсь и перенимаю опыт от своего друга капера параллельно проставляя его ставки, но со следующего сезона планирую подключиться к ставкам полноценно.), поэтому мое мнение может показаться сырым, но хотелось бы высказаться и задать пару вопросов.

Подход моего друга заключается в непрерывном просмотре матчей в определенных лигах, в целях выявления актуальной формы, тренерской установки и тд. Так же он анализирует трансферы, травмы и другие игровые и стратегические показатели, выявляя недооцененные команды или матчи. Хотя он и показал очень хороший РОИ в текущем сезоне, в его подходе как мне видится не хватает статистический подоплеки, которая дала бы большой толчок в его развитии. В чем бы я и хотел со своей стороны разобраться.

Есть такие интересные коммерческие организации (smartodds, football radar и др.), которые занимаются футбольной аналитикой. Мне их модель организации работы очень нравится. Они сумели соединить разнокачественные знания в одном процессе. Там и математики, и программисты, и статисты. И есть там такая интересная вакансия, которая называется Watcher. Это люди, в обязанности которых входит просмотр всех матчей закрепленного за ними чемпионата и выслеживания всех нюансов которые касаются тех же травм, трансферов, финансового состояния команд, ситуации с тренером и т.д. За это им платят не малые деньги. А если за это платят деньги, значит эта информация при правильной обработке владеет определенной ценностью.

Это то что пришло на ум, прочитав про подход вашего друга.

Сообщенияtiltownsme, on 18 May 2015 - 09:44, сказал:

Сразу несколько вопросов к tester.nt

В 26 посте ты приводил пример рабочего листа. Насколько я понимаю, у тебя в нем указана(по оси у) гипотетическая прибыль, при размещении на конкретный исход. В чем она измеряется? В единицах флетовых ставок? Насколько я понимаю там уже все с коэффициентом от бк? То есть если мы ставили все матчи на победу Ювентуса, то мы бы получили около 16 флетовых ставок за 3 сезона? Или я что-то перепутал.

Какие кэфы учитывается в твоей статистике? Которые выкатил букмекер или к которым пришел рынок к началу матча? Кстати по сервису кэфов мне больше нравится www.oddsportal.com/, вроде больший выбор БК и линий. Можно ли к примеру подключить в БД оба вида кэфов? Существенная часть прибыли капера, насколько я понимаю, идет именно на своевременном заборе недооценённых матчей, которые потом выравниваются рынком, и посчитать ожидаемый валуй можно только по первому кэфу.

Верно, прибыль измеряется в единицах флетовых ставок. И дальше по вопросам до конца абзаца все утвердительно. Это самый простой пример. Если наложить на эти графики какую-то финансовую стратегию, то цифры будут другие.

Что касается коэффициентов. Все примеры я показываю на основе базы, которая лежит в открытом доступе на football-data.co.uk. С 2005 года коэффициенты в эту базу берутся с BetBrain.com. В базе есть кэфы от нескольких контор, а также средние и максимальные. Считать можно по любым. Но в данном примере (да и в других) я использую средние. Коэффициенты собираются 2 раза в неделю. Цитата с сайта.

Цитата

Betting odds for weekend games are collected Friday afternoons, and on Tuesday afternoons for midweek games.
В БД можно использовать неограниченное число коэффициентов от разных контор. Например, в базе кроме средних и максимальных есть больше 10 кэфов из основных мировых контор. Правда, только на 1Х2. А при желании, можно и других насобирать.

Сообщенияtiltownsme, on 18 May 2015 - 09:44, сказал:

Вообще можно как-то с тобой посотрудничать? За лето хотели бы обкатать несколько моделей по предыдущим сезонам, но опыта в программировании нет, может и мы могли бы чем-то быть тебе полезны.

Я открыт для сотрудничества и буду рад быть полезным. В профиле есть мой мейл, пишите туда. А там решим как будет удобнее общаться.

#154 OFFLINE   senyai7

    Новичок


  • Участник
  • Пип
  • 29 сообщения
0

Добавлено 11 June 2015 - 17:48

Всем привет ! ТС спасибо за тему !

Помогите пожалуйста разобраться с проблемой , скачиваю фаил как автор темы в первом видео в начале , в итоге выходит такая хрень в excel
Div,Date,HomeTeam,AwayTeam,FTHG,FTAG,FTR,HTHG,HTAG,HTR,Refe....

#155 OFFLINE   tester.nt

    Специалист


  • Участник II
  • ПипПипПип
  • 192 сообщения
61

Добавлено 11 June 2015 - 18:47

Сообщенияsenyai7, on 11 June 2015 - 17:48, сказал:

Всем привет ! ТС спасибо за тему !

Помогите пожалуйста разобраться с проблемой , скачиваю фаил как автор темы в первом видео в начале , в итоге выходит такая хрень в excel
Div,Date,HomeTeam,AwayTeam,FTHG,FTAG,FTR,HTHG,HTAG,HTR,Referee,HS,AS,HST,AST,HF,AF,HC,AC,HY,AY,HR,AR,B365H,B365D,B365A,BWH,
BWD,BWA,IWH,IWD,IWA,LBH,LBD,LBA,PSH,PSD,PSA,WHH,WHD,WHA,SJH,SJD,SJA,VCH,VCD,VCA,Bb1X2,BbMxH,BbAvH,BbMxD,BbAvD,BbMxA,
BbAvA,BbOU,BbMx>2.5,BbAv>2.5,BbMx<2.5,BbAv<2.5,BbAH,BbAHh,BbMxAHH,BbAvAHH,BbMxAHA,BbAvAHA E0,17/08/13,Arsenal,Aston Villa,1,3,A,1,1,D,A Taylor,16,9,4,4,15,18,4,3,4,5,1,0,1.44,4.75,8,1.36,5,7.75,1.37,4.6,7.5,1.4,4.5,7.5,1.41,5.2,8.3,1.36,4.8,8.5,1.4,4.5,7.5,1.44,4.8,7.5,33,1.44,1.4,5.2,
4.68,9.7,7.87,22,1.62,1.56,2.56,2.37,,,,,,

Как загрузить csv-файл в ексель

Spoiler

Отредактировано tester.nt, 11 June 2015 - 18:49.


#156 OFFLINE   senyai7

    Новичок


  • Участник
  • Пип
  • 29 сообщения
0

Добавлено 12 June 2015 - 09:10

Спасибо !

#157 OFFLINE   ScarferUK

    Новичок


  • Участник
  • Пип
  • 19 сообщения
1

Добавлено 18 June 2015 - 21:48

Работаю с БД на профессиональном уровне, готов спроектировать ее, имеются наброски... Только нет времени искать данные для нее, надо писать парсеры....
С моей стороны могу спроектировать, и написать скрипты которые заливают в нее данные с csv файлов.
Но сами данные искать по сайтам и писать парсеры времени нет.

Кому интересно, пишите :)

Отредактировано ScarferUK, 18 June 2015 - 21:53.


#158 OFFLINE   tester.nt

    Специалист


  • Участник II
  • ПипПипПип
  • 192 сообщения
61

Добавлено 18 June 2015 - 22:16

СообщенияScarferUK, on 18 June 2015 - 21:48, сказал:

Работаю с БД на профессиональном уровне, готов спроектировать ее, имеются наброски... Только нет времени искать данные для нее, надо писать парсеры....
С моей стороны могу спроектировать, и написать скрипты которые заливают в нее данные с csv файлов.
Но сами данные искать по сайтам и писать парсеры времени нет.

Кому интересно, пишите :)

Интересно!
Данные смогу постепенно собрать. Уже есть несколько парсеров и некоторые данные. За всем также не успеваю угнаться. БД никогда не проектировал, поэтому использовал простейшие связи. Поэтому, если готовы принять участие, то можем разделить усилия: я займусь более концентрировано сбором данных, а Вы организацией их хранения.

#159 OFFLINE   ScarferUK

    Новичок


  • Участник
  • Пип
  • 19 сообщения
1

Добавлено 19 June 2015 - 08:04

Сообщенияtester.nt, on 18 June 2015 - 22:16, сказал:

Интересно!
Данные смогу постепенно собрать. Уже есть несколько парсеров и некоторые данные. За всем также не успеваю угнаться. БД никогда не проектировал, поэтому использовал простейшие связи. Поэтому, если готовы принять участие, то можем разделить усилия: я займусь более концентрировано сбором данных, а Вы организацией их хранения.

Я готов этим заняться, но в первую очередь надо решить вопрос.
1. Какая это будет БД, оффлайн или онлайн.
Я например вижу ее онлайн, размещенной на каком-то хостинге.

Ну и следующий, самый главный вопрос, какую именно информацию в ней предстоит хранить. Т.е. выделить сущности.
А там уже займусь ее проектированием.

#160 OFFLINE   sergei7000

    Специалист


  • mp
  • 2043 сообщения
180

Добавлено 19 June 2015 - 08:10

Сообщенияtester.nt, on 18 June 2015 - 22:16, сказал:

Интересно!
Данные смогу постепенно собрать. Уже есть несколько парсеров и некоторые данные. За всем также не успеваю угнаться. БД никогда не проектировал, поэтому использовал простейшие связи. Поэтому, если готовы принять участие, то можем разделить усилия: я займусь более концентрировано сбором данных, а Вы организацией их хранения.

Когда пишут "профессионально" , иногда подразумевают , что это не бесплатно . Сперва надо уточнить это ...

Когда вы соберете БД следующий ваш шаг - это классификация чемпионатов . Есть чемпионаты , где много забивают , есть где мало , есть где так и сяк . Скажем классы А,Б,С ...

Кроме того есть чемпионаты , где мало забивают и играют в ничью , а есть так же чемпионаты где мало забивают но в 50% играют на П1 . Значить следующая классификация это по %-ам игр на П1 , Х , П2 . Например чемпионат где играли на : П1 48-52% , Х 22-25% ,П2 22-27% относится к классу 1 , где играли на : П1 30-35% , Х 27-32% , П2 30-35% класс 2 . где играли на П1 40-45% , Х 22-27% , П2 33-37% класс 3 .

Каждая лига имеет свойство изменяться . Например АПЛ в прошлом сезоне не относится к тому классу к которому принадлежала в этом сезоне . Поэтому после определения границ классов надо определить все лиги , всех сезонов , к какому классу они принадлежали . Например Франция 1 , сезон 98-99 класс С-3 и т.д.

Для чего это нужно ?
Когда будем искать критерии , возможно в некоторых классах , прогоняемый наш критерий будет не работать , а в других классах или классе даст плюс . И мы будем знать , что критерий работает в классе , скажем А-2 . И если у нас есть игра в лиге подобного класса то возможно рационально брать соответственный критерию исход матча .

Например . Критерий который использует просокер на П1 основывается на том , что в игре равных команд часто встреча завершается П1 . Под равными командами у них подразумевают команды , где хозяева дома играют так же как и гости на выезде . Но если взять чемпионат класса 2 , то такие игры заканчиваются чаще в ничью , чем П1 , а в классах 1 и 3 там вероятней П1 . Возможно прогнав по базе мы определим , что данный критерий рациональнее брать П1Ф(0) для класса 1и 3 и 1Х для класса 2 ...