Трохи про статистику

Наша взаимовыгодная связь https://banwar.org/

Для початку, дуже короткий вступний курс в теорію маркетингових і соціологічних досліджень. Все насправді, дуже просто: є брехня, є зухвала брехня і є статистика (М. Твен). Крутіше статистики я можу назвати тільки соціологію, а крутіше соціології - маркетинг. Але і маркетинг, і соціологія застосовують статистичні методи для вирішення своїх завдань.

Насправді, недовіра до статистики відбувається із способів маніпуляції з даними - десь щось пропустили (навмисно або через недогляд), десь щось привнесли зайвого. А десь і просто збрехавши. Зловживання можуть бути і в області інтерпретації даних - досить трошки підправити мінімуми-максимуми на осі гістограми, і вуаля, здається, що відбуваються буквально тектонічні зрушення в досліджуваному параметрі, а насправді незначні зміни:

І все ж маркетингово-соціологічні дослідження необхідні, інакше звідки б ми отримували чарівний пендаль мотивацію для розвитку компанії? Так званий бенчмаркінг це чудовий стимул, бо всі знають, що сусідній ряд їде завжди швидше, сусідня черга рухається ефективніше, а у сусіда морква он яка вимахнула. Інше питання, як, що і навіщо нам порівнювати, щоб користь від порівняння все ж з'явилася.

Маркетинг-соціологи знають безліч способів досліджень зовнішнього середовища. Ось невелика їх частина:

• інтерв'ювання;
• анкетування;
• Спостереження невключенное і включене;
• Контент-аналіз;
• Соціологічний та соціально-психологічний експеримент;
• Соціопсіхолінгвістіческіе методи;
• Вивчення статистичних даних;
• Соцаргументація журналістського тексту.

Допитливих відправляю до підручників, а ми займемося "вивченням статистичних даних".

І відразу постає питання, а де взяти дані? Якщо за власною абонентській базі можна так-сяк (у кого-то зле, у кого-то бідно, а десь є і добре поставлені процеси) виводити статистику по приросту / відтоку і тим паче за отриманими грошей, то де взяти стату по конкурентам? Мабуть у всіх власні дані загріфовани "Для службового користування". Чи не підеш же до конкурента просити цифри - не дадуть все одно.

На допомогу приходять різні аналітичні та рейтингові агентства різного ступеня безглуздості. Найбільш безглуздими з яких можу назвати " ТАСС-Телеком "," аналітичні рейтинги ", Які просто блищать перлами, термінологічної мішаниною і порівнянням теплого з круглим. Не буду заглиблюватися в стьоб Він наругу - просто ось так вийшло. Тим більше що новинна стрічка у даного агентства досить непогана і досить оперативна. А рейтинги і гірше бувають -" ТОП-8 Катеринбурзьких провайдерів "Це треба було постаратися придумати.

Для того щоб хоч якось опиратися на звіти аналітичних агентств, потрібно мати певний рівень довіри до них. Незаангажованість, професіоналізм, потенція отримувати дані з різних джерел, а потім робити правильні висновки - все це речі суб'єктивні і піддаються теж тільки суб'єктивній оцінці. Я провів експрес-опитування в Фейсбуці у відповідному співтоваристві на предмет довіри до різних аналітичним агентствам і отримав ось такі результати:

В опитуванні брали участь люди, так чи інакше пов'язані з галузевою аналітикою (хтось, можливо, побачить себе або знайомих). Інтерпретувати результати в даному випадку, теж є суб'єктивним заняттям, і я цього робити не буду. Що вийшло, то вийшло.

Проблеми "досліджень" і "рейтингів" - це методологія і джерела даних. Методологія іноді буває досить витіювата: "індекси", порівняння з виручки і абонентам, порівняння з "фізичним" і "юридичним особам". А дані для "рейтингів" можуть братися зовсім стохастичні, самі "достовірні" з яких запит бухгалтерського балансу (баланс будь-якої контори можна запросити в Росстат за невелику грошики) і віялова розсилка анкет для заповнення власне операторами. Хто не заповнив - в рейтинг не потрапив. А потім зі шматочків даних анкет і бухзвіту намагаються висмоктати "висновки" типу "Связьтранснефть", "МегаПейдж" і "Телеком-експрес" - компанії з найбільш високими темпами приросту виручки: тисячі сорок вісім%, 364% і 338%.

Крім того, такі "дослідження" не самі оперативні. Я б навіть сказав, безглуздо затягнуті. Просто тому, що бухзвітність в Росстат за підсумками року здається до травня місяця наступного, а в доступ у не найшвидшого державного статистичного бюро звіти потрапляють взагалі в третьому кварталі. До цього часу хотілося б бачити щось більш відповідне поточної ситуації бо "час - гроші".

А ще, федеральні аналітики, як правило, оперують цифрами федерального ж масштабу. І їх можна зрозуміти. По-перше, звіти можуть вийти досить товсті. По-друге, для товстих звітів потрібно і роботу провести чималу. По-третє, оплачувану попит є у федерального "крупняка", а на регіональному рівні і попит менше і ціни нижчі.

Що ж робити? Задовольнятися тим, що дають? На відміну від телебачення , Статистика інтернет чітко і конкретно пов'язана з комп'ютерами та обчислювальними потужностями. І тому, порахувати кількість інтернет-користувачів не представляє нерозв'язною важкої завдання.

Я пропоную простий і цілком собі ефективний спосіб отримувати оперативні зведення з ринку цілком науковим способом. А саме - знімати інформацію, аналізувати її і робити висновки за допомогою доступних і безкоштовних інструментів веб-статистики. Інтернет-компанії давно цим займаються, бо для них кожен відвідувач сторінки це гроші, слава і народне покликання. Є маса статистичних сервісів, а деякі з них навіть навчилися рахувати відвідувачів по провайдерам. І досить просто - викачуючи і систематизуючи виділені IP-адреси з бази RIPE. І немає тут ніякого хай-теку вже кілька років як.

Сервісів інтернет-статистики досить багато. Крім того, є монстри статистики (за сумісництвом ще й лідери ринку) типу Яндекса і Google. У даній статті (а я не ставлю завдань порахувати щось конкретно) я продемонструю можливості двох систем збору інтернет-статистики - LiveInternet і OpenStat . Просто тому, що у них як раз зроблений розбір по провайдерам, а власне статистика відкрита і загальнодоступна. А ще, я буду сильно здивований, якщо читачі - професіонали інтернет-провайдингу: а) не чули про цих сервісах і їх можливості; і б) не використовують ці сервіси і / або щось більш досконале / підходяще.

Для того щоб все ж інформація була більш повна, назву ще кілька інтернет-лічильників, які вміють збирати стату по російським користувачам:

• Яндекс.Метрика - має невидимий відвідувачеві сторінки лічильник. Звіти оновлюються кожні 5 хвилин. Аналізує рекламний трафік, конверсії, будує інтерактивні карти шляхів користувачів по сайту. Доступні звіти за статтю та віком відвідувачів сайту. Надає безкоштовний моніторинг доступності сайту, з можливістю відправлення повідомлень по SMS. Всі звіти доступні за довільний період.
• Google Analytics - проводить повний аналіз аудиторії та міжсайтових переходів. Теж невидимий і теж багато чого вміє, подекуди перевершує Яндекс, подекуди поступається.
• Рамблер історично вважається авторитетним і популярним лічильником і рейтинговою системою в рунеті. Зараз у них є сервіс під назвою RuMetrika , Де можна щось і порахувати.
• Spylog - помер. Тепер це OpenStat .
• Лічильник компанії LiveInternet.ru вельми популярний, надає всілякі види звітів. Переведений на 16 мов. Так само, як і SpyLog, надає можливість так званої глобальної статистики - статистики всього Рунета в відкритому доступі.
• Система Інтернет-статистики HotLog надає лічильник відвідувань, що вважається зручним і простим, одночасно надаючи велику кількість статистичних звітів, необхідних для власника сайту і маркетолога. Система постійно розвивається і доповнюється невеликими сервісами, наприклад, моніторинг сайту. Докладні статистичні звіти генеруються за добу.
• Рейтинг Mail.Ru - лічильник від Mail.Ru Group, що надає аналітику по відвідуваності сайтів. Доступні дані про соціально-демографічний та географічний розподіл відвідувачів сайту. Дозволяє відстежувати динаміку відвідуваності, загальну статистику, статистику по результатам пошуку з різних країн, по переходах з найпопулярніших пошукових систем. Звіти можна переглядати в розрізі місяця, тижня, дня статистика зберігається за весь час, починаючи з установки лічильника на сайт. Кривий, як і всі у Майл.ру.

Коли говорять про тенденції в Рунеті - використання різних браузерів, різних ОС, відсотках ринку тієї чи іншої пошукової системи, як правило, посилаються саме на глобальну статистику LiveInternet.ru. Статистика доступна за адресою http://www.liveinternet.ru/stat/ru - заходимо, вивчаємо, натискаємо посилання, розважаємося.

Ось зріз по добовій відвідуваності всієї Рунета за останній місяць:

Всього виходить, Рунет відвідує близько 95 млн. Чоловік щодоби. В он-лайні в середньому одночасно перебуває 1,6-1,7 млн. Чоловік. До речі 10 грудня зафіксовано своєрідний рекорд - досягнута планка щоденної аудиторії в 100 млн. Чоловік і 1,9 млн. Середнє он-лайн.

Зрозуміло, що 100 млн. Чоловік в Мережу щодня не виходить - насправді, в звіті відображені відвідувачі рунетовського сайтів (з встановленим лічильником LI) і з інших країн. Чітко помітна "пила" вихідних днів - кілька людей заходять в Інтернет з роботи, і за підсумком виходить, що деяких вважає, наприклад, два рази. Різниця між робочим і вихідним днем ​​становить в середньому 10-12%.

Ось щотижневий зріз з урахуванням тільки російських регіонів:

Помітив зростання аудиторії за півроку на приблизно 24,2% (з 50 млн. До 62,12 млн.). Цю цифру можна ставити в актив всім причетним - від провайдерів, до продавців комп'ютерної техніки. Самі інтернетизовані регіони: Москва (хто б сумнівався) - 26.5% всієї російської аудиторії, Пітер - 10,2%, Краснодар (!) - 5,6%, Єкатеринбург - 5% і замикає п'ятірку Новосибірськ - 3,9% всього Рунета. На останньому місці, до речі, Анадир, де Інтернет все ж є - цілих 3312 чоловік.

Ось зріз щомісячний, з розбивкою на призначені для користувача операційні системи:

Тут можна зробити висновок, що аудиторія Рунета (знову з іноземцями) за період з червня 2010 по грудень 2012 фактично потроїлася. Ще видно "хрест Windows" - кількість встановлених "сімок" перевищило XP десь навесні 2012 року.

Холівара заради, приберу "всього" і "windows", зате поставлю Symbian і iOS для всіх яблучних пристроїв:

Видно, що Андроїд лідирує за кількістю заходів в Мережу ще з 2011 року. Але ось що сталося з Symbian в листопаді 2012 - я не розумію. Скачок в більш ніж два рази можна пояснити тільки системним збоєм власне системи статистики і це проблема для "серйозних досліджень".

Ще одне розчарування підстерегли мене, коли почав розглядати звіти по цілі даної статті - статистику по провайдерам.

Виявилося що:

1. LI заважає в купу і мобільних, і фіксованих відвідувачів.
2. Ростелеком досі існує у вигляді розрізнених МРК. І взагалі, здається, давно не оновлювали бази з RIPE. Є пояснення по угрупованні провайдерів , Але угруповання ця дуже і дуже застаріла.
3. Кількість різних провайдерів, що враховуються LI - 31 сторінка з 100 на кожній. Тобто більше 3 тисяч. Немає такої кількості провайдерів в країні, навіть разом з СНД. А це знову означає, що в угрупованнях щось наплутано і є "мертві". Навіщо вони в звітах? І хто б міг подумати, що UGMK Telekom LLC потрібно шукати під секретним псевдонімом ut-svr? Причому, саме так, як написано - цілком.
4. При цьому деяких провайдерів я просто не знайшов, ні по торговим маркам, ні за усталеними назвами, ні по юридичних особах. І навіть по масці RIPE не знайшов. М.б. тому що фільтри всупереч здоровому глузду чутливі до регістру?
5. Немає можливості робити фільтри по регіонах.

У кого є ФБ, пропоную влаштувати Герману Клименко (Батьку-засновнику LI) флеш-моб і просити (або вимагати?) Допив сервіс до можливості використовувати в реальному житті. І щоб не ганьбився.

І остання ложка дьогтю для LI - пам'ятайте, я писав, що уявлення даних грає значення? Ну, коли змінюється діапазон між мінімумом і максимумом на осі ординат і здається, що на графіку зображені гори? Ось вам приклад, як це зробив LI:

На графіку здається, що абонентська база Ер-Телеком просто ракетою злітає в захмарні дали. А насправді, за півроку кількість користувачів зросла з 1,355 млн. До 2,085 - або на 54%. Нехай це і вражаючий результат, але на графіку здається, що Ер як мінімум удесятерила. Правда є один сумнів - в офіційному прес-релізі ЕТ стверджує, що Дом.ру підключив 5 млн. Абонентів . Але навіть якщо врахувати, що через плутанину в угрупованні за операторам у LI є промахи і навіть якщо прийняти, що абоненти Дом.ру не кожен день входять в Мережу (або відвідують виключно зарубіжні сайти без лічильника LI), а помилка при цьому становить два рази, то все одно я не бачу 5 млн. абонентів. Тим більше що, як правило, абоненти вже не використовують в домашніх умовах тільки один комп'ютер - з'явилося безліч мобільних пристроїв, які вважаються за окремого користувача, але фактично це один абонент.

OpenStat

Цей інтернет-проект статистики та веб-аналітики / умовно / голландської компанії "OpenStat BV", призначений для оцінки відвідуваності веб-сайтів, і багатовимірного аналізу поведінки користувачів.

Система Openstat була запущена в квітні 2010 року на уламках системи SpyLOG, що має десятирічний досвід розробки та реалізації завдань веб-аналізу.

Крім традиційних видів інтернет-статистики, важливих для власників інтернет-проектів, таких як розрахунок конверсії, показників відмов, глибини перегляду, відсотки виходів і тд., Openstat досліджує глобальні тренди розвитку Рунета і його окремих компонентів, займається розробкою сучасних методів категоризації контенту сайтів і груп сайтів.

Особливим своїм достоїнством компанія вважає акцент на тому, що її сервіс не пов'язаний з рекламними мережами, майданчиками, агентствами, медіа холдингами, рекламодавцями чи іншими учасниками рекламного ринку в Інтернеті. Отже, менш схильний до спотворень на користь окремих майданчиків - см. Статистику Мейл.ру.

Глобальні тренди Рунета сервіс демонструє ось на такому розширеному дашборда:

... де видно, що за кількістю місячної аудиторії, врахованої статистикою, сервіс кілька недотягує до LI. Це пов'язано з тим, що лічильники OS встановлені на меншому, ніж у LI, кількості веб-сайтів. Зате власне статистика надана в більш красивому і юзабельном вигляді. Всю статистику можна розглядати з різних зрізах і навіть завантажувати у вигляді Ексель-табличок з метою більш детального розгляду.

Правда, не обходиться і без "косяків":

... видно збої статистики, наприклад, в липні 2012 року . Зубців на початку 2011 і 2012 року схильний вірити - тривалі новорічні канікули, як правило, не додають відвідуваності, а зовсім навіть навпаки.

Зате по операторам зв'язку зроблена цілком хороша придатна статистика і угруповання викликає повагу - групування даних RIPE заняття не для слабаків:

Чітко видно провали в квітні 2012 року у Ростелекома і Ер-Телеком. Не знаю з чим це пов'язано. Швидше за все, з введенням / висновком блоків IP-адрес у провайдерів. Або з тим, що в системі прибрали лічильники якісь великі інтернет-проекти, чомусь полюбилися абонентам Дом.ру і Мегателекома. Або глюки власне сервісу. Далі, для того щоб уникнути таких флуктуацій, будемо дивитися стату на більш перевіреному часовому діапазоні:

По крайніх точках можна обчислити зміну АБ:

• Ростелеком: 1 травня - 3,35 млн. Відвідувачів і 30 листопада - 3,69 млн. Зростання ~ 10%.
• Мегафон: 1 травня - 1,07 млн. Відвідувачів і 30 листопада - 1,25 млн. Зростання ~ 16,8%.
• ЕР-Телеком: 1 травня - 0,89 млн. Відвідувачів і 30 листопада - 1,01 млн. Зростання ~ 13,5%.

Абсолютні цифри вже не такі цікаві, але відносне зростання АБ можна вважати правдоподібним - приблизно так і ріс ринок.

На відміну від LI, OS вміє розрізняти мобільних користувачів і абонентів ШПД:

.. заодно видно, що OpenStat ще не об'єднав МГТС і МТС, Білайн і Корбін. Крім того, в "топ" потрапили оператори СНД - Укртелеком, Казахтелеком, Белтелеком і Київстар.

Частка мобільних користувачів у Ростелекома становить 3%, у Мегафона - 28,5%, у МТС - 42,4%, а Ер-Телеком - 3,9%. Що із загальною картиною світу досить добре корелює - логічно, що у мобільних операторів частка мобільних клієнтів повинна бути вище раз в десять.

Ще раз зазначу, що оскільки наведені цифри не охоплюють весь Рунет, то ми можемо вважати тільки відносні показники. Ми не знаємо, скільки точно Openstat підгорнути з повною аудиторії, але частку можемо обчислити цілком.

Наприклад, порахуємо частку Ростелекома:

• загальне число Користувачів, врахованіх OS за підсумкамі листопада в России, склалось 17,34 млн. Користувачів.
• з табліці вищє, ми знаємо, что 3,4 млн. з них Належить Ростелекому. Потім я виявило, что в групу РТК не внесли ЦТ, НКР і ще ряд провайдерів, куплених Мегателекомом. Загалом, вийшло 3,98 млн. Користувачів і напевно далі в таблиці є ще шматочки великий контори. Нехай для рівного рахунку буде 4 млн.
• таким чином частка РТК становить 23%

Те ж для Ер-Телеком - 5,2%.

Ось що вийшло у мене в підсумку:

Дещо відрізняється від опублікованої по підсумками третього кварталу Ростелекомом картини:

Питання "кому вірити" не ставиться. Бо одна справа враховувати в грошах, інше в абонентах. На мій погляд, і те й інше правильно. Але в залежності від обставин і поставлених завдань.

розрахунковий кейс

Для закріплення пройденого можна порахувати який-небудь реальний кейс, пов'язаний з більшістю відвідувачів ресурсу - спробуємо розрахувати локальну ринкову частку невеликого провайдера.

Наприклад, мені написали колеги з Санкт-Петербурга - невеликий оператор під назвою INFO-LAN (ТОВ "Інформаційна Мережа") з проханням "пропіарити їх компанію".

Що ж. Піарю: Інфо-Лан з 1998 року перевірений оператор зв'язку в Санкт-Петербурзі, забезпечує найшвидший (до 1024 Мбіт / c) безлімітний доступ в Інтернет для своїх абонентів - фізичних осіб і корпоративних клієнтів. Компанія пропонує "якісне та швидке підключення Інтернет та обслуговує наступні райони Санкт-Петербурга: Красносельський район (в т.ч. м Червоне Село і п. Горелово), Невський район, Петродворцовий район (Новий Петергоф, Старий Петергоф, Сьомий мікрорайон, п . Стрельна, м Ломоносов) і ін. ".

Місця, треба сказати, знатні. :)

Спробуємо розрахувати їх ринкову частку і тренд розвитку. Для початку, визначимо диспозицію в Санкт-Петербурзі, який відносно Росії має ось такий тренд зростання (по LI):

За підсумками листопада, місячна аудиторія СПб склав 6,27 млн. Користувачів, збільшившись з літа 2010 року з 2,57 млн. - зростання 143%. Російська аудиторія, до речі, зросла на 166%.

Openstat має кілька більш скромні показники:

Добова аудиторія Пітера складає близько 1,7 млн. Відвідувачів.

Зате ми можемо порахувати кількість користувачів з INFO-LAN. І підійдемо більш ретельно до цього питання. Для початку, визначимо кількість AS в RIPE. Тут мені допоміг, по-перше, форум Інфолана, по-друге, посилання на форум дав колега. Граф зв'язків мереж у досліджуваній компанії наступний:

Тепер ми знаємо автономну систему і, отже, більш точно можемо пошукати в RIPE список належать провайдеру IP-адрес .

Маємо точну назву оператора "Information Network, LLC", бачимо, що у провайдера є одна географічна зона і кількість анонсованого в IPv4 простору в розмірі 6144 IPs. Мережа за останній рік не росла, а навіть зовсім і зменшилася (?).

На жаль, приклад виявився не найвдалішим, бо LI INFOLAN-AS не впізнав. Зовсім. Зате Openstat знає цього провайдера прекрасно:

І стверджує, що в Мережу від даного провайдера входить приблизно 8 тис. Користувачів. А ще прекрасно видно, що змін в абонентській базі за останні півроку практично не було.

Співвідношення між мобільними і "великими" користувачами цілком відповідає фіксованому оператору - 540/8092 = 6,7%.

Ринкове становище на кінець листопада 2012 у Пітері приблизно 0,008 / 1,77 = 0,45% - оператор вельми не великий.

Однак на обличчя падіння ринкової частки - на 1 травня було 0,008 / 1,24 = 0,65%

Тобто можна зробити висновок, що невеликий, але гордий оператор має вельми усталену абонентську базу не більше 6 тис. Абонентів (за анонсованого простору і за вирахуванням мобільних користувачів, які не абоненти, але користувачі). І бізнес досліджуваного провайдера розвивається відстаючими від загальноринкових тенденцій темпами.

Зрозуміло, це тільки приклад. Використовуючи цей нехитрий метод можна "прокачати" інформацію про всі конкурентів, скласти власну конкурентну карту (мабуть, цей майстер-клас я залишу для іншої статті) і регулярно оновлювати дані. З регулярності вже складеться розуміння ринкового оточення, а виходячи з ринкового оточення, можна буде приймати зважені рішення про рекламу, про тарифи, про інших маркетингових діях, які допоможуть зрушити справу з мертвої точки, збільшити продажі і доходи оператора.

Нічого про оператора, який піддався "дослідженню", я до цього дня не знав. Всі мої знання про нього я почерпнув з відкритої статистики та з офіційного сайту компанії. До речі, про Офіційному сайті - тарифи у них дуже цікаві:

... я б навіть сказав, чудові тарифи. На Уралі поки таких немає. Крім того, Інфо-Лан пропонує своїм абонентам кінцеве обладнання - роутери, ресивери цифрового телебачення, Wi-Fi адаптери. Якщо клієнт не хоче брати обладнання у власність - провайдер пропонує оренду. Є ще маса супутніх послуг від монтажу локальних мереж, до установки ОС і налаштування комп'ютерів і мережевого устаткування.

Є можливість оплатити вперед на квартал і навіть рік. Можливо, це зручно. Можливо, що абоненти, щоб зайвий раз не бігати, використовують ці тарифи. Але мій досвід підказує для таких тарифів два підступу: а) абонент через квартал, а тим більше рік, забуває дату наступної оплати. І коли таких абонентів відключають - вони сильно хвилюються і створюють навантаження на СТП; б) При невеликому обсязі платежів (5 тис. абонентів з ARPU ~ 400 руб. створюють грошовий потік в 2 млн.руб. / міс.) і компанійський підході можливо нарватися на касові розриви - гроші отримані ще в першому кварталі, а в четвертому прилетіла необхідність, наприклад, замінити вийшло з ладу обладнання. І грошей до наступного кварталу чекати нізвідки.

Але ідею з річною оплатою вважаю хорошою.

І цифрове телебачення (НЕ кабель) - безкоштовно!

А ще, недавно INFO-LAN встановив промоутерську стоечку в місцевому магазині з Симпатишная дівчиною. Думаю, що тепер клієнтів побільшає:

... фото теж з офіційного сайту.

Добре, що стійка мобільна - таку стійку можна буде переносити в інші точки, де збираються потенційні абоненти компанії. Я б навіть зробив щось на зразок карти переміщення - тиждень-два в одному районі, тиждень в іншому. Через пару місяців повернувся і повторив акції залякування підключення абонентів в місцях їх природного скупчення.

І на закінчення хочу сказати, що дана стаття - теж деякого роду маніпуляція з цифрами. Див. Первісне висловлювання М. Твена:

І традиційний заклик - надсилати цікаві проекти на оборзеваніе. :)