Категорія: Великі Дані та Аналітика

  • У результаті аналізу великих даних у листопаді 2024 року репутація акторського бренду була проаналізована в ..

    У результаті аналізу великих даних у листопаді 2024 року репутація акторського бренду була проаналізована в ..

    Кім Те-рі. Фото Star Today DB
    Кім Те-рі. Фото Star Today DB

    У результаті аналізу великих даних у листопаді 2024 року репутація акторського бренду була проаналізована в порядку: 1 місце, Кім Те Рі 2 місце, Пак Шін Хе 3 місце та Чон Юн Че.

    Дослідницький інститут корпоративної репутації Кореї проіндексував 169 716 715 великих даних про бренди 100 акторів, які знімаються в драмах, фільмах і OTT, починаючи з 27 жовтня 2024 року, вимірявши участь споживачів у бренді, обсяг ЗМІ, обсяг комунікації та обсяг спільноти як алгоритм репутації бренду. Порівняно з 186 335 097 великими даними від брендів акторів у жовтні, це на 8,92% менше.

    Репутація бренду Actor розширила аналіз великих даних про акторів у міру того, як ринок OTT зростав і сфери діяльності акторів розширювалися. Це аналіз великих даних, який об’єднує акторів фільмів і драм, які активно працюють у веб-ЗМІ, а також фільми та радіомовлення.

    Для аналізу репутації бренду актора було проведено аналіз великих даних бренду з індексом участі, індексом медіа, індексом зв’язку та індексом спільноти. Індекс репутації бренду – це індекс, отриманий шляхом вилучення великих даних бренду та аналізу поведінки споживачів за допомогою алгоритму аналізу репутації, класифікуючи їх на цінність участі, комунікаційну цінність, медіа-цінність, суспільну цінність і соціальну цінність.

    Аналіз великих даних про бренди може виміряти позитивні оцінки брендів, медіа-джерел та інтересів, інтерес споживачів і комунікацію, розповсюдження спільноти щодо проблем, а також реакцію та популярність вмісту.

    Кім Те Рі, Пак Шін Хе, Чон Ен Че, Чон Хе Ін, Еом Те Гу, Лі Се Ён, Сон Син Хон, Ча Син Вон, Лі Сун Чже, Шін Ін Ин, Кім Нам Гіл, Ву До Хван, Сойон Кім, Рю Син Рьон, Ма Донг Сок, Джі Чанг Ук, Гонг Ю, Ко Юн Чжон, Шін Хе Сон, Чхе Вон Бін, Лі Джин Ук, Йон У Чжин, Ю Хе Чжин, Лі Ха Ні, Лі Чон Чже, Сон Сок Гу, Хван Ін Йоп, Сон Чжун, Го Су та Кім Чже Йон потрапили в рейтинг

    Бренд Kim Tae-ri, який посів перше місце в репутації бренду актора, був проаналізований як 8 274 222 з індексом участі 2 454 741, медіа індексом 1 466 499, комунікаційним індексом 2 373 947, індексом спільноти 1 979 035.

    На другому місці бренд Пак Шін Хе був проаналізований на 5 610 087 як індекс участі 1 395 632 індекс ЗМІ 1 439 879 індекс комунікації 1 310 507 індекс спільноти 1 464 069.

    На третьому місці бренд Jung Eun-chae був проаналізований з індексом репутації бренду 4 782 231, з індексом участі 1 470 457, медіа-індексом 1 473 014, комунікаційним індексом 855 459, індексом спільноти 983 301.

    Бренд Jung Hae-in посів четверте місце з індексом репутації бренду 3 963 875, індексом участі 818 849, медіа-індексом 823 474, комунікаційним індексом 1 063 990, індексом спільноти 1 257 562.

    На п’ятому місці бренд Um Tae-gu був проаналізований на рівні 3 785 075 з індексом участі 994 534, індексом медіа 736 870, індексом комунікації 1 058 458, індексом спільноти 995 212.

    Koo Chang-hwan, директор Корейського інституту дослідження корпоративної репутації, сказав: «У результаті аналізу репутації бренду акторів у листопаді 2024 року бренд Kim Tae-ri посів перше місце. Аналізуючи категорію брендів акторів, він знизився на 8,92% порівняно з до 186 335 097 акторських брендів у жовтні. Згідно з детальним аналізом споживання бренду впало на 12,35%. випуски впали на 9,39%, комунікація бренду впала на 10,08%, а поширення бренду впало на 4,64%».

    «Бренд Kim Tae-ri, який продемонстрував сильну енергію в останньому році, був проаналізований як бренд № 1. Бренд Park Shin-hye, який змусив споживачів зануритися в суддів з пекла, посів друге місце, а Jung Eun-chae Бренд, який продемонстрував нейтральний шарм у пенсійному віці, посів третє місце», – проаналізували в бренді.

    З 28 жовтня 2024 року по 28 листопада 2024 року це опитування про репутацію акторського бренду проводили Кім Те Рі, Пак Шін Хе, Чон Ен Че, Чон Хе Ін, Ум Те Гу, Лі Се Ён, Сон Син Хон, Ча Син Вон, Лі Сун Чже, Шін Ін Юн, Кім Нам Гіл, Ву До Хван, Сойон Кім, Рю Син Рьон, Ма Донг Сок, Джі Чан Ук, Гон Ю, Ко Юн Чжон, Шін Хе Сон, Чхе Вон Бін, Лі Джин Ук, Йон У Джин, Ю Хе Чжин, Лі Ха Ні, Лі Чон Чже, Сон Сок Гу, Хван Ін Лі Со Чжин, Кім Чон Хен, Кім Хе Су, Кан Дон Вон, Чон У Ха, Лі Чон Сок, Лі Дон Ук, Кім Джи Ён, Чан Дон Ган, Кім Йон Ган, Чон У, Чо Чон Сок, Пак Со Джун, Хюнбін , Кім У Бін, Кім Сон Гюн, Чо Син У, Хан Чхе Ён, Лі Су Кюн, Нам Юн Су, Ро Чже Вон, Лім Сі Ван, Ха Юн Кюн, Пак Джи Йон, Кім Сон Ён, Юн Ге Сан, Лі Хак Джу, Кім Донг Ук, Джін Сон Гю, Пак Джі Хван, Джо У Джин

  • Багаторічна база даних розумних лічильників на рівні кампусу

    Багаторічна база даних розумних лічильників на рівні кампусу

    По-перше, ми визначили статус усіх лічильників, щоб гарантувати, що ті, у яких є проблеми, були виключені з подальшого аналізу та статистики. Рисунок 5 ілюструє різні стани лічильників і відповідні підрахунки. Згідно з метаданими Brick, загалом було зафіксовано 1412 метрів. Однак лише 1394 лічильники мали доступні API для доступу до даних. Деякі з цих API повертали помилки під час доступу, що вказувало на те, що інформація API не підтримувалася належним чином або не оновлювалася, і в цій категорії було 65 лічильників. Крім того, є лічильники, для яких можна отримати звичайний доступ до API, але всі отримані значення даних є нулями. До цієї категорії відносяться 46 метрів. Отже, кількість лічильників, які можна надійно використовувати для аналізу, становить 1283.

    Рис. 5
    малюнок 5

    Статус збору даних лічильника.

    Відсутня ставка

    На рисунку 6 показано відсоток відсутніх точок даних для різних інтервалів вибірки та кварталів з 1 кварталу 2022 року до 2 кварталу 2024 року. На осі ординат наведено інтервали вибірки: 15 хвилин, 30 хвилин, 1 годину та 1 день, а вісь х охоплює різні квартали. Під час розрахунку пропущених показників ми враховували не лише лічильники, відібрані на кожному інтервалі, але й високочастотні лічильники, передискретизовані до нижчих частот. Наприклад, 15-хвилинний інтервал включає всі 15-хвилинні лічильники, 30-хвилинний інтервал включає всі 30-хвилинні лічильники плюс 15-хвилинні лічильники, оновлені до 30 хвилин, і так далі.

    Мал. 6
    малюнок 6

    Відсутні показники в даних електролічильника в різні періоди та квартали вибірки.

    15-хвилинний інтервал показує найвищі показники пропусків, коливаючись від 23,467% до 52,417%. Пік припадає на четвертий квартал 2022 року, що вказує на проблеми зі збором даних із такою деталізацією протягом цього періоду. У міру збільшення інтервалу вибірки кількість пропущених даних зменшується. 30-хвилинний інтервал коливається від 18,548% до 36,680%, 1-годинний інтервал від 13,988% до 29,656%, а 1-денний інтервал від 3,377% до 13,584%. Ця тенденція підкреслює труднощі у підтримці повних даних із вищою тимчасовою роздільною здатністю. Кілька причин можуть пояснити ці відсутні ставки. Вища частота збору даних (15 і 30 хвилин) може стикатися з технічними проблемами, такими як несправність датчика або помилки передачі даних. Ці проблеми менш виражені при збиранні з меншою частотою (1 година та 1 день), де передача та зберігання даних легші. Незважаючи на ці відсутні показники, дані зберігають значну цінність. Нижчі показники пропуску з інтервалами в 1 годину та 1 день все ще забезпечують повне уявлення про довгострокові тенденції та закономірності. Крім того, методи імпутації даних можуть пом’якшити вплив відсутніх значень, гарантуючи, що набір даних залишається надійним для аналізу. Крім того, тенденція до зменшення кількості пропущених даних з часом свідчить про вдосконалення процесів збору даних, що відображає зростаючу надійність набору даних.

    Для подальшого з’ясування ситуації з відсутніми даними ми провели щогодинний аналіз тарифів за відсутністю для лічильників у кожній будівлі. На малюнку 7 представлено відсоток відсутніх точок даних для різних будівель і кварталів за період з першого кварталу 2022 року до другого кварталу 2024 року. На осі ординат перелічені всі будівлі в кампусі.

    Рис. 7
    фігура 7

    Відсутні тарифи в даних електролічильників у різних будівлях і кварталах.

    Навчальні та дослідницькі будівлі, як-от навчальний корпус, будівля Cheng Yu Tung, завод IASR, бізнес-будівлі LSK і лабораторія NFF2, загалом показують хорошу якість даних у більшості кварталів, причому рівень браку зазвичай коливається від 0% до 20%. У випадку житлових будинків, приміщення для персоналу SSQ APT1-49 і Student Hall GGT демонструють надзвичайну якість даних, причому частота пропусків у більшості кварталів не перевищує 2%. Однак інші житлові будинки демонструють іншу тенденцію: значне збільшення кількості відсутніх, починаючи з третього кварталу 2022 року, яке було частково вирішено до третього кварталу 2023 року. Ця проблема виникла через проблеми зі збором даних під час Covid-19 пандемія. Незважаючи на те, що ці проблеми були частково вирішені після пандемії, подальше усунення неполадок все ще потрібне. Для рекреаційних будівель якість даних корелює з важливістю будівлі. Наприклад, Shaw Auditorium, визначна будівля, де часто проводяться великі вистави, має дуже високу якість даних. Навпаки, менш значні будівлі, такі як критий плавальний басейн і прибережна морська лабораторія, страждають від низької якості даних через недостатнє обслуговування.

    Аналіз невідповідності енергоспоживання

    У деяких зонах є головні лічильники, які вимірюють загальне споживання електроенергії на території, що дозволяє перевірити наші дані. Для цих зон ми порівнюємо значення основних лічильників із значеннями субметрів. Спочатку ми проводимо повторну вибірку всіх лічильників до щоденних даних і розраховуємо щоденне споживання для кожного лічильника. Потім ми порівнюємо загальне споживання основного лічильника із сумарним споживанням додаткових лічильників. Відносна похибка обчислюється шляхом ділення середньої абсолютної похибки (MAE) між ними на більшу з двох середніх. Визначення відносної похибки показано у формулі 1:

    $${\rm{R}}{\rm{e}}{\rm{l}}{\rm{a}}{\rm{t}}{\rm{i}}{\rm{v} }{\rm{e}}\,{\rm{E}}{\rm{r}}{\rm{r}}{\rm{o}}{\rm{r}}=\frac{\ mathop{\sum }\limits_{i=1}^{n}|\mathop{\sum }\limits_{k=1}^{p}{E}_{{\rm{m}}{\rm{a}}{ \rm{i}}{\rm{n}}}(i,k)-\mathop{\sum }\limits_{j=1}^{m}{E}_{sub}(i,j)|}{max\,\left(\frac{1}{n},\mathop{\sum }\limits_ {i=1}^{n},\mathop{\сума }\limits_{k=1}^{p},{E}_{{\rm{m}}{\rm{a}}{\rm{i}}{\rm{n}}},(, i,,,k,),,,\frac{1}{n},\mathop{\sum }\limits_{i=1}^{n},\mathop{\sum }\limits_{j=1}^{m},{E}_{sub},(,i,,,j,)\right)}$$

    (1)

    Де, Eосновний (i,k) споживання електроенергії, зафіксоване k-й головний лічильник на день i, Eсуб (i,j) споживання електроенергії, зафіксоване j-й підметр на день i, п це кількість днів, стор – кількість основних лічильників, а м це кількість субметрів.

    Під час обчислення відносної похибки ми додатково обробили дані, щоб забезпечити перевірку. Пристрої іноді перезапускаються, що спричиняє значні розбіжності в показаннях до та після перезапуску. Ми використали метод прямокутної діаграми, щоб усунути такі викиди, обчисливши квартилі та виключивши точки, які більше ніж у 1,5 рази перевищують інтерквартильний діапазон (IQR) вище третього квартиля або нижче першого квартиля. Крім того, як згадувалося на початку розділу технічної перевірки, деякі лічильники не змогли правильно отримати дані. Таким чином, якщо певні лічильники в межах зони не мають відповідних даних часового ряду, ця зона не буде перевірена. Результати відносної похибки наведено в таблиці 4.

    Таблиця 4 Результати відносної похибки для різних зон.

    Таблиця 4 показує, що значення відносної похибки в різних зонах значно відрізняються в межах від 9,40% до 30,75%. Кілька факторів можуть сприяти цим розбіжностям. Деякі пристрої, ймовірно, не під’єднані до додаткових лічильників, хоча вони все ще записуються основним лічильником, що призводить до можливих розбіжностей, оскільки додаткові лічильники не фіксують все споживання енергії в зоні. Крім того, втрата даних або перерви під час тривалого моніторингу можуть призвести до розбіжностей між показаннями додаткового та основного лічильників. Відмінності в точності лічильників також відіграють роль; сублічильники з нижчою точністю можуть неточно фіксувати невеликі коливання споживання електроенергії, що спричиняє кумулятивні розбіжності. Ці фактори разом, ймовірно, сприяють відносним помилкам.

    Аналіз об'єктів обліку

    У 1412 лічильниках, розглянутих раніше, 1268 вимірювальних приладів, 121 вимірювальна кімната та решта вимірювальних зон. Щоб визначити, які пристрої вимірюються, ми перелічуємо 20 найпопулярніших типів пристроїв на рис. 8.

    Рис. 8
    фігура 8

    Топ-20 типів вимірюваних пристроїв.

    Рисунок 8 показує, що 11,9% лічильників вимірюють «Освітлення та інше». Цікаво, що ці лічильники не контролюють виключно освітлення, що передбачає заходи економії, коли один лічильник може контролювати кілька пристроїв. Наступною за поширеністю категорією є «плата MCB», яка вказує на те, що деякі лічильники записують вимірювання плати мініатюрного автоматичного вимикача (плата MCB), не вказуючи інші пристрої. Перші 20 типів пристроїв складають 73,3% усіх лічильників. Це свідчить про те, що, незважаючи на те, що загалом вимірюється 104 типи пристроїв, решта пристроїв менш поширені в будівельному обладнанні, їх вимірюють лише меншість лічильників. Для подальшої перевірки наших даних ми провели цілеспрямований аналіз даних на пристрої, який найчастіше вимірювали, «Освітлення», деталізовано на рис. 9.

    Рис. 9
    фігура 9

    Погодинний розподіл кВт за 2 роки: будні проти вихідних у навчальному корпусі.

    На малюнку 9 зображено розподіл кВт за годину протягом двох років, порівнюючи будні та вихідні дні в навчальному корпусі. Перший поверх, будучи відкритим відкритим простором, демонструє менше споживання освітлення вдень (з 7:00 до 17:00) порівняно з нічним. Ця модель незмінна незалежно від буднього чи вихідного дня. Інші поверхи мають подібні візерунки. Будні показують збільшення використання освітлення близько 8:00 ранку, пік досягає опівдні та невелике зниження приблизно опівдні, типове для обідньої перерви. З 14:00 до 23:00 використання освітлення поступово зменшується, що вказує на зменшення заповнюваності ввечері. У вихідні дні спостерігається мінімальна зміна освітлення з невеликим збільшенням у другій половині дня, що відображає менше мешканців, які в основному активні в цей період. Ця схема споживання електроенергії відповідає типовим тенденціям у навчальних і дослідницьких будівлях, підтверджуючи надійність наших даних.

    Рисунок 10 ілюструє розподіл споживання електроенергії в спальнях і ванних кімнатах на першому поверсі гуртожитку GGT, класифікований за погодинними даними за чотирма сезонами: весна, літо, осінь і зима. У Гонконзі літні температури зазвичай коливаються від 80 до 88 градусів за Фаренгейтом, що вимагає тривалого охолодження для підтримки комфорту в приміщенні. Отже, споживання електроенергії влітку значно вище, ніж в інші пори року, тоді як взимку помітно зменшується через зменшення потреб в охолодженні. Протягом дня пік споживання електроенергії припадає приблизно на північ (12:00), що тісно пов’язане з інтенсивним використанням кондиціонерів та освітлення під час навчання або відпочинку студентів. З 12:00 до 6:00 споживання поступово знижується, що свідчить про те, що більше мешканців йдуть спати. Використання зростає приблизно о 7:00 ранку, трохи досягаючи піку між 10:00 ранку та 12:00 вечора, коли студенти починають свою повсякденну діяльність, використовуючи такі пристрої, як освітлення та комп’ютери. У другій половині дня спостерігається незначне зниження споживання електроенергії; однак споживання знову зростає ввечері — особливо після 19:00 — підкреслюючи, що ніч є основним періодом для діяльності студентів із частим використанням світла та електронних пристроїв. Ця модель споживання відповідає типовим тенденціям у студентських гуртожитках, підтверджуючи надійність наших даних. Через широкий спектр будівель і пристроїв детальний аналіз кожного з них є недоцільним у рамках цього дослідження.

    Рис. 10
    малюнок 10

    Погодинна схема споживання електроенергії за сезонами для GGT 1 F.

  • Чи може ШІ допомогти молодим спортсменам повірити в себе?

    Чи може ШІ допомогти молодим спортсменам повірити в себе?

    Звісно, ​​мій улюблений спортивний фільм усіх часів Moneyball. Насправді я часто надягаю його перед тим, як лягти в ліжко. Це завжди дивує мою дружину. Вона вважає, що це поганий фільм, особливо в порівнянні з більш оптимістичними історіями про повернення, як Вища Ліга— фактично мій другий улюблений спортивний фільм.

    Правда, Moneyball має свої негативні моменти. Але найсумніша частина фільму має наслідки ШІ. Великі.

    Щоб зрозуміти чому, давайте згадаємо передісторію Біллі Біна, оскільки вона інформує більшу частину сюжету. Бред Пітт грає старшого Біллі. До того, як він став генеральним менеджером «Окленд А» у 2001 році, році подій у фільмі, новобранці з нетерпінням звернулися до підлітка Біллі з дуже вигідною пропозицією грати за «Нью-Йорк Метс».

    «Більшість молодих людей, якими ми зацікавлені, мають один або два інструменти, і ми сподіваємося розробити ще один», — каже один агент Біллі та його батькам у чудовій сцені. «Ваш син має п'ять. Ми шукаємо хлопця, який є для нас потенційною суперзіркою в Нью-Йорку, і зараз саме час почати».

    На жаль, потенціал Біна ніколи не реалізується.

    Хоча він був зразковим спортсменом у середній школі Маунт-Кармел у Сан-Дієго, не лише в бейсболі, але й у баскетболі та футболі, Бін мав труднощі у вищій лізі. Розумна гра кинула його, особливо страйкаути, які вбивали впевненість. Він «взяв із собою додому кожного бійця», — пояснює автор Майкл Льюїс у своїй книзі джерел: Moneyball: мистецтво виграти в нечесній грі.

    Незважаючи на дивовижний справжній талант, Бін так і не знайшов свого шляху. Погана робота з Мец призвела до того, що його кілька разів обмінювали. Статистика за весь час показує, що він не зміг стартувати — після шести сезонів у мейджорах Бін отримав середній показник 0,219, маючи лише три хоум-рани та 29 RBI у 148 іграх.

    Погані результати Біллі відбулися у 1980-х роках, за десятиліття до комерційної появи ШІ. У якості експерименту цікаво уявити, як штучний інтелект міг би врятувати кар’єру Біллі, якби він жив в іншу епоху.

    Для цього ми можемо звернутися до компанії GameChanger та її нового продукту AI Film Room. Лаура Маккуоррі для Trendhunter.com описує це так: «Професійні спортсмени покладаються на передовий відеоаналіз, щоб удосконалити свої техніки та стратегії, тоді як аматорські ліги часто не можуть дозволити собі витрати на ці інструменти. GameChanger Film Room використовує штучний інтелект і комп’ютерне бачення, щоб скоротити години. відзнятий матеріал у тренувальні моменти для конкурентної переваги».

    Іншими словами, GameChanger надає молодіжним спортивним тренерам власний професійний інструмент аналізу відео. Замість того, щоб нескінченними годинами пробиратися безперервно в таких видах спорту, як баскетбол і волейбол, вони можуть швидко й ефективно отримати точні кадри, необхідні для покращення продуктивності гравців.

    Нещодавно я поспілкувався з президентом GameChanger Саміром Ахуджа, щоб зрозуміти, чому Film Room змінює спортивні ігри — каламбур. «Ми створили його спеціально для непрофесійних молодіжних спортивних команд. Подумайте про тих тренерів, які беруть участь. Багато є волонтерами, які приділяють свій час, щоб допомогти дітям. Зйомки ігор вже давно є інструментом для професійних спортивних команд, але не для цих тренерів. Як правило, найняти помічника, щоб пролити весь цей матеріал, було надто дорого та довго. Комп’ютерне бачення все це змінює».

    Комп’ютерне бачення, про яке згадує Ахуджа, ще одна зміна гри. Як описує це IBM: «Комп’ютерний зір — це область штучного інтелекту (ШІ), яка використовує машинне навчання та нейронні мережі, щоб навчити комп’ютери та системи отримувати значущу інформацію з цифрових зображень, відео та інших візуальних даних, а також давати рекомендації чи вживати дій. коли вони бачать дефекти чи проблеми».

    Film Room використовує такий комп’ютерний зір, щоб служити особистим помічником для всіх тих молодих спортивних тренерів, яким бракує ресурсів для використання кадрів відеоігор. «Замість того, щоб вручну переглядати весь цей вміст, щоб знайти повчальні перлини для своїх гравців, штучний інтелект тепер робить це. Раптом усі ці тренери мають швидкий спосіб краще зрозуміти, що їхні гравці роблять правильно, а що можна покращити», — пояснює Ахуджа.

    Це повертає нас до Біллі Біна. Уявіть собі, якби він жив у часи, коли міг би використовувати цей інструмент комп’ютерного зору — для себе. Фільм Moneyball чудово демонструє кризу впевненості Біллі. Кожен страйк-аут він терпить порізи, як ніж. Незабаром він подрібнений, нездатний виступати на тарілці.

    У нашому вигаданому сценарії Біллі Бін міг би щось зробити з усіма цими викресленнями. Замість того, щоб тушкуватись у власному гніві або ламати бити, як він робить у фільмі, він міг би «перейти до відеокасети». Повертаючись до роздягальні або в усамітнення свого дому після страйкауту, Біллі міг переглядати кожен зі своїх матчів проти пітчера, щоб точно визначити, що пішло не так, і як це виправити наступного разу.

    Таким чином, спортивні невдачі можуть перестати заважати кар’єрі. Вони насправді могли стати джерела розширення можливостейстимулюючи навчання.

    Інша компанія штучного інтелекту під назвою Nex, виробник програми HomeCourt, працює з таким мисленням. Поєднуючи комп’ютерне бачення з штучним інтелектом, це допомагає гравцям самостійно оцінювати свої баскетбольні навички, щоб покращити свою гру. «Відстежуючи різні показники продуктивності, спортсмени можуть визначити свої сильні та слабкі сторони, дозволяючи їм зосередитися на сферах, які потребують покращення», — повідомляє labellerr.com.

    У пропозиції HomeCourt є ще один елемент, який може допомогти вирішити проблему Біллі Біна. Це дозволяє гравцеві виконувати вправи перед камерою свого телефону, додаючи цілі в оточення. Це говорить про те, що будь-який гравець, який має труднощі, незалежно від виду спорту, незабаром зможе тренуватися в додатках ШІ з віртуальними завданнями в будь-який зручний для них час. Доступ до таких персоналізованих змагань одним натисканням кнопки не може не допомогти молодим спортсменам.

    Але є ще щось, що штучний інтелект може зробити для спорту, що гостро пов’язане з Біллі Біном. Зрештою, Moneyball це історія повернення. Бін не дозволяє, щоб його невдачі як гравця визначали його як людину. Багато років потому, будучи генеральним менеджером Oakland A's, він використовує свої помилки та важко здобуті уроки, щоб мислити нестандартно за допомогою Sabermetrics. Його сміливе звернення до Big Data дозволяє йому вирішити свій дефіцит таланту, змагаючись із набагато багатшими командами, такими як New York Yankees.

    Зменшивши масштаб того, що відбувається в суспільстві у 2024 році, ми маємо пов’язану проблему. Надто багато наших молодих спортсменів роблять те, від чого відмовився Біллі: вони відмовляються від спорту та інших соціальних заходів.

    чому Відсутність впевненості.

    Ми недостатньо говоримо про те, як COVID-19 сформував Generation Alpha, дітей, які виростуть на Film Room і HomeCourt. «Через пандемію багато з них роками були віддалені від фізичного світу», — каже Ахуджа. «У результаті деякі діти зараз відкладають або навіть утримуються від занять спортом, тому що це для них не нормально. Наша технічна мета полягає в підтримці молодих гравців. Працюючи з тренерами, які дбають про їхні інтереси, вони можуть використовувати штучний інтелект, щоб покращити гру дітей, додавши їм необхідної впевненості».

    Повертаючись до Біллі Біна, впевненість була відсутнім інгредієнтом, якого він потребував, щоб досягти успіху. Очевидно, у нього був справжній талант, який підхопили всі рекрутери. Він просто не вірив у себе, глибоко людська риса. Є надія, що завтрашній ШІ розширить можливості людства, починаючи з наших молодих спортсменів.

  • 5 тенденцій, що змінюють ландшафт даних

    5 тенденцій, що змінюють ландшафт даних

    5 тенденцій що змінюють ландшафт даних 5 тенденцій, що змінюють ландшафт даних5 тенденцій що змінюють ландшафт даних 5 тенденцій, що змінюють ландшафт даних


    Вебінар: опитування виявило, що підвищений інтерес до генеративного ШІ та інтелектуального штучного інтелекту з прогнозуванням, а також потреба підтримувати традиційні аналітичні робочі навантаження призводять до значного збільшення розповсюдження даних у галузях.

    Майже кожен бізнес звертається до штучного інтелекту та розширеної аналітики, щоб підвищити свою конкурентоспроможність, і, відповідно, переглядає свої дані та хмарні стратегії. Ця перебудова була предметом нещодавнього вебінару, проведеного RTInsights у партнерстві з Ocient, який спеціалізується на допомозі компаніям використовувати великі та складні робочі навантаження.

    Завдання утримання та використання даних, що масово розповсюджуються, «робить речі дорогими та складними, оскільки підприємства готують інструменти для своїх подорожей ШІ», — сказав Шантан Кетіредді, співзасновник і віце-президент із рішень для клієнтів компанії Ocient. Під час вебінару він поділився результатами останнього опитування 500 лідерів у галузі ІТ та обробки даних, проведеного компанією Ocient, яке дало п’ять ключових висновків:

    1) Інвестиції в штучний інтелект – і виклики – створюють розповсюдження даних

    2) Збільшення уваги до швидкості передачі даних, безпеки та сталого використання енергії

    3) Лідери не можуть точно передбачити витрати на аналітику

    4) Лідери переосмислюють свої інфраструктури даних і аналітики, що містять лише хмару

    5) Енергоспоживання та доступність змінюють масштабну аналітику даних

    «Усі ці теми переплетені», — сказав Кетіредді. «Вони вказують на розповсюдження та дублювання даних у системах, які з часом дійсно зростають».

    Звіт про опитування Beyond Big Data: Reaching New Altitudes Дізнайтеся, що показало 3-е щорічне опитування Ocient щодо лідерів ІТ та даних    Звіт про опитування Beyond Big Data: Reaching New Altitudes Дізнайтеся, що показало 3-е щорічне опитування Ocient щодо лідерів ІТ та даних

    Багатьом із сучасних організацій, зазначив він, бракує «належних глосаріїв даних або розуміння походження даних, а також належного контролю за тим, як окремі робочі навантаження для різних бізнес-підрозділів спричиняють щомісячні витрати».

    Зі збільшенням інтересу до генеративного штучного інтелекту та інтелектуального інтелекту з прогнозуванням, а також до підтримки традиційних аналітичних робочих навантажень, «ми спостерігаємо досить значне збільшення розповсюдження даних у галузях», — зазначив він. «Вони відслідковують усвідомлення багатьма нашими клієнтами того, що вони створили багато різних версій правдивих і силосних даних, які мають різні системи, як локальні, так і в хмарі».

    Серед багатьох клієнтів, з якими працює Kethireddy, «100% говорять, що їхні дані зростають. Я чую про необхідність консолідації для виконання все більш складних пріоритетів із даними. Їм потрібно зрозуміти походження даних, зменшити затримку чи застарілість даних і зменшити керування системами, на виконання яких найважливіші люди в їхніх технічних командах витрачають непропорційно багато часу».

    Опитування також виявило скорочення використання хмари для обробки штучного інтелекту або аналітичних навантажень. «Відсутність моделей повернення платежів, а також можливість використання самообслуговування, а також цей непередбачений ріст даних, про який ми щойно говорили, справді неочікувано збільшили витрати на хмару», — сказав Кетіредді. «Хмара стимулює величезні інновації, але що стосується масштабування бізнесу в рекламних технологіях або телекомунікаційних компаніях, найбільш інтенсивних обчислювальних навантажень, локальний все ще є найбільш життєздатним варіантом. Лідери засвоїли це на важкому шляху».

    Зростаючі витрати на хмару та додатки часто стають несподіванкою як для керівників компаній, так і для ІТ-керівників, оскільки понад дві третини респондентів, тобто 68%, зазнали несподіваних витрат на аналітику. Шістдесят чотири відсотки помітили, що витрати на хмару зросли більше, ніж планувалося, а 57% сказали, що витрати на інтеграцію систем вищі, ніж очікувалося. Ще 54% вказали, що вони зазнали непередбачених витрат на переміщення даних. «Кожен зацікавлений у продуктивності та масштабі, але для клієнтів, які потребують дуже великомасштабної аналітики з інтенсивними обчисленнями, все повертається до вартості», — сказав Кетіредді.

    Неочікувані витрати, пов’язані з цими ініціативами, «є серйозною проблемою в хмарі, де є вимірювання обчислень, з витратами щомісяця», – сказав він. Елемент несподіваних витрат доповнюється тим, що керівники та менеджери часто бувають засліплені несподіваними витратами на системи та дані. «Часто бізнес-підрозділи в межах підприємства мають доступ лише до своїх систем, чи своїх віртуальних машин, чи до своїх баз даних без будь-якої реальної спостережливості, керування чи керування використанням», — пояснив він. Як правило, інфраструктурні команди дотримуються реактивної стратегії, ставлячи запитання на кшталт «Хто проводив це гігантське тестове навантаження минулого місяця?» без можливості прогнозувати попит.

    Перш ніж компанії зможуть успішно використовувати штучний інтелект і розширену аналітику, необхідно терміново вирішити «проблеми безперервного руху даних і конвеєрів даних, які так часто зустрічаються на підприємствах», зазначив він. «Якщо ви думаєте про переміщення даних і конвеєри даних, більшість клієнтів мають транзакційні системи або застарілі середовища, які потім передають дані в подальші системи. Або вони отримують масу даних із різноманітних джерел, які надходять із хмари, і це можуть бути пакетні чи потокові дані».

    Що відбувається, так це те, що ці організації «беруть ці дані та перетворюють або споживають їх кількома бізнес-підрозділами, використовуючи власні рішення для вилучення, трансформації та завантаження (ETL),» — проілюстрував він. «Це можуть бути абсолютно різні типи даних. Зазвичай це перший вид відхилення або втрати єдиного джерела істини для даних». Рішення ETL, якими керує кожна група, «мають власне середовище для тестування прийнятності для користувачів або робоче середовище, що означає більше копій даних», зазначив він. «Потім ці дані передаються в декілька систем, можливо, для інформаційних панелей або для аналітики з меншою затримкою. Але він також надходить до їхніх систем, наприклад систем OLAP або озер даних».

    Якщо команда обробки даних «не може отримати дані туди, куди їм потрібно, вони не зможуть проаналізувати їх ефективним і безпечним способом», — сказав він. «Лідерам потрібно думати про масштаб по-новому. Існує дуже багато систем, які споживають дані. Масштабування цих середовищ, оскільки дані з кожним роком у багатьох випадках зростають майже на двозначні відсотки, стає громіздким».

    Проактивний підхід полягає у вирішенні цих витрат і розривів шляхом оптимізації та спрощення на єдиній загальній платформі, закликав Кетіредді, відзначаючи підхід Ocient, який полягає в тому, щоб «зменшити кількість екземплярів обладнання та хмари, необхідних для аналізу інтенсивних обчислювальних навантажень». Ми зосереджуємось на мінімізації витрат, пов’язаних із площею системи та споживанням енергії».

    Звіт про опитування Beyond Big Data: Reaching New Altitudes Дізнайтеся, що показало 3-е щорічне опитування Ocient щодо лідерів ІТ та даних    Звіт про опитування Beyond Big Data: Reaching New Altitudes Дізнайтеся, що показало 3-е щорічне опитування Ocient щодо лідерів ІТ та даних

    Крім того, оптимальним підходом до ціноутворення є «кількість ядер процесора або вузлів, а не кількість споживаного обчислювального ресурсу», що є стандартною практикою для хмарної інфраструктури та постачальників додатків у всій галузі, пояснив він. «Оскільки робочі навантаження стають складнішими, а фінансовим директорам потрібні передбачувані ціни для бюджету, ви побачите, що більше лідерів шукатимуть такі рішення».

  • За даними TransUnion, представники міленіалів проведуть цей святковий сезон із задоволенням

    За даними TransUnion, представники міленіалів проведуть цей святковий сезон із задоволенням

    Цього року очікується збільшення споживчих витрат на відпустку, каже Мішель Майєр з Mastercard

    Батьки схильні витрачати гроші на своїх дітей під час канікул.

    Цього року 63% мілленіалів, багато з яких зараз мають власних дітей шкільного віку, заявили, що планують витратити на святкові покупки стільки ж або більше, скільки й минулого року. звіт TransUnion.

    Міленіали також частіше кажуть, що їхній дохід зріс за останні кілька місяців і що вони очікують, що їхній потенціал прибутку знову зросте в наступному році. У жовтні TransUnion опитав 3000 дорослих.

    «Я бачу багато оптимізму в святковий сезон», — сказав Чарлі Вайз, старший віце-президент TransUnion і керівник відділу глобальних досліджень і консалтингу.

    Для багатьох у цій групі нещодавнє підвищення заробітної плати випередило зростання цін, і, хоча загальний рівень безробіття зріс, «ми все ще бачимо стабільну ситуацію з зайнятістю», — сказав Вайз. «Коли люди мають роботу, ця впевненість перетворюється на витрати».

    Більше від особистих фінансів:
    Очікується, що страви на День подяки стануть дешевшими у 2024 році
    Як перемога Трампа може змінити ваше здоров’я
    Віддалена робота допомагає американцям здійснювати триваліші подорожі

    «Очевидно, що мілленіали відіграватимуть найбільшу роль у цей сезон святкових покупок із найбільшими очікуваними витратами», — сказав Уайз.

    Згідно з даними Національної федерації роздрібної торгівлі, витрати на святкові дні з 1 листопада по 31 грудня зростуть до рекордних 979,5–989 мільярдів доларів.

    Незважаючи на те, що заборгованість за кредитною карткою перевищує 1,17 трильйона доларів, покупці у святкові дні очікують витратити в середньому 1778 доларів США, що на 8% більше, ніж минулого року, показало опитування компанії Deloitte у святкові дні.

    Тим часом 28% святкових покупців, опитаних у вересні, сказали, що вони досі не розрахувалися з подарунками, які вони купили для своїх близьких минулого року, згідно зі звітом NerdWallet про святкові витрати, який опитав понад 1700 дорослих.

    Витрати на відпустку можуть призвести до боргів у відпустку

    У той час як більшість покупців — 74% — використовують кредитні картки для купівлі святкових подарунків, 28% зроблять заощадження, щоб зробити свої покупки, а 16% покладаються на «Купити зараз, оплатити пізніше», виявив NerdWallet. Учасники опитування могли вибрати кілька способів оплати.

    Згідно з останніми даними Adobe, «Купити зараз, платити пізніше» — одна з категорій споживчого фінансування, яка найшвидше розвивається, і очікується, що вона стане більш популярною в найближчі тижні. Adobe прогнозує, що витрати «купуйте зараз, платіть пізніше» досягнуть піку в Кіберпонеділок із новим одноденним рекордом у 993 мільйони доларів.

    Однак деякі експерти попереджають, що керування декількома кредитами «купи зараз, сплати пізніше» з різними датами платежу може збільшити ймовірність того, що споживачі зайдуться через голову, навіть більше, ніж із кредитними картками, які простіше обліковувати, незважаючи на небагато. високі процентні ставки.

    Навігатор ринку: купуйте зараз, платіть пізніше бум

    За словами Маршалла Люкса, старшого наукового співробітника Центру бізнесу та уряду імені Моссавара-Рахмані Гарвардської школи імені Кеннеді, варіант оплати частинами може мати фінансовий сенс, особливо за 0% відсотків.

    «Якщо правильно використовувати, це чудово», — сказав Люкс.

    «Але багато людей збираються розподілити покупки на довший період часу, і тоді ви потрапите у високі відсотки та цикл боргів», – сказав він.

    Інші дослідження показують, що чим більше рахунків купуйте зараз, платіть пізніше, відкрито споживачами, тим більше вони стають схильними до перевитрат, пропущених або запізнілих платежів і поганої кредитної історії.

    Якщо споживач пропускає платіж, залежно від позикодавця можуть бути стягнені комісії за прострочення, відстрочені відсотки чи інші штрафи. У деяких випадках ці процентні ставки можуть досягати 30%, що конкурує з найвищими комісійними за кредитні картки.

    Підпишіться на CNBC на YouTube.

  • Фінансування грантів Commerce Awards для проектів екстрених служб, пов’язаних із туризмом

    Фінансування грантів Commerce Awards для проектів екстрених служб, пов’язаних із туризмом

    Зображення Pexels


    Інформація про фото

    ОЛЕНА, Монт. – Міністерство торгівлі штату Монтана оголосило сьогодні, що 26 місцевих агенцій з безпеки поділять понад 1,4 мільйона доларів грантового фінансування для підтримки проектів екстрених служб, пов’язаних із туризмом у сільській місцевості. Фінансування здійснюється через Програму екстреної допомоги туризму Commerce в Монтані.

    «Служби екстреної допомоги мають вирішальне значення в сільських районах штату, де останнім часом, можливо, спостерігалося збільшення кількості відвідувачів», — сказав Пол Грін, директор департаменту торгівлі Монтани. «У Commerce ми пишаємося тим, що підтримуємо перших служб реагування та інших, хто допомагає рятувати життя та покращувати громадську безпеку в наших сільських громадах».

    Програма METAP розроблена для підтримки послуг, що надаються державними або приватними службами безпеки, включаючи правоохоронні органи, пожежну службу, швидку допомогу чи медичні послуги.

    Грант METAP отримають:

    • 15-90 Пошук і порятунок отримає 42 140 доларів США на придбання позашляховика Polaris із гусеницями для допомоги в пошуково-рятувальних роботах.
    • Біверхедський сільський пожежний округ №2 отримає 69 344,31 доларів США на придбання пожежної машини типу 5 для дикої місцевості.
    • The Пошуково-рятувальна служба округу Біг-Горн отримає $65 948,72 на придбання дрона, двох Polaris Rangers і транспортного ліжка Medlite для допомоги в пошуково-рятувальних роботах.
    • The Добровільна пожежна команда «Місто Великий Ліс». отримає 47 440 доларів США на придбання генератора та виготовлення бетонної кріпильної площадки.
    • Служба екстреної допомоги Сільвер Гейт міста Кук отримає 75 000 доларів на придбання пожежної машини екстрених служб.
    • The Департамент поліції Діллон отримає 75 тис. доларів на придбання патрульного автомобіля.
    • Пошуково-рятувальна служба Елкхорн отримає 75 000 доларів США на купівлю закритого причепа, борту Polaris Expedition ADV і радіостанцій зв’язку.
    • Добровільна пожежна служба міста Джефферсон отримає $9 232,05 на придбання одягу та рятувального спорядження для пожежників.
    • The Департамент поліції міста Ліббі отримає $75 000 на придбання поліцейського автомобіля.
    • The Волонтерська пожежна частина Ліббі отримає $75 000 на придбання компресорної системи автономного дихального апарату та заправної станції.
    • The Northeast STAT Ambulance Cooperative отримає 46 693,08 доларів США на придбання вдосконаленого монітора/дефібрилятора для оновлення обладнання служби екстреної допомоги.
    • The Пожежна та аварійна служба Paradise Valley отримає 57 395 доларів на придбання інструментів для порятунку та визволення.
    • The Офіс шерифа округу Парк отримає 75 тис. доларів США на придбання патрульної вантажівки та аварійного обладнання для автомобіля.
    • The Філіпсбурзька волонтерська пожежна команда отримає $75 тис. на придбання пожежної машини та супутнього обладнання.
    • The Пожежна служба міста Полсон отримає 66 000 доларів на закупівлю сучасного обладнання для підтримки життя, включаючи кардіомонітори та пристрої Lucas для автоматичного вимірювання пульсу.
    • The Відділ поліції міста Полсон отримає 50 701 долар США на придбання двох причепів, змінного повідомлення та допоміжного обладнання.
    • Пожежно-рятувальна частина Red Lodge отримає $64 478,76 на закупівлю мобільного командно-комунікаційного обладнання.
    • Пошуково-рятувальна служба округу Річленд отримає $27 196,40 на придбання пошуково-рятувального причепа та обладнання.
    • The Раундап Добровільна пожежна команда отримає 57 798 доларів США на закупівлю евакуаційного обладнання для пожежних автомобілів.
    • Округ Сандерс отримає $62 858,25 на придбання поліцейського автомобіля.
    • Seeley-Swan Search and Rescue отримає $21 075 на придбання пошуково-рятувального снігохода.
    • The Шеріданська волонтерська пожежна команда отримає 4000 доларів на придбання знаків екстреної ситуації, жилетів підвищеної видимості та персональних ліхтарів.
    • The Місто Томпсон-Фоллз отримає $65 814,25 на придбання поліцейського автомобіля.
    • The Місто Томпсон-Фоллз отримає $75 000 на придбання двох поліцейських автомобілів.
    • The Сільська пожежна служба Thompson Falls отримає 61 685 доларів США на придбання інструментів для визволення та аксесуарів для допомоги в екстрених ситуаціях.
    • The Місто Вест-Єллоустоун отримає 66 756 доларів на придбання поліцейського автомобіля.

    Прийнятні заявники на фінансування METAP включають сільські міста, округи, консолідовані уряди, племінні уряди та будь-які організації, які надають служби екстреної допомоги або підрозділи реагування в сільській місцевості. METAP – це можливість, що фінансується державою, дозволена законодавчим органом у 2023 році, коли Сенат ухвалив законопроект 540.

    Для отримання додаткової інформації про гранти METAP відвідайте commerce.mt.gov.


    Теги: прес-реліз

  • Microsoft Ignite: опанування мистецтва керування хмарою

    Microsoft Ignite: опанування мистецтва керування хмарою

    Покращте рівень безпеки за допомогою виявлення загроз на основі штучного інтелекту

    Третя стратегія полягає в посиленні безпеки за допомогою інструментів виявлення загроз на основі ШІ, вбудованих у хмару. Наприклад, такі інструменти, як Azure Arc, забезпечують узгоджену безпеку та керування, а Azure Update Manager надає уніфікований сервіс, який допомагає відстежувати та керувати відповідністю в гібридних і багатохмарних мережах. Користувачі також можуть спробувати Hotpatch із підтримкою Arc, хірургічне виправлення безпеки, яке працює шляхом виправлення коду запущених процесів у пам’яті без необхідності перезавантаження.

    Зрештою, інтеграція штучного інтелекту в операції безпеки дозволяє здійснювати безперервний моніторинг, проактивне виявлення вразливостей у величезних наборах даних і кращі механізми захисту, сказав Гатрі.

    Використовуйте штучний інтелект і Inscape від CDW, щоб оптимізувати хмарні витрати

    І, нарешті, подумайте про використання власної хмарної платформи CDW Inscape, щоб отримати персоналізовані фінансові рекомендації для вашого мультихмарного середовища.

    «Ми створили Inscape близько 10 або 11 років тому з метою дійсно допомогти людям отримати кращу ясність щодо своїх витрат на хмару», — сказав Тоні Суффолетто, директор інструментів і підтримки Microsoft у CDW.

    Платформа, яка ідеально підходить для FinOps, дає рекомендації щодо розподілу ресурсів, виявлення тенденцій і створення бюджетів за допомогою індивідуальних сповіщень. Він також пояснив, що Inscape може допомогти користувачам вирішити, які хмарні ліцензії їм підходять, і перевірити наявність аномалій.

    Такі інструменти, як керування витратами та виставлення рахунків Azure, також покращені можливостями штучного інтелекту, щоб передбачати моделі використання, рекомендувати заходи економії та автоматизувати масштабування ресурсів. Це гарантує, що витрати на хмару відповідають реальним потребам бізнесу.

    ДІЗНАЙТЕСЯ БІЛЬШЕ: Опануйте мистецтво керування хмарою за допомогою платформи CDW Inscape.

    «Занадто часто компанії купують ці інструменти, але потім розуміють, що їх технічна готовність не зовсім там, де вона повинна бути», — сказав Ел Маккіннон, архітектор рішень у практиці CDW Digital Experience Productivity. Тоді вони застрягли.

    «Скажімо, ви хочете розмістити копілот Microsoft у хмарі: у нас є тренінги для цього. Ми пропонуємо тренінги для кожної програми Microsoft, що є чудовим ударом, — додав Суффолетто.

    Маючи більше знань, хмара стає набагато більш керованим середовищем для організації. «Багато переваг приносить можливість розблокувати потужність цих інструментів», — сказав він.

    Щоб дізнатися більше про Microsoft Ignite, відвідайте наш сторінка конференції. Ви також можете слідкувати за нами на соціальній платформі X за адресою @BizTechMagazine побачити моменти за кадром.

  • Від озер даних до розуміння: адаптер dbt для Amazon Athena тепер підтримується в dbt Cloud

    Від озер даних до розуміння: адаптер dbt для Amazon Athena тепер підтримується в dbt Cloud

    В AWS ми прагнемо надати організаціям інструменти, які оптимізують аналіз даних і процеси трансформації. Ми раді повідомити, що адаптер dbt для Amazon Athena тепер офіційно підтримується в dbt Cloud. Ця інтеграція дозволяє групам обробки даних ефективно перетворювати та керувати даними за допомогою Athena з надійними функціями dbt Cloud, покращуючи загальний досвід роботи з даними.

    У цій публікації ми обговорюємо переваги dbt Cloud над dbt Core, загальні випадки використання та те, як розпочати роботу з Amazon Athena за допомогою адаптера dbt.

    Необхідність упорядкованих перетворень даних

    У міру того, як організації все більше використовують хмарні озера та сховища даних, попит на ефективні інструменти перетворення даних зростає. Athena відіграє важливу роль у цій екосистемі, надаючи безсерверну інтерактивну службу запитів, яка спрощує аналіз величезних обсягів даних, що зберігаються в Amazon Simple Storage Service (Amazon S3) за допомогою стандартного SQL. Це дає змогу витягувати статистичні дані зі своїх даних без складного керування інфраструктурою.

    dbt став провідною структурою, що дозволяє групам даних ефективно трансформувати та керувати конвеєрами даних. Завдяки адаптеру dbt для адаптера Athena, який тепер підтримується в хмарі dbt, ви можете легко інтегрувати свою архітектуру даних AWS із хмарою dbt, використовуючи переваги масштабованості та продуктивності Athena для спрощення та ефективного масштабування робочих процесів даних.

    Переваги адаптера dbt для Athena

    Ми співпрацювали з dbt Labs і спільнотою з відкритим кодом над адаптером для dbt, який дозволяє dbt взаємодіяти безпосередньо з Athena. Раніше адаптер dbt для Athena був сумісний лише з dbt Core, вимагаючи від команд вручну керувати конфігураціями та виконувати перетворення локально або за допомогою спеціальних налаштувань. Тепер, завдяки підтримці dbt Cloud, ви можете отримати доступ до керованого хмарного середовища, яке автоматизує та вдосконалює ваші робочі процеси перетворення даних. Це оновлення дозволяє створювати, тестувати та розгортати моделі даних у dbt з більшою легкістю та ефективністю, використовуючи всі функції, які надає dbt Cloud.

    Підтримка dbt-адаптера для Athena в dbt Cloud пропонує кілька переваг перед його використанням з dbt Core:

    • Керована інфраструктура – dbt Cloud забезпечує повністю кероване середовище для запуску проектів dbt, усуваючи необхідність локального налаштування, обслуговування та конфігурації. Це економить час і зусилля, особливо для команд, які прагнуть мінімізувати управління інфраструктурою та зосередитися виключно на моделюванні даних.
    • Планування та автоматизація – dbt Cloud поставляється з планувальником завдань, що дозволяє автоматизувати виконання моделей dbt. Ця функція гарантує, що ваші набори даних завжди актуальні без необхідності налаштовувати та підтримувати зовнішні системи планування, такі як Apache Airflow. Ви також можете легко встановити залежності між завданнями в dbt Cloud, переконавшись, що перетворення виконуються в правильній послідовності без ручного контролю.
    • Покращена співпраця та контроль версій – Ви можете використовувати веб-інтерфейс для редагування та перегляду dbt-моделей, уможливлюючи співпрацю між групами даних. Ви можете переглядати зміни коду безпосередньо на платформі, сприяючи ефективній командній роботі. Крім того, dbt Cloud інтегрується з постачальниками Git, що спрощує контроль версій і співпрацю над кодом. Це гарантує, що ваші моделі даних добре задокументовані, мають версії та прості для керування в середовищі спільної роботи.
    • Спостереження та оповіщення – Ви отримуєте вбудовані інструменти для моніторингу виконання завдань і продуктивності, щоб налаштовувати попередження та сповіщення про збої завдань, забезпечуючи швидкий час відповіді та мінімізуючи збої. Крім того, ви можете отримати уявлення про продуктивність ваших перетворень даних за допомогою детальних журналів виконання та показників, доступних через інтерфейс dbt Cloud.

    Загальні випадки використання адаптера dbt з Athena

    Нижче наведено типові випадки використання адаптера dbt з Athena:

    • Побудова сховища даних – Багато організацій рухаються до архітектури сховищ даних, поєднуючи гнучкість озер даних із продуктивністю та структурою сховищ даних. Використовуючи Athena та адаптер dbt, ви можете перетворювати необроблені дані в Amazon S3 у добре структуровані таблиці, придатні для аналітики. Це налаштування дозволяє компаніям створювати масштабоване та ефективне озерце даних, де вони можуть виконувати перетворення на основі SQL і переконатися, що дані чисті та готові для аналітики, не вкладаючи значних коштів в інфраструктуру сховища даних.
    • Інкрементна обробка даних – Адаптер дозволяє здійснювати поступову обробку даних, де перетворюються та обробляються лише нові або оновлені дані. Ця функція зменшує обсяг даних, сканованих Athena, що призводить до швидшої роботи запитів і зниження витрат. Наприклад, замість того, щоб обробляти весь набір даних щодня, dbt можна налаштувати на перетворення лише даних, отриманих за останні 24 години, що робить операції з даними більш ефективними та рентабельними.
    • Управління та оптимізація витрат – Оскільки Athena стягує плату на основі обсягу даних, сканованих за кожним запитом, оптимізація витрат є надзвичайно важливою. Адаптер дозволяє групам даних оптимізувати перетворення шляхом створення ефективних моделей даних, таких як розділення та стиснення даних для мінімізації витрат на сканування. Крім того, автоматизоване планування dbt у хмарі dbt можна використовувати для керування частотою перетворень даних, гарантуючи, що запити виконуються лише за необхідності, допомагаючи ефективно контролювати витрати.
    • Архівація даних і багаторівневе зберігання – Організації з великою кількістю історичних даних можуть використовувати Athena для запиту архівних даних, що зберігаються в недорогих класах зберігання Amazon S3 (таких як Amazon S3 Glacier). За допомогою адаптера групи обробки даних можуть створювати моделі, які сегментують і обробляють дані на основі моделей використання, гарантуючи, що дані, до яких часто звертаються, оптимізовані для швидких запитів, а старі дані залишаються доступними, але економічно ефективними. Крім того, ви можете використовувати Amazon S3 Intelligent-Tiering, щоб оптимізувати витрати на зберігання, переміщуючи дані між двома рівнями доступу, коли шаблони доступу змінюються. Цей підхід допомагає в управлінні витратами на зберігання, зберігаючи при цьому гнучкість для аналізу історичних тенденцій, коли це необхідно.
    • Перетворення даних, керовані подіями – У сценаріях, коли організаціям потрібно обробляти дані майже в режимі реального часу, наприклад для потокової передачі журналів подій або даних Інтернету речей (IoT), ви можете інтегрувати адаптер у керовану подіями архітектуру. Наприклад, дані про події можна безперервно завантажувати в Amazon S3, а моделі dbt можна налаштувати на поступовий запуск, перетворюючи нові дані в структуровані формати для негайного аналізу. Це налаштування підтримує гнучку обробку даних, одночасно використовуючи переваги безсерверної архітектури Athena, щоб підтримувати низькі операційні витрати.
    • Відповідність і управління даними – Для організацій, які керують конфіденційними або регульованими даними, ви можете використовувати Athena та адаптер для забезпечення дотримання правил керування даними. За допомогою dbt команди можуть визначати перевірку якості даних і контроль доступу як частину робочого процесу трансформації. Це гарантує, що для аналітики доступні лише сумісні високоякісні дані, а витрати оптимізуються шляхом обробки лише даних, які відповідають стандартам управління. Крім того, функції документування dbt допомагають підтримувати чіткий облік перетворень даних, підтримуючи зусилля з аудиту та відповідності.

    Як користуватися адаптером dbt для Athena

    Щоб почати, створіть проект і налаштуйте з’єднання з Athena в dbt Cloud. На наступному малюнку показано кроки для створення проекту за допомогою dbt Cloud і налаштування підключення Athena.

    озер даних до розуміння адаптер dbt для Amazon Athena Від озер даних до розуміння: адаптер dbt для Amazon Athena тепер підтримується в dbt Cloud

    Далі скористайтеся інтерактивним середовищем розробки dbt Cloud (IDE), щоб розгорнути свій проект. На наступному малюнку показано, як створити запуски dbt і розгорнути зміни в Athena за допомогою інтерфейсу dbt Cloud.

    1732302223 790 Від озер даних до розуміння адаптер dbt для Amazon Athena Від озер даних до розуміння: адаптер dbt для Amazon Athena тепер підтримується в dbt Cloud

    Висновок

    У AWS ми прагнемо надати вам найкращі інструменти та послуги, які допоможуть вам досягти успіху в хмарі. dbt стала провідною платформою перетворення даних, якій довіряють тисячі організацій по всьому світу. Завдяки партнерству з dbt Labs ми можемо перенести потужність dbt безпосередньо в хмару AWS, дозволяючи вам бездоганно інтегрувати робочі процеси перетворення даних у ширшу хмарну інфраструктуру. Це партнерство є свідченням нашого спільного бачення зробити дані більш доступними, надійними та цінними для організацій будь-якого розміру.

    Ми з нетерпінням чекаємо, як ви використовуватимете dbt Cloud-сумісний адаптер dbt для Athena, щоб просувати свої ініціативи на основі даних. Поєднання dbt і Athena створює потужне й ефективне середовище для перетворення й аналізу даних у безсерверній архітектурі. Ця синергія дозволяє використовувати переваги обох інструментів, спрощуючи керування складними конвеєрами даних, зменшуючи витрати та масштабуючи свої операції.


    Про авторів

    озер даних до розуміння адаптер dbt для Amazon Athena Від озер даних до розуміння: адаптер dbt для Amazon Athena тепер підтримується в dbt CloudДаршит Таккар є менеджером із технічних продуктів AWS і працює з командою Amazon Athena.

    озер даних до розуміння адаптер dbt для Amazon Athena Від озер даних до розуміння: адаптер dbt для Amazon Athena тепер підтримується в dbt CloudСелман Ай є архітектором даних у команді AWS Professional Services.

    озер даних до розуміння адаптер dbt для Amazon Athena Від озер даних до розуміння: адаптер dbt для Amazon Athena тепер підтримується в dbt CloudВР сьогодні є старшим архітектором партнерських рішень в AWS, який допомагає клієнтам розробляти рішення для великих даних для обробки даних у масштабі

  • StarTree планує масштабувати аналітику в реальному часі за допомогою нових функцій керування даними та безпеки

    StarTree планує масштабувати аналітику в реальному часі за допомогою нових функцій керування даними та безпеки

    Застарілі системи «пакетної» обробки даних давно містять інструменти для керування продуктивністю та забезпечення безпеки. StarTree надає ті самі можливості для аналізу даних у реальному часі та операцій ШІ.

    media 1299120bf4dd16baca4d66e13f8b4db540e57c331 StarTree планує масштабувати аналітику в реальному часі за допомогою нових функцій керування даними та безпеки

    StarTree доповнює свою платформу аналізу даних у реальному часі набором нових можливостей, включаючи інструменти управління продуктивністю та безпеку даних, які, за словами компанії, необхідні для прискорення впровадження систем аналітики в реальному часі.

    Багато нових функцій і методів, які додаються до StarTree Cloud, уже давно доступні в застарілих системах «пакетної обробки даних». Але зі зростаючим використанням систем даних у режимі реального часу для завдань штучного інтелекту та аналітики, відповідно до StarTree, ці можливості також стають все більш потрібними.

    «Управління даними в режимі реального часу представляє зовсім інший набір проблем», — сказав Чад Мелі, старший віце-президент зі зв’язків із розробниками та маркетингу StarTree, під час брифінгу з CRN.

    [Related: StarTree Extends Cloud Platform’s Real-Time Analytics Capabilities]

    StarTree, заснована в 2018 році зі штаб-квартирою в Маунтін-В’ю, штат Каліфорнія, продає свою систему аналітики в реальному часі StarTree Cloud для цілого ряду аналітичних програм, орієнтованих на клієнтів, включаючи аналіз фінансових операцій, показники залученості в соціальних мережах, націлювання реклами, послуги на основі місцезнаходження, динамічне/стрибкове ціноутворення та таблиці лідерів відеоігор.

    Платформа компанії заснована на Apache Pinot, розподіленій аналітичній базі даних у реальному часі з відкритим вихідним кодом, розробленій для високомасштабних запитів із низькою затримкою. (Засновники StarTree, генеральний директор Кішор Гопалакрішна та інженер-засновник Сян Фу спочатку розробили Піно.)

    Сьогодні більшість операцій з переміщення даних, таких як отримання даних із ERP і систем продажів для завантаження в сховище даних для аналізу, виконується за допомогою «пакетної обробки», коли дані періодично збираються та переміщуються — щогодини, щодня, щотижня тощо. .

    Але для ефективності аналітичним системам і системам штучного інтелекту все більше потрібні дані в реальному або майже реальному часі. «Все стає все більше і більше в реальному часі. Раніше це було від днів до годин і хвилин, а тепер навіть хвилини неприпустимі. Тепер ми переходимо до секунд», — сказав Чінмай Соман, керівник відділу продуктів у StarTree. CRN інтерв'ю.

    Соман також зазначив, що «масштаб даних значно змінився». Обсяги даних стають більшими, набори даних більшими, темпи споживання даних вищі, і більше бізнес-користувачів і програм отримують доступ до цих даних і використовують їх, сказав він.

    «Те, що раніше робилося вручну або неефективно, більше не прийнятне, особливо в системах реального часу», — сказав Соман. «Ми бачимо, як наші клієнти підштовхують нас як до масштабу даних, так і до «реального часу» [analytics systems] можна отримати».

    «Я думаю, що ми на початку гри з точки зору реального часу», — додав Мелі, порівнюючи використання обробки даних і аналітики в реальному часі з традиційною пакетною обробкою. «Я думаю, що основна тема того, що ми тут оголошуємо, полягає в тому, щоб справді отримати більш широке впровадження» аналітики в реальному часі.

    Мелі сказав, що ці нові можливості допоможуть StarTree та її партнерам-постачальникам хмарних послуг стимулювати впровадження Pinot і StarTree для більш широкого спектру програм. Очікується, що розширена функціональність також створить можливості для системних інтеграторів і партнерів з розробки, зокрема він згадав EPAM, з якими StarTree будує партнерські відносини.

    Нові можливості StarTree Cloud включають:

    – Завантаження без паузи: забезпечує свіжість даних, підтримуючи безперервний потік даних на етапах створення та завантаження даних.

    -Performance Manager: за допомогою інтерфейсу машинного навчання ця функція автоматизації спрощує процес оптимізації продуктивності запитів.

    – Розвиток схеми: ця можливість дозволяє системі баз даних вміщувати нові поля, індекси, змінені типи даних та інші структурні модифікації, не перериваючи операцій.

    -Заповнення даними: ця автоматизована функція усуває неправильні або відсутні дані, коли дані не завантажуються або передаються належним чином, надаючи можливість перезавантажувати дані з минулих подій, заповнюючи прогалини в даних і зберігаючи цілісність даних.

    -Управління контролем доступу на основі ролей: RBAC дозволяє організаціям призначати та контролювати доступ користувачів до даних на основі їхніх ролей, забезпечуючи безпеку конфіденційних даних, навіть якщо вони надходять та аналізуються протягом секундних вікон.

    Нові можливості в StarTree Cloud наразі знаходяться в режимі приватної попередньої версії, і очікується, що вони стануть загальнодоступними в першому кварталі 2025 року.

  • Як аналіз даних у реальному часі та штучний інтелект змінюють роботу важкого обладнання

    Як аналіз даних у реальному часі та штучний інтелект змінюють роботу важкого обладнання

    Попит на спрощену роботу обладнання стає більш очевидним, оскільки промислові процеси стають більш складними та диверсифікованими. Аналіз даних і штучний інтелект змінюють принцип роботи всіх галузей, підвищуючи продуктивність і результативність. Ці технологічні досягнення автоматизують операції та дозволяють підприємствам виділяти більше ресурсів на покращення послуг, обслуговування клієнтів та інновації.

    Аналіз даних у режимі реального часу та штучний інтелект також вдосконалюють різні аспекти індустрії важкого обладнання, ще більше сприяючи бездоганності та автоматизації. Подивіться на деякі способи аналізу даних і ШІ трансформують сектор.

    Покращує операційну ефективність

    Аналітика даних і штучний інтелект можуть покращити процес прийняття рішень, обробляючи величезні масиви даних і перетворюючи їх на практичні висновки, які професіонали можуть використовувати для покращення операцій. Ці дані містять інформацію в режимі реального часу та історію, яка може допомогти спроектувати точні прогнози та пропозиції, підвищуючи ефективність роботи.

    Датчики та системи на основі штучного інтелекту також можуть підвищити продуктивність. Аналіз у реальному часі зменшує кількість помилок, заощаджуючи витрати, пов’язані з їх виправленням. Ця перевага покращує процеси, економить час і ресурси, оптимізує послуги та задовольняє клієнтів.

    AI та аналіз даних також підвищують точність операцій. Наприклад, менеджери можуть ефективно розпізнавати моделі використання обладнання за допомогою даних, як-от частота використання та місцезнаходження. Ця можливість гарантує пріоритетність сайтів, які потребують найбільше ресурсів, таким чином скорочуючи час простою.

    Крім того, AI покращує автоматизацію за допомогою датчиків, камер і алгоритмів. Важка техніка тепер може працювати з мінімальним втручанням людини, що зменшує витрати на робочу силу. Цей прогрес також відкриває шлях до нових досліджень і розробок для високої точності.

    Автоматизує прогнозне та профілактичне обслуговування

    У США більше 45% програм технічного обслуговування є реактивними, тобто вони зобов’язуються ремонтувати обладнання, коли воно виходить з ладу. Реактивне технічне обслуговування має багато недоліків, таких як збільшення кількості ремонтів, непередбачувані простої та вищі витрати на оплату праці. Штучний інтелект і аналіз даних можуть допомогти вирішити це, заохочуючи прогнозне та профілактичне обслуговування.

    Аналіз даних і аналіз AI можуть передбачити, коли обладнання потребує технічного обслуговування або ремонту. Ця здатність може подовжити термін служби машини, оскільки вона не повинна функціонувати, доки її не визнають непридатною. Ці діагностичні дані за допомогою прогнозного аналізу є революційними в тому, що вони зменшують час простою, підвищують продуктивність і покращують економію коштів.

    Профілактичне обслуговування передбачає періодичне обслуговування обладнання. AI може допомогти в цьому, автоматизувавши графіки обслуговування та надсилаючи нагадування менеджерам про зустрічі. Профілактичне технічне обслуговування може підвищити ефективність обслуговування обладнання, продовжити термін служби машини та зменшити кількість ремонтів і поломок. Організації, які використовують реактивне обслуговування, можуть значно заощадити час і гроші за допомогою профілактичного обслуговування.

    Збільшення терміну служби та здоров’я обладнання означає кращу ефективність використання палива та більш стійкі практики, зменшення викидів парникових газів і вуглецевого сліду та менший вплив на зміну клімату. Ці переваги, у свою чергу, підвищують привабливість обладнання для потенційних клієнтів, які віддають перевагу екологічно свідомим практикам.

    Сприяє безпечнішому робочому середовищу

    Завдяки штучному інтелекту та аналізу даних менеджери можуть отримувати оперативні попередження про небезпечні умови праці. Інструменти на базі штучного інтелекту можуть визначати та обробляти потенційні небезпеки на місці, такі як погодні умови, ненормальні показання параметрів і аномалії в обладнанні та матеріалах. Потім ці дані перетворюються на сповіщення, які менеджери можуть використовувати для прогнозування небезпек і уникнення нещасних випадків до того, як вони відбудуться.

    Крім того, штучний інтелект може виявляти аномалії обладнання, такі як перегрів і неправильне поводження. Ця інноваційна технологія покращує безпеку об’єкта, зменшує кількість нещасних випадків, підвищує продуктивність і наголошує на проактивних операціях, особливо під час складних місій.

    З 2018 по 2020 роки об’єкти та обладнання стали причиною 32% будівельних травм, в середньому 25 000 травм на рік. Точність і прогнозування аналізу даних у реальному часі та штучний інтелект можуть зменшити кількість травм і підвищити безпеку працівників.

    Аналіз даних у реальному часі та ШІ підвищують ефективність і безпеку

    У сучасному світі комплексний аналіз даних і штучний інтелект є всюдисущими, легко доступними, інтуїтивно зрозумілими та проактивними. Ці промислові руйнівники створять більше можливостей для кращої безперебійної роботи в промисловості важкого обладнання.

    Про автора

    аналіз даних у реальному часі та штучний інтелект змінюють Як аналіз даних у реальному часі та штучний інтелект змінюють роботу важкого обладнання

    Еллі Гейбел — письменниця-фрілансер, яка захоплено висвітлює останні інновації в науці й технологіях і те, як вони впливають на світ, у якому ми живемо й працюємо. Коли вона не зайнята писанням, ви можете побачити, як вона проводить час зі своїм чоловіком та їх коти.

    Підпишіться на безкоштовну розсилку InsideAI News.

    Приєднуйтесь до нас у Twitter: https://twitter.com/InsideBigData1

    Приєднуйтесь до нас на LinkedIn: https://www.linkedin.com/company/insideainews/

    Приєднуйтесь до нас на Facebook: https://www.facebook.com/insideAINEWSNOW

    Подивіться на нас на YouTube!