Учебник по датамайнингу

Выбор целевой функции

 Начало… » Содержание » Учебник по датамайнингу » Том I » Выбор целевой функции… » Целевая функция и датамайнинг 

      

 

B. Выбор целевой функции.

Во главу угла любого проекта вначале встает выбор необходимой модели (процесса, ситуации), а затем – выбор целевой функции, описывающей и оптимизирующей выбранную модель. Целевая функция определяет «вектор», по которому необходимо двигаться при поиске информации и с которым нужно сверяться на промежуточных этапах. Важно, что целевая функция определяется до начала процесса датамайнинга, в процессе датамайнинга она подтверждается или опровергается, потом происходит ее уточнение и оптимизация, и, наконец, на основании модели и оптимизированной целевой функции принимается решение.

Выбор целевой функции тесно связан с планированием своих действий, в том числе и при сборе информации. О планировании будет подробно сказано ниже (смотри раздел B.5.) в данном учебном пособии. Там же будет рассказано о практических аспектах выбора целевой функции. В этом же томе рассказывается о психологических и социальных аспектах целевого планирования.

B.1. Мотивация.

Жизнь современного человека является настолько социализированной, что многие второстепенные аспекты его жизни (такие как новый автомобиль, «гламурный» сотовый телефон и т.п.) выходят на передний план, заменяя такие насущные вопросы, как выживание, продолжение рода и т.п. Современные люди живут в социальной среде, которая диктует выбор места жительства, марки автомобиля, модель сотового телефона, посещаемые им клубы, круг общения, выбор домашнего питомца и т.п. Тем не менее, все описанные «потребности» и цели мотивируются ограниченным числом сущностей. Без достаточной мотивации человек не купит ни машину, ни даже губку для мытья посуды, не пойдет ни в один клуб, ни на один концерт.

Итак, выбор цели определяется ее мотивацией. Именно мотивацией определяется основные поступки человека.

B.1.1. Сексуальное чувство и сексуальная энергия.

Как установили биологи и психологи в конце XIX – начале XX века [17, 18], все человеческие поступки и желания определяются двумя чувствами:

1. Чувством самосохранения, и;
2. Чувством продолжения рода (сексуальным чувством);

Затем эти бессознательные «чувства», путем сублимации, мотивируют социальное поведение человека.

Отступление от темы: деньги.

Сущность денег с точки зрения элементарных сущностей человека.

Дальнейшее описание мотивации человека так или иначе касается понятия денег. Существует множество понятий денег: религиозное (как развращающее людей явление), экономическое (как товара – всеобщего эквивалента стоимости), обыденного (как мера богатства), и т.п. Но все эти объяснения не дают полной картины, слабо связаны между собой. Так все-таки что такое деньги? Попытаемся ответить на этот вопрос с «биологической» точки зрения.

Итак, человек примерно треть своей жизни (~ 8 часов в сутки) работает. При этом время, проведенное на работе, даже любимой – не лучшее времяпровождение. Там Вы растрачиваете свои физические, умственные, эмоциональные силы – в общем, трудитесь. Время, которое Вы посвящаете труду, можно использовать по-другому: можно поесть, позаниматься сексом, пощекотать себе нервы. Но Вы посвящаете труду свое время, и оно вычеркнуто у Вас из жизни. А что Вы получаете взамен? Деньги. Или то, что можно приобрести за деньги. Итак:

Деньги – это овеществленные в материальном мире время жизни человек, расходуемое им на труд.

Из этого определения денег можно вывести все остальные их определения. И, с точки зрения биологии, присваивая чужой труд, получая завышенную зарплату, ограбив человека на улице, Вы отнимаете у человека частицу его жизни. Поэтому относитесь к деньгам уважительно: как к своим, так и к чужим.

B.1.2. Классификация желаний

(среднестатистического человека по Дейлу Карнеги).

В своей книге: «Как завоевывать друзей и оказывать влияние на людей», в главе второй: «Большой секрет искусства обхождения с людьми» Дейл Карнеги пишет[19]:

Почти каждый нормальный взрослый человек хочет:

1. здоровья и сохранения жизни;
2. пищи;
3. сна;
4. денег и вещей, которые можно приобрести за деньги;
5. жизни в загробном мире;
6. сексуального удовлетворения;
7. благополучия своих детей;
8. сознания собственной значительности.

Почти все эти желания удовлетворяются, кроме одного. Это то, что Фрейд называет «желанием быть великим», а Джон Дьюн – «желание стать значительным».

Тот же самый путь поможет Вам разобраться с мотивациями Ваших целей. Если остановиться, задуматься и задать себе вопрос: «А как мои цели совпадают с моими желаниями? В чем заключаются мои проблемы, и как я могу их решить? Что будет дальше, после решения моей проблемы и достижения цели?» Эти вопросы надо ставить перед собой четко и жестко, чтобы у Вас не было желания от них «увильнуть». От них зависит Ваша жизнь: в реальном ли мире, в «виртуальном», компьютерном мире, на работе, отношения с близкими и друзьями и т.д. Где бы Вы не наделали глупостей, учтите, что бить будут Вас, а не Ваш виртуальный аватар, Ваше рабочее кресло или Вашу постель. Ваша личность одинакова везде, и Вы не можете быть успешным человеком, если не преуспели во всех видах своей деятельности.

B.1.3. Страхи и мотивация.

Влияние страхов на мотивацию целей (по Н. Хиллу).

Наполеон Хилл в своей книге [20] перечислил страхи в том порядке, в каком, вероятно, по их значимости расположил любой человек. Это страх

• Нищеты
• Критики
• Болезни
• Любовного разочарования,
• Старости
• Смерти

Первые три всегда обнаруживаются на донышке любого беспокойства. Но в любом случае страх – это только состояние Вашего сознания и, стало быть, может контролироваться.

Вся идея книги Наполеона Хилла «Думай и богатей» основана на двух идеях:

1. Любая мысль, возникшая у человека, рано или поздно материализуется.
2. Человек может сам контролировать свое сознание и мысли.

Соответственно существуют два типа людей:

1. Люди, мыслящие позитивно и настроенные на успех.
2. Люди, чьи поступки мотивированны страхом (таких, к сожалению, большинство).

Конечно же, страх – мощный мотиватор. Под угрозой увольнения работают многие сотрудники. Под страхом расправы можно поднять солдат в атаку. Под дулом пистолета можно отнять у человека кошелек. Но у мотивации страхом есть свои недостатки. Со временем страх притупляется, и человеку становится «все по фигу». Но человек, мотивированный страхом, не только не способен мыслить позитивно – зачастую он вообще разучивается самостоятельно мыслить. Помните:

Борьба с Вашими негативными мыслями – Ваше дело!

B.1.4. Примеры мотивации («разбор полетов»).

Примеры постановки цели и мотивации в ней.

Итак, предположим, Ваша цель – купить новый современный внедорожник (джип). Перечислим все возможные мотивы, по которым Вы решили это сделать.

1. «Потому что все наши ездят на таких машинах». В данном случае вами движет страх критики, желание не оказаться «белой вороной» и остаться вне коллектива.
2. «Потому что у моего начальника (нашего мэра, мужа моей бывшей подруги) точно такой же». Здесь мотивы человека – «бросить пыль в глаза», сделать себя более привлекательным в глазах девушек.
3. «Просто хочу выпендриться» – смотри мотив № 2.
4. «Я часто езжу на охоту (рыбалку, в тайгу, просто за город) и мне нужна такая машина». Вроде бы все логично. Однако рассудим здраво: а какова потребность кататься по бездорожью, сворачивать с трассы неизвестно куда ради двух тощих килек? Дела первой необходимости здесь ни при чем. Здесь, скорее всего, давление своей социальной сети. Мотивы перекликаются с пунктом № 1.
5. «У меня большая семья, и мне нужен вместительный автомобиль». Здесь речь, в общем-то, идет о заботе о своей семье. Однако, если это так, то речь может идти о «заменителе» джипа – микроавтобусе. В любом случае здесь требуется дополнительное уяснение мотивов.
6. «Джипы – наиболее рекламируемые сегодня машины». Мотивация – смотри п. №№ 1. и 2.
7. «По нашим дорогам можно ездить только на джипах». В принципе, это неверная постановка вопроса. Плохая дорога потенциально опасна для любого водителя, пассажира и пешехода. По мнению экспертов, плохие дороги – основной источник аварий и травматизма. А джипы, вследствие своих габаритов и конструкции, увеличивают эту опасность минимум на порядок! Жертвовать жизнями, а не запасными частями – это крайне не разумно. Скорее всего, такой подход – следствие неправильной рекламы. Мотивацию смотри в пункте № 6.
8. «Я просто лучше знаю эти машины». Вариант: почему бы Вам не узнать и другие машины? В этом вам поможет датамайнинг.
9. «Мне нравится испытывать разные машины». Так и испытывайте их до приобретения! Смотри п. № 8.
10. «Мне необходимо иметь проходимость с запасом на будущее». На это есть возражение: «Чем круче джип, тем дальше идти за трактором». Лишняя функциональность часто мешает. Смотри п. № 8.
11. «Джипы надежны, и расходы при ожидаемой эксплуатации будут ниже». Весьма разумное замечание. Однако необходимо рассмотреть этот мотив совместно с другими.
12. «Джип я хочу приобрести потому, что покупка мною Феррари или Бентли будет выглядеть нескромно». Здесь переплетаются два мотива: во-первых, не быть «белой вороной» (мотив № 1), а во-вторых, «быть проще», чтобы избежать излишнего внимания криминала или налоговых органов.
13. «Если я куплю (!) за свои деньги джип, то это будет говорить о моей самостоятельности и достатке». Весьма правильный мотив. Особенно в связи с тем, что таким людям проще получить кредит в банке. Им уже не подойдет прозвище: «мотун», они знают цену деньгам. Однако и тут возможны заменители (например, покупка автомобиля марки «Мерседес» или «БМВ»).

Итак, перечислены все (или почти все) мотивации для покупки джипа. Но, уяснив мотивы, необходимо выбрать затем целевую функцию, для того чтобы проводить дальнейшие исследования. Для этого необходимо:

1. К каждому из мотивов подобрать нужные «веса» в виде баллов от 1 до 10. Баллы подбираются следующим образом:
• 10 баллов. Безусловная, сверх ценная мотивация, по которой вообще выбирается данный автомобиль;
• 9 – 7 баллов. Первостепенные мотивы;
• 6 – 4 балла. Мотивы, которые имеют значение при покупке;
• 3 – 1 балл. Несущественные мотивы;
2. Затем надо расположить мотивы в порядке убывания. Это позволит не только точнее уяснить Ваши мотивы, но и определить возможные автомобили – «заменители» покупки джипа.
3. После назначения «весов» мотивам Вы уже можете построить целевую функцию, необходимую для начала анализа рынка. В первую очередь надо рассмотреть:
• Какие марки джипов или их заменителей есть на рынке?
• Какие из имеющихся на рынке автомобилей удовлетворяют Вашей мотивации в наибольшей мере?
• Какие продавцы, дилеры или посредники, продающие автомобили интересующих Вас марок есть в Вашем городе или регионе?
• Каковы цены на интересующие Вас модели сложились на рынке?
• Каковы условия продажи (предоплата/по факту, продажа в салоне или под заказ и т.п.)?
• Присутствуют ли на интересующие Вас модели скидки?
• На чём можно сэкономить при покупке?

На вопросы желательно отвечать именно в этой последовательности, причем первые два вопроса требуют наибольшей проработки при исследовании методом датамайнинга.

Необходимость защиты кандидатской диссертации.

Предположим, Вам советуют защитить диссертацию на степень кандидата наук. У Вас могут быть следующие мотивы сделать это:

1. «Кандидатская диссертация позволит мне получить надбавку к заработанной плате». Здесь просматривается желание получить больше денег. Вполне нормальная ситуация и мотив. Вопрос в одном: а стоят ли траты по подготовке диссертации этой прибавки?
2. «Кандидатская диссертация укрепит мои позиции в науке и позволит самому выбирать тематику». Здесь удовлетворяется желание быть самостоятельным.
3. «Кандидатская диссертация поможет мне успешнее продолжать работы по изданию книг, преподаванию в университете – будет способствовать занятии желаемой должности, и т.п.» Здесь речь идет о хлебе насущном, о выживании человека в условиях враждебного окружения.
4. «Мне всю жизнь хотелось стать ученым, и у меня это лучше всего получается». Здесь смотри мотивацию по п. № 2 и № 3.
5. «Кандидатская диссертация позволит мне продвинуться по службе». Мотивация из п. № 1. и № 2.
6. «Кандидатская диссертация – одно из условий женитьбы на дочке профессора». Здесь борется мотивации на продолжение рода с любимым человеком и меркантильные соображения из п. № 1.

Целевая функция здесь строится способом, аналогичным приведенному выше способу. Однако здесь необходимо учитывать и отрицательные «элементы», присущие защите диссертации:

1. «У меня не будет свободного личного времени. Я все время буду проводить на кафедре/в лаборатории/в библиотеке».
2. «В результате переработки у меня могут возникнуть проблемы со здоровьем».
3. «Мне некогда будет заниматься сексом».
4. «Защита диссертации – затратное дело, и у меня может случиться нехватка денег».
5. «За время работы над диссертацией я могу «потерять» друзей (из-за редкого с ними общения)».
6. «Кандидатская диссертация в промышленности мало ценится». Очень серьезный довод не заниматься диссертацией.
7. «Я слишком молод/стар для защиты диссертации».

Для дальнейшего анализа Вам придется задать «веса» для этих отрицательных элементов. После чего составить таблицу, в левой графе будут доводы (с «весами») за кандидатскую диссертацию, а в правой против ее написания. Далее необходимо суммирование доводов с «весами» и их нормализация (с тем чтобы число доводов в каждой графе не давали систематическую ошибку). Победят те доводы, набравшие большинство баллов.

Баллы надо ставить не субъективно, а опираясь на опыт коллег по работе, свой собственный опыт и сверяясь с результатами психологического тестирования. В проведении эффективного исследования Вам поможет датамайнинг.

=== *** === *** ===

B.2. Воздействие социального окружения.

На целевые установки человека наиболее сильное влияние оказывает социальное окружение человека. Человек – общественное животное, именно общество формирует его мораль, систему ценностей, мысли, намерения, в том числе шкалу приоритетов. Новорожденный в семье миллионера мало отличается от новорожденного в семье рабочего или крестьянина. Различия будут наблюдаться при воспитании.

Таким образом, на систему ценностей человека влияют следующие факторы:

1. Семья;
2. Социальные сети;
3. Работа и профессия;
4. Хобби и развлечения;
5. «Веление времени» – эпоха, в которой живет человек.

Рассмотрим эти факторы поподробнее.

B.2.1. Семья.

Семью называют ячейкой общества. В семье неразрывно сплетены сексуальные мотивы, мотивы продолжения рода, экономические мотивы, воспитания детей, развлечения, отдыха, совместной работы и т.п. Как Вы видите, семья – один из наиважнейших институтов общества. И именно она в первую очередь ответственна за формирование целевых установок человека.

Итак, семья готовит человека к выработке у него следующих целей:

1. Установка на выживание во что бы то ни стало.
2. Установка на продолжение рода.
3. Установка на взаимопомощь к близким (жене, родителям и т.п.).
4. Установка на воспитание детей.
5. Установка на общественно-полезный, оплачиваемый труд.
6. Установкой быть ответственным человеком, заботящимся о доме, по-хозяйски распоряжающимся жизненными ресурсами.

Нормальная семья отучает человека от желания «бросить пыль в глаза», от погони за гламурными штучками, красивой жизни и т.п. Именно семья в современном обществе не позволяет человеку оторваться от основ существования, превратившись в «орануса» (смотри [Виктор Пелевин. «Generation П.». Роман]).

B.2.2. Социальные сети.

Если человек не находит удовлетворения в семье, на работе, если он страдает от недостатка общения, то он, скорее всего, попадает в одну из «общин», «организаций», «групп» с общим названием «социальные сети». Названы они так по аналогии с компьютерными и нейронными сетями.

Социальные сети – это особым образом организованные, распределенные, часто децентрализованные сообщества людей, объединенных общностью интересов, общественным статусом, и проявляющие активность в области своих интересов.

К социальным сетям можно отнести:

1. Политические партии;
2. Религиозные организации;
3. Общественные организации (типа Green Peace);
4. Преступные сообщества;
5. Клубы по интересам, сообщества, образовавшиеся вокруг дискотек, ночных клубов, «тусовок» и т.п.
6. Сообщества, организованные в Интернете вокруг форумов, групп новостей, чатов, сайтов знакомств и т.п.

Примечание. Из Интернета эти сообщества постепенно мигрируют на сотовые телефоны.

Не следует думать, что социальные сети несут только деструктивную роль. По схеме социальных сетей работают благотворительные организации, оказывающие помощь бездомным, инвалидам, восстанавливающие памятники старины, поисковые отряды, помогающие обнаружить погибших в Великой Отечественной Войне. В прежние времена социальными сетями были и профессиональные сообщества (масоны, цехи, профсоюзы, трудовые коллективы и т.п.).

Особенностью социальных сетей состоит в их активной позиции, превышающей активность остальных граждан, не вовлеченных в социальные сети. Активность социальных сетей часто приводит к революциям.

Наконец, автор подводит к основной и общественно значимой мотивации – мотивации общественного труда.

B.2.3. Карьерный рост и работа.

Здесь пойдет речь о самой главной мотивации и системы ценностей человека – мотивация общественно-полезным трудом. За этот труд человек получает деньги, награды, почет, положение в обществе. Именно понимая свою необходимость конкретным людям, человек не чувствует себя «изгоем».

Человек в своей работе сталкивается с множеством проблем. Проблемы могут быть:

1. Производственными проблемами, связанными с работой оборудования, технологической цепочкой, бизнес-процессами.
2. Логистическими и сбытовыми проблемами, связанными с отношениями с поставщиками сырья, оборудования и материалов, и каналами реализации продукции;
3. Межличностными, связанными с отношениями человека в коллективе, взаимоотношениями с сотрудниками, начальством и подчиненными.

Задача любого работника – решать возникающие проблемы по мере их поступления и важности для конечного результата. Игнорирование проблемы, позиция страуса, «прячущего голову в песок от опасности», в рабочей обстановке нетерпима.

Анекдот на тему. Человек падает со стометрового небоскреба. Когда он пролетает над десятым этажом, его спрашивают: «Ну что, как ты?». Он отвечает: «Пока все хорошо. Полет нормальный». Этот анекдот иллюстрирует ситуацию «страуса», который, прячась от проблем, не видит надвигающейся опасности.

B.2.4. Хобби и развлечения.

Помимо мотивации профессионального роста, есть также мотивация, основанная на «отвлеченных» темах – хобби и развлечений. Например, человек не является профессиональным актером. Однако это не запрещает ему ходить в театр, посещать все премьеры, обсуждать игру актеров и качество режиссуры. Постепенно этот человек становится театралом – любителем, умеющим разбираться во всех течениях и направлениях театральной мысли.

То же самое можно сказать о фотографе-любителе. Да, он не получает деньги за свои фотографии, поэтому он не может считаться профессиональным фотографом. Однако фотографирование не «за мошну», а за вдохновение, неторопливый подход к выбору кадра, сюжета съемки, «игра» с параметрами фотокамеры может сделать его работы лучше, чем у некоторых профессиональных фотографов.

B.2.5. «Веление времени» и выбор целей.

Наконец, наибольшее влияние (хотя об этом задумываются не сразу) на мотивацию человека оказывает «веление времени». Автор не отрицает, что есть и общечеловеческие ценности. Но они занимают малую часть от тех ценностей, которые навязываются человеку в своей стране в свое время (так называемое «здесь и сейчас»). Если человек находится «в струе» этих ценностей, он добивается поставленной задачи и получает от жизни все, что он хочет. Если же он движется «поперек» этих ценностей, бунтуя и не решая поставленные временем перед ним задачи, то он в лучшем случае остается бунтарем одиночкой, ничего не достигшего в жизни, но о котором в будущем будут слагать легенды. В худшем случае он будет «неудачником по неволе», апатичным, не реализовавшим себя в жизни, упустившим все свои шансы, а то и вовсе проведет все свои дни в тюрьме, отвергнутый обществом, в котором он так и не прижился.

«Веление времени» на современном этапе показано в интеллект-карте на рисунке B.001.

Рис. B.001. Интеллект-карта «веление времени».

На этой интеллект карте слева показаны «вечные», общечеловеческие ценности, а справа – современные требования в России в начале XXI века. Среди не переходящих ценностей выделяется любовь к Родине, преданность начальнику, корпоративная этика, дом и семья, общение с друзьями и близкими людьми, честь, внутренняя и внешняя красота. Однако этих качеств, для того чтобы «найти себя в современной России», не достаточно. Современной Россией правят деньги. Человек, который занимается своей деятельностью без оглядки на рынок, бизнес-сообщество, не считая прибылей и убытков, не сводя «дебет с кредитом», безусловно, не имеет никаких перспектив в этой стране. Именно поэтому у многих сегодняшних граждан России «потерялся вектор» и они вынуждены заниматься не тем, чем им предназначалось в жизни. И они множат ряды российских неудачников.

B.3. Целевая функция.

Итак, Вы разобрались с мотивацией, которая может подвигнуть Вас на выбор области действий, модели поведения и целевой функции для оптимизации модели. Далее стоит вопрос: какие решения необходимо принять, и какие исследования (маркетинговые, научные, изыскательские, технические и т.п.) необходимо провести. Различный характер принимаемых решений диктует каждый раз свою форму исследования.

Общая модель принятия и реализации решения [21] может быть представлена следующей схемой:

1. Постановка целей;
2. Поиск и определение проблемы;
3. Анализ проблемной ситуации;
4. Поиск и выбор альтернатив;
5. Решение о действиях, которые нужно предпринять;
6. Переход к действиям;
7. Реализация решений.

В действительности ситуация сложнее.

По мнению автора, процесс принятия решения должен включать в себя следующие пункты:

1. Осознание проблемы.
2. Уяснение целей.
3. Поиск и определение проблемы;
4. Анализ проблемной ситуации;
5. Выбор модели.
6. Подбор целевой функции для выбранной модели.
7. Сбор фактов, подтверждающих или опровергающих модель.
8. Анализ фактов на достаточность.
9. Если факты удовлетворяют модели, то переход к пункту 13.
10. Поиск и выбор альтернатив.
11. «Мозговой штурм».
12. Уточнение модели. Переход к пункту 6.
13. Оптимизация целевой функции.
14. Составления итогового документа.
15. Принятие решения по указанной проблеме.

Используя эту модель, Вы можете заметить, что различные типы исследований дают различную информацию на каждой стадии решения проблемы. При использовании этой модели Вы видите, что к датамайнингу относится вторая, третья и четвертая стадия применяемых решений. Их то автор и рассмотрит при описании процессов датамайнинга (см. пункт B.4.). Здесь же автор рассмотрит проблемы, связанные с постановкой цели (выбора целевой функции).

Вначале автор должен дать один совет: для выбора целевой функции необходимо учитывать:

1. Ваше собственное мнение о целях исследования (в соответствии с Вашей мотивацией, пункт B.1.);
2. Мнения о целях исследования, высказанные Вашими руководителями (для многих оно будет решающим);
3. Необходимо понять цели ключевых фигур, влияющих на Вас и Вашу работу (покупатели Ваших товаров/услуг, продавцы и другие сотрудники Вашей компании, Ваши поставщики, подрядчики и т.п.). Список ключевых фигур меняется от задачи к задаче, но чем более проработана модель, тем больше ключевых фигур она охватывает.

B.3.1. Использование прошлого опыта при выборе целей.

Перед выбором целевой функции необходимо произвести некоторые предположения о выборе одной из «стандартных» целевых функций. При этом наибольшее значение в планировании и выборе целевых функций имеет прошлый опыт, накопленный Вами, Вашей организацией и обобщенный чужой опыт. Этот опыт имеет важнейшее значение, поэтому рассмотрим его поподробнее.

B.3.1.1. Ваш опыт.

Ведущую роль в выборе целевой функции, планирования сбора информации и сбору оснований для принятия решений играет Ваш жизненный опыт. Он складывается из двух составляющих:

1. Опыта, возникшего у Вас в результате обучения (образование, профессиональное обучение и переподготовка);
2. Опыта, возникшего у Вас в результате трудовой деятельности (исполнения должностных обязанностей, работе в коллективе и т.п.).

B.3.1.1.1. Ваши знания.

Обучение.

Безусловно, наиважнейшую часть информации, необходимой для подготовки и принятия решений, человек получает вместе со своим первоначальным образованием и обучением. Для многих из нас дорога к знаниям, положенная школьной скамьей, далее институтом (техникумом) и, наконец, первым рабочим местом глубоко «впечатывается» в наши привычки, характер и, в конечном счете, влияет на нашу судьбу. Человек, не приученный к ученью, перенимания чужого опыта и критическому отношению к своему опыту, не способен преуспеть ни в одной из областей своей деятельности. Пробелы знаний, которые не ликвидированы в школе, оказывают влияние на все его дальнейшее обучение, а именно: невозможность усвоить новые данные, логические ошибки в рассуждениях, нарушение аналитической последовательности предметов и, в результате – трудности с запоминанием нового материала. Поэтому пробелы в образовании нужно ликвидировать немедленно!

B.3.1.1.2. Работа.

Первостепенное значение для приобретения навыков выбора целевой функции имеет опыт работы человека (без разницы, по специальности или в другой области деятельности). Именно на работе человек учится общению в коллективе, «субординации», изучает взаимоотношения в нем, учится «работе в команде». Кроме того, практическая работа связана с выработкой определенных навыков, «условных рефлексов», позволяющих оптимальным образом выполнять свои обязанности, в частности, навыки планирования, написания деловых бумаг, проведения исследований и поиску информации из различных источников. Эти навыки бесценны для человека, занимающегося датамайнингом.

Вкратце опыт, приобретенный за время трудовой деятельности, можно разделить на:

1. Опыт, полученный в результате работе по специальности;
2. Опыт работы в смежных областях;

Рассмотрим их поподробнее

Опыт работы по специальности.

С помощью этого опыта работы Вы сможете выявить:

• слабые и сильные стороны своей организации;
• задачи, которые ставит перед Вами Ваше начальство;
• общие тенденции в Вашем окружении (рынки, партнеры, конкуренты);
• выбрать целевую функцию на основании прошлого опыта работы;
• «приблизиться» к требованиям, понять мотивацию и таким образом оказывать влияние на потребителей Вашей продукции и услуг;
• порядок подготовки и исполнения решений (написание деловых бумаг, контроль над исполнением решений, другие бизнес-процессы);
• основы планирования деятельности, продаж и поступления денежных средств;
• особенности проведения маркетинговых исследований;
• особенности технических характеристик, качества продаваемой продукции, необходимые научно-технические исследования по улучшению характеристик товаров или услуг.

Все это поможет Вам, как образцово исполнять свои обязанности, так и в Вашем карьерном росте.

Опыт в смежных областях.

Этот опыт, безусловно, необходим при смене специальности, но не менее он ценен в практической работе. Большинство бизнес-процессов в организациях организованы схожим образом. Поэтому Вы можете «блеснуть знаниями», применив решение в смежной области в схожей ситуации при разрешении проблемы на основной работе.

B.3.1.2. Опыт Вашей компании.

Опыт Вашей компании, накопленный сотрудниками в процессе работы – еще один способ выбрать нужную целевую функция и собрать данные для датамайнинга. Основными источниками документов для этого будут служить:

1. Внутренние отчеты.
2. Инструкции и регламенты, принятые внутри организации.
3. Технические задания, уже выполненные или находящиеся в стадии разработки.
4. Планы и графики других подразделений.

Рассмотрим их поподробнее.

B.3.1.2.1. Отчеты.

Отчеты исполнителей – наиболее ценный для исследователя материал. Имея эти отчеты, можно определить, в верном или неверном направлении движется бизнес, правильно ли ведутся изыскательские разработки, выявить узкие места и слабые стороны компании. Рассмотрим эти внутренние отчеты по мере убывания их важности.

Бухгалтерские отчеты.

В бухгалтерских отчетах фиксируются финансовые потоки организации. С их помощью можно проверить финансовое состояние организации, выявить наиболее перспективных клиентов, определить «здоровье» организации, оценить эффективность руководства компанией. По бухгалтерским отчетам видно, какие товары наиболее востребованы за определенный период, какие операции были наиболее затратными. Однако сами данные из бухгалтерской базы данных «ничего не говорят» «обычным смертным». Чтобы сделать эти данные более понятными и более поддающимися исследованию, их необходимо обработать. Доработкой этих данных занимаются клерки и менеджеры, поэтому следующим по важности отчетами будут.

Отчеты менеджеров.

Менеджерам в силу своей работе приходится обрабатывать большие количества коммерческой и управленческой информации, взятых как из бухгалтерской базы данных, так и собранных в результате осуществлении своей деятельности (сбор и обработка первичных данных, информация от продавцов и клиентов, сводки в вышестоящие организации, другая информация). Эта информация более понятна, и ее легче использовать для анализа. Но, в отличие от бухгалтерской отчетности, ее сбор не носит сплошной и непрерывный характер. Так что, взяв отчет менеджера, вы не будете уверены на 100%, что:

• эти данные не устарели;
• что информация в ней полна (но Вы можете быть уверены, что она непротиворечива);
• эта информация содержит именно то, что Вам нужно (а не то, что было нужно показать менеджером при составлении отчета).

Кроме того, оперативная информация может отличаться от бухгалтерской информации (очень большую роль здесь играет человеческий фактор). Допустимым является отклонение +/- 5% от итоговой суммы показателя.

Отчеты продавцов.

Отчеты продавцов – наиболее ценный блок первичной информации, доступный для анализа. Не смотря на его неточность (те же 5%, как в отчетах менеджеров), на его основе можно делать более точные виды о пользовательских предпочтениях, проблемах, возникших при реализации товаров, отзывы и претензии покупатель к качеству товаров, техническим свойствам. Так близко к пользователю, как продавец, не находится никого из всей организации. Продавать – лучшая профессия в мире, и отчеты, личное мнение продавцов о товаре, об организации торговли невозможно переоценить! Не зря с опроса продавцов начинается любое маркетинговое исследование.

Отчеты технических специалистов.

Если отчеты продавцов помогают определить, насколько интересен товар покупателю, то отчеты технических служб показывают:

• насколько технически совершенен товар;
• насколько товар нов и насколько ценны в нем новые качества;
• насколько товар надежен и прост в эксплуатации;
• насколько он ремонтопригоден;
• каков процент возврата товара или поступления в гарантийный ремонт по вине технических неисправностей;
• каковы затраты ресурсов на разработку и внедрение новой техники;
• насколько легко идут работы по внедрению новых продуктов (программ, интеллектуальной собственности);
• «узкие места» во взаимодействии с разработчиками, внедренческими организациями и сервисными центрами по обслуживанию новой техники.

Эта информация может быть скрыта от продавцов. Например, в конце 90-х годов XX века выпускались два вида АТС начального уровня: Panasonic KX-T1232 и схожая по техническим характеристикам гибридная АТС фирмы Samsung. АТС Samsung по техническим характеристикам и цене была предпочтительнее. Однако все технические специалисты отмечали сложности в ее абонентском обслуживании. В результате эта АТС быстро «ушла» с рынка, а АТС Panasonic до сих пор используется в организациях, прекрасно пережив свою модернизацию. Замечание к ней нет в течение 10-летнего периода эксплуатации.

B.3.1.2.2. Инструкции и регламенты.

За время своей работы организация накапливает большой опыт в подготовке различных общих документов, касающиеся трудовой деятельности: должностных инструкций, инструкция о коммерческой тайне, регламенты работы различных комиссий, правила оформления договоров, типовые договора, технические задания, правила оформления внутренних документов и т.п. Эти документы, как правило, не «выдуманы из головы», а являются опытом организации, нажитой в результате проб и ошибок, действий в период преодоления кризисных ситуаций, опыт вышестоящих организаций по преодолению схожих проблем.

Все эти бумаги аккумулируются в трех отделах: юридическом, кадровом, общем отделе. Соответственно, если Вы по долгу службы имеете доступ к этим документам, Вам надо обязательно с ними ознакомиться, понять их логику работы, ознакомиться с историей их разработки. Изучая эти документы, Вы, во-первых, познакомитесь с положительным и отрицательным опытом работы организации, а во-вторых, получите благодарность начальства за правильно подготовленные документы.

B.3.1.2.3. Технические задания.

Важную информацию о техническом состоянии выпускаемых продуктов, о пожеланиях клиентов, о взаимоотношениях заказчика и разработчика, о требованиях рынка можно почерпнуть из технических заданий. Техническое задание – это документ, согласованный и подписанный заказчиком и разработчиком, на основании которого производится разработка технического, программного или интеллектуального продукта. Все отклонения от технического задания допускаются только в виде подписанных сторонами изменений в техническом задании. Поэтому техническое задание отражает:

• технический уровень проекта, как уже достигнутый организацией, так и тот, который предлагает разработчик и на который соглашается Ваше руководство;
• уровень взаимоотношений между Вашей организацией и Вашими разработчиками;
• уровень компетентности Ваших подрядчиков;
• технический уровень, который хочет достичь Ваша компания;
• уровень компетентности Вашего технического персонала;
• техническую политику Вашей организации;
• уровень создаваемых/внедряемых объектов;
• характеристики качества создаваемых/приобретаемых/внедряемых объектов.

Часто в техническом задании приводятся технико-экономические показатели (стоимость работ по реализации технического задания, ожидаемый экономический эффект от внедрения данного проекта и т.п.). Это – бесценный материал для маркетинговых исследований и планирования финансовых потоков.

С помощью технического задания можно скорректировать и оптимизировать целевую функцию, по которой Вы будете осуществлять поиск информации, исходя из текущего технического состояния и технической политики Вашей организации. Ознакомление с техническим заданием позволяет планировать свои действия по разработке продукта, оптимизации целевой функции и т.п.

B.3.1.2.4. Планы и графики.

На основании планов и графиков работы, которые приняты и утверждены в Вашей организации, Вы можете корректировать планирование сроков исполнения целевой функции. Однако необходимо все время помнить о реальности этих планов и графиков, и корректировать их в процессе работы.

Насколько важно правильное планирование сроков исполнения, иллюстрирует следующий пример. Допустим, Вам необходимо растопить камин 20-ю поленцами. Но в выданной Вам коробке умещается только 18 поленцев. В этой ситуации возможны два разумных варианта:

1. Попросить более большую коробку;

2. Выбросить лишние 2 полена, и сходить за ними потом.

Эта ситуация очень напоминает разработку любого проекта.

• полена – это функции, которые необходимо разместить в исходном проекте;
• объем коробки – это объем необходимых ресурсов (временных, финансовых, людских), которые надо привлечь для осуществления проекта;

Первый вариант означает, что Вы требуете больше ресурсов и тем самым затягиваете сроки или удорожаете проект. Второй вариант – Вы реализуете в проекте неполную функциональность, которую реализуете в следующей версии. Но часто начальству больше нравится другой вариант, который трудно назвать разумным:

3. Вы «ужимаете» все Ваши поленья, с тем, чтобы уместить их в коробке.

Если Вы когда-либо работали с поленьями, Вам легко представить абсурдность этого решения. Но почему-то Вы не задаете вопросы, когда Вам навязывают нереальное по срокам техническое задание (план, график и т.п.), не подкрепленных соответствующими ресурсами. Помните – вред от нереального плана не меньше, чем от работы вообще без плана! Не стесняйтесь корректировать планы во время работы.

B.3.1.3. Чужой опыт.

Ни одна компания не сможет прожить без аккумуляции и перенимания опыта работы других организаций в своей области деятельности. Как правило, за период жизни одной организации (в России это срок составляет примерно 5 лет) ни одна из них не способна «пережить» все ситуации, с которыми может столкнуться предприятие, работающее в данной отрасли экономики. Так, не все организации проходят ситуацию с банкротством, сменой собственника, атаками «рейдеров». Не у всех организаций одинаковый опыт преодоления «падения» рынка, смены политической конъюнктуры, изменения структуры рынка, освоение его новых сегментов и т.п. Иначе говоря, необходимо делится чужим опытом, и перенимать его у других организаций. В этом Вам может быть полезен данный пункт.

Сразу следует отметить, что получить данные о чужом опыте может быть как «затруднительно» (если требуется изучить опыт конкурентов) так и «очень просто» (если воспользоваться данными статистических сборников и профессиональных консультантов). Поэтому при сборе информации нужно правильно «расставлять приоритеты».

B.3.1.3.1. Опыт партнеров.

Этот способ перенимания чужого опыта является одним из наиболее простых и доступных среди рассматриваемых способов. При работе организации ей приходится выступать в различных ролях при взаимоотношении с другими фирмами: быть продавцами или покупателями работ и услуг, подрядчиками и заказчиками работ, комиссионерами, разработчиками, производителями и потребителями материальных или интеллектуальных услуг. Все эти «роли» прописаны в хозяйственных договорах, подкреплены актами, сверками взаиморасчетов и другими бухгалтерскими и управленческими документами. Если сотрудничество со сторонними организациями является плодотворным, то за годы партнерских взаимоотношений в организации накапливается большая база документов, которая может быть интересна для анализа маркетинговыми и техническими службами.

Однако, при удачном взаимном сотрудничестве, помимо внутренних документов накапливается «большой капитал» дружеских взаимоотношений, который не грех использовать в целях датамайнинга. Например, при работе со справочниками Вы наткнулись на несовпадение цифр, или какие-то данные вызывают у Вас сомнение. При этом Вы не можете прояснить ситуацию, используя только внутренние документы Вашей организации. Самый простой выход из данной ситуации – попробуйте обратиться к сотрудникам фирм-партнеров Вашей организации. В случае Ваших хороших взаимоотношений они помогут Вам найти документы, подтверждающие или опровергающие факты, почерпнутые из других источников. Однако используйте правило: добывая такого рода информацию, не «подставляйте» своих партнеров, не требуйте разглашения коммерческой тайны, не склоняйте их к противоправным поступкам. Перед использованием такого рода информации получите хотя бы устное (лучше – письменное) согласие сотрудника на публикацию этой информации и данных.

Для примера рассмотрим процесс подготовки курсовой или дипломной работы. Пусть Вам нужно получить подсказку у Вашего партнера (сокурсника). Если он нормальный человек, он откликнется на Ваш призыв о помощи. Однако его не надо упрашивать делать следующие криминальные действия:

1. Дать списать текст курсовой с его или чужой работы (это называется «плагиатом» и карается как административное нарушение);
2. Заставить написать или добыть «бомбы» для экзамена либо курсовой работы (это неэтично). Однако Вы вправе получить информацию о преподавателях, принимающих экзамены, об их личных пристрастиях и предпочтениях, чтобы затем воспользоваться этой информацией в личных целях;
3. Просить лично «подкупить» преподавателя или склонить его быть более снисходительным к Вам.

Следующий пример. Вы хотите выйти на рынок с новым продуктом. Естественно, получение информации от конкурентов на эту тему представляет большие трудности. Однако Вы можете расспросить розничных торговцев, которые торгуют аналогичным товаром. Если они являются Вашими партнерами, то они с радостью поделятся такой информацией – ведь, возможно, они будут им торговать и получать прибыль. Так что здесь обращение к партнерам будет весьма успешным.

Еще один пример, с обратной стороны. У Вас есть намерения торговать продуктами фирмы N в дополнение к своему ассортименту. Тогда первый шаг, который предстоит Вам сделать – это обратиться в фирму N за рекламной продукцией. В принципе, эта фирма может, не будет поставлять Вам товар напрямую (Вы очень мелкий клиент). Однако если ее менеджеры имеют правильное представление о ведении бизнеса, они не откажут Вам в рекламных материалах, списках своих оптовых продавцов в Вашем регионе, предложит Вам подписку на свежие новости о своей компании и своих продуктах. В эту фирму не обязательно даже посылать письмо – как правило, вся информация имеется в Интернете. Правильно пользуйтесь ее ресурсами – и Вы преуспеете в своем бизнесе.

B.3.1.3.2. Опыт конкурентов.

Это – наиболее сложный и наиболее ценный источник информации о рынке, изделиях, спросе. Наиболее ценный – потому что Ваши конкуренты уже наверняка столкнулись с проблемой, по которой Вы хотите получить информацию. Наиболее сложный – потому что, во-первых, и Вы, и Ваши конкуренты не должны разглашать коммерческую тайну (а именно такая информация чаще всего требуется), а во-вторых, за Вашими взаимоотношениями с конкурентами будет наблюдать служба безопасности Вашей организации (наверняка она у Вас есть). Согласитесь, попасть «на крючок» этой службы по пустяковому поводу – это просто обидно.

Таким образом, Вы можете использовать для обмена следующие данные:

«Не конфиденциальными» вопросами, которые Вы можете сообщать конкурентам без оглядки на Вашу службу безопасности, являются следующие вопросы:

1. Цены конкурентов из официальных прайс-листов;
2. Объемы реализации, указанные в статистических справочниках;
3. «Общие вопросы» о рынке и его сегментации;
4. Заявленные параметры и сроки выпуска анонсированных товаров, которые опубликованы в прессе;
5. Информация о потребностях и предложениях товаров, услуг, кадров и т.п.

Всю остальную информацию о конкурентах Вы не вправе требовать от своих «осведомителей».

Кроме сотрудников конкурирующей организации, информацию о конкурентах могут предоставить:

• статистические справочники;
• периодические издания;
• специализированные издания;
• бюллетени торгово-промышеленных палат;
• реклама в прессе;
• выставки и презентации;
• аналитические записки и результаты опросов, проведенные профессионалами. Об этом – смотри ниже.

B.3.1.3.3. Опыт профессиональных консультантов.

Бесценным источником информации о рынке, технике и тенденциях являются отчеты профессиональных консультантов, журналистов, аналитиков. Конечно, их научные и журналистские труды «однобоки» в том плане, что они пишутся для кого-то в обосновании его целей. Однако не значит, что им нельзя доверять.

Сейчас автор приведет пример, взятый из книги «Законы Паркинсона». В нем бизнесмен, деловой человек представлен как капитан дальнего плавания. Он переплавал много морей и океанов, бывал в разных бурях, попадал во многие передряги. Поэтому для него сесть на мель – это чрезвычайное происшествие Профессиональный же консультант – это как капитан буксира на этой мели. Этот буксир снимал с этой мели не один корабль. Он знает эту мель как облупленную, знает все днища и конструкции кораблей, и снять с мели корабль для него – пара пустяков. Однако пуститься для него в дальнее плавание – гиблое дело. И он это понимает, поэтому остается у своей мели.

Поэтому, собирая информацию из открытых источников от разных консультантов и специалистов, хорошо представляйте себе:

1. Когда были написаны эти материалы;
2. Для кого и для чего они были написаны.

Приведем пример, характеризующий «предвзятость» авторов в освящении «священной войны» («holly war») между сторонниками процессоров Intel и AMD на современном рынке. В настоящее время между этими компаниями идет конкуренция по всем направлениям. Нельзя сказать, что у этих архитектур есть устойчивый перевес на ту или иную сторону: их диспозиция меняется постоянно, после появления новых продуктов. И для пользователя это хорошо: в результате конкуренции обновляется модельный ряд, падает цена и т.п. Поэтому говорить о «преимуществах» той или иной модели, архитектуры и подхода могут только «проплаченные» авторы «заказных» статей.

Однако, при широком освещении в прессе этой «священной войны», у пользователя складывается правильное представление о преимуществе и недостатках этих архитектур, используемых технологиях, об их совместимости, быстродействии, энергопотреблении. И он путем разумного компромисса может выбрать модель, удовлетворяющую исключительно его по всем характеристикам.

B.3.2. Мы и наше окружение (бенчмаркинг).

Каждая отдельная личность, каждый коллектив, компания, наконец, не может существовать вне существующего общества, «социума», конкурентной среды. Любая ситуация, в которую попадает индивидуум, коллектив, ранее уже была пройдена и благополучно разрешилась другими индивидуумами и коллективами. То, что отличает человека от животных (накопление и передача жизненного опыта), обязательно должно работать и социальной и деловой среде. Без передачи опыта невозможно существование человека как личности и социально значимой единицы. Но, поскольку информация в настоящее время является конкурентным преимуществом, то делится всей информацией с окружающими компании не выгодно. В добыче и осмыслении нужной Вам информации Вам поможет бенчмаркинг.

Бенчмакингом называют процесс сбора информации о конкурентах, как положительной, так и отрицательной. Важно не только то, «как надо делать», но то, «как не надо это делать». В принципе бенчмаркиг – это одна из форм датамайнинга, лидирующая по сложности добычи и обработки информации. Но на данном этапе нас интересует выбор целевой функции с помощью других участников рынка, от партнеров, поставщиков, коллег по работе.

На выбор целевой функции существенное влияние оказывают:

1. Технологии;
2. Наличие производства (основные средства);
3. Кадры;
4. Организация труда;
5. и некоторые другие.

Оценим влияние этих факторов на выбор целевой функции.

B.3.2.1. Технологии.

Технологии быстро меняют общую картину отрасли, оказывая влияние на конкурентные преимущества той или иной компании и влияя на выбор целевой функции. Часто одна технология, зародившись в недрах одной компании, в течение 3 лет становится промышленным стандартом. Примером может служить технология AJAX, выросшая из недр корпорации Microsoft. В начале она была малозначащим дополнением к браузеру Microsoft Internet Explorer 5.0, позволяющим читать и отображать документы XML-разметки. По мере развития технологии XML и другие браузеры (Mozilla Firefox, Opera) обзавелись своими XML-движками. Однако только в 2005 году, после реализации поддержки XML-документов в браузерах Интернета, выяснилось их дополнительное преимущество: при реализации динамических страниц можно менять разметку веб-страницы непосредственно в клиентском компьютере (средствами DHTML и JScript) [22], а обмен информацией с сервером вести средствами XML. Именно эта технология стала называться AJAX. Она позволила создавать web-сервисы, работающие на порядки быстрее, чем на основе PHP технологии, и стала основой современных приложений Web 2.0. Поэтому, разрабатывая план развития Интернет-бизнеса, необходимо учитывать эту технологию.

Следующей технологией, намного изменившей характер матримониального общения, стала технология службы знакомств с использованием Интернета. «Традиционные» службы знакомств – это клубы «кому за 30» и «агентства знакомств по переписке». Чтобы обратиться в такое агентство, человек должен быть, во-первых, не ленивым, а во-вторых, достаточно «мужественным» – необходимо было признать свои проблемы и комплексы. С использованием Интернета проблема поиска друзей и спутников жизни намного упростилась. На сайте знакомств необходимо только заполнить анкету, указать свои контактные данные – и компьютер по своей базе подберет нужных Вам знакомым. Вы можете давать о себе не всю информацию, менять условия поиска – компьютер найдет для Вас подходящих собеседников, причем во всех уголках мира. Чтобы общаться, Вам не нужно будет ходить в клубы – Вы можете общаться за компьютером в любое удобное для Вас время. Конечно же, живого общения не заменит ни E-mail, ни ICQ. Но значительно расширить круг друзей он может.

Таким образом, выбирая способы оптимизации целевой функции, самое пристальное внимание уделите технологии, которые Вы используете сейчас, и которые находятся в процессе внедрения. Это может намного изменить «расклад» в поиске материалов для датамайнинга.

B.3.2.2. Наличие производства (основные средства).

При оптимизации целевой функции следует учитывать, какими основными средствами располагаете Вы или Ваша компания. Конечно, чтобы заняться торговлей или писательским трудом особых капитальных вложений не нужно, и этот пункт Вы можете пропустить. Но большинство производств требует значительных капитальных вложений.

Например, Вы хотите выпускать продукцию микроэлектроники. Это сразу требует присутствие:

1. Необходимого технологического оборудования (для подготовки подложек, их литографии, собственно процесса создания пластин, создания контактов, тестирования пластин, их резки, помещения в корпус и т.д.);
2. Здания и сооружений, в том числе и специализированных («чистая комната»);
3. Лабораторий для входного и выходного контроля.

К тому же технология изготовления полностью меняется раз в три года. Это значит, что ровно с такой периодичностью Вам нужно производить реконструкцию предприятий. Необходимо учитывать большое количество брака в производстве (в среднем – 10%). Но это стоит того – готовая микросхема, изготовленная по самым современным технологиям, стоит порой тысячи долларов (например, микропроцессор Intel Core 2 Duo)..

Естественно, оптимизация целевой функции в микроэлектронике будет зависеть от Вашего реального положения в этой отрасли. Естественно, соблюдать самые современные типоразмеры в микроэлектронике (90 нм) России не под силу. Однако, используя технологию 5-8 летней давности, соответствующее ей оборудование, можно изготовлять другие микросхемы (например, сигнальные процессоры, модули SRAM), которые хотя и стоят дешевле, но брак в выпуске которых уменьшен в десятки раз (менее 1%).

Естественно, выбирая целевую функцию, Вы учитываете, помимо технологий, существующие основные средства и приборную базу, а также количество выделяемых средств на ее модернизацию.

Сравнивая средства производства в Вашей организации и предприятиях конкурентов, Вы можете осознанно выбрать целевую функцию именно для Вашего производства.

B.3.2.3. Кадры.

Занимаясь бенчмаркингом, обязательно в качестве конкурентного преимущества или, наоборот, слабой стороны своей организации учитывайте свой кадровый состав (персонал). Замечание И.В. Сталина: «Кадры решают все», – остается актуальным и в наши дни. Никакая самая современная технология, никакое самое современное производство не будет работать, если не решен вопрос: кто будет работать на этих установках, на этом оборудовании. Например, многие установки, купленные за валюту в 70-е – 80-е года прошлого века за валюту, в 90-е годы были законсервированы (или просто демонтированы и проданы на металлолом) только потому, что из-за низкой зарплаты «старые» специалисты ушли из лабораторий, не передав свои знания новым сотрудникам (этот пример автор взял из своей практики работы после института).

Поэтому, занимаясь датамайнингом, выбирая целевую функцию для ее оптимизации, задайтесь вопросом: «а может ли быть реализована целевая функция с существующим персоналом? Соответствует уровень технологии и уровень решаемых задач уровню подготовки персонала? Не будет ли человеческий фактор «слабым звеном» Вашей целевой функции?».

B.3.2.4. Организация труда.

Рассматривая пункт из предыдущего раздела, необходимо отметить, что кроме грамотных кадров, способных работать с новыми технологиями и новым оборудованием, необходимо также создать эффективную организацию труда специалистов. Неудача многих проектов по разработке и внедрению программных продуктов на предприятиях в основном заключается именно в неумении руководителей проектов правильно распределить обязанности и обеспечить фронт работ. Работу руководителя проекта иллюстрирует пример, приведенный автором в п. B.3.1.2.4. Для того чтобы не «ужимать» полена, не работать в «авральном» режиме и не искать виноватых в случае неудачи проекта, руководителю проекта необходимо:

1. Как можно теснее вести работу с заказчиками проекта, выясняя необходимые требования и функциональность продукта;
2. Обеспечить соответствие требований к функциональности продукта бизнес-процессам, которые происходят на предприятии заказчика;
3. Правильно организовывать работу подчиненных программистов;
4. Вести «нормоконтроль» затраченного времени в стадии осуществления проекта и добавлении нужной функциональности;
5. На основании данных нормоконтроля планировать реальные сроки исполнения проекта.

Руководителю необходимо помнить, что сроки исполнения проекта – это реальная прибыль предприятия. Здесь изречения Б. Франклина: «Время – деньги», – работает как нельзя кстати.

Учет существующей организации труда на Вашем предприятии поможет Вам лучше оптимизировать целевую функцию (в плане экономии ресурсов и уменьшении времени исполнения проекта). Изучив организацию труда в отрасли, можно оценить принципиальную возможность осуществления Вами проекта и соответствие выбора Вашей целевой функции, как модели процесса, так и найденным в результате датамайнинга фактам.

B.3.3. Определение приоритетов.

Выбор целевой функции в основном ограничивается следующими вариантами, которые имеют под собой четкую экономическую основу. Этими вариантами могут быть:

1. Минимизация издержек.
2. Экономия ресурсов.
3. Повышение качества.
4. Минимальные сроки исполнения.

Рассмотрим выбор этих приоритетов в зависимости от этих приоритетов.

Пример № 1.

Вначале рассмотрим самый «неправильный» способ мотивации: Вам необходимо купить имиджевый сотовый телефон. Естественно, приоритет № 2 срезу отпадает (имиджевые телефоны дешево не стоят), а приоритет № 3 встает во главу угла. Но, в зависимости от Вашего характера, Вы можете осуществить следующие действия:

1. «Мне нужен телефон «здесь и сейчас», я не хочу ждать и за ценой не постою». В этом случае на первый план встает приоритет № 4. Вы идете в первый попавшийся салон сотовой связи и покупаете первый попавшийся телефон за любые деньги.
2. «Мне нужен качественно сделанный телефон «белой сборки», с гарантией и наиболее дешевый из аналогичных сотовых телефонов на рынке». В этом случае на первый план выходит приоритет № 1. В этом случае Вы объедите не один магазин электроники, и, в конце концов, выберите модель на заказ. Сроки получения телефона могут отличаться от указанных в пункте 1 в десятки раз. Однако Вы получите именно то, что Вам нужно по приемлемой для Вас цене.

Как мы видим из реализации этого примера, выбор одного приоритета может сводить на нет реализацию другого приоритета. В данном случае выбраны две целевой функции:

1. «Высшее качество + Минимальные сроки исполнения».
2. «Высшее качество + Минимизация издержек».

Соответственно получили разные результаты в результате реализации этих целевых функций.

Пример № 2. Выбор спутника жизни.

Рассмотрим типичную «земную» ситуацию, которую приходится решать каждому молодому человеку или женщине – выбор спутника жизни. Ситуация, мотивируемая, прежде всего сексуальными желаниями, однако, поддается и логическому контролю. Здесь также возможен выбор и оптимизация целевой функции. Подойдем к этому вопросу «с научным» подходом (см. интеллект-карту на рисунке B.002).

Рис. B.002. Выбор спутника жизни. Интеллект карта.

В этой проблеме можно выделить следующие аспекты:

1. Сексуальный.
• Удовлетворение своих сексуальных потребностей и фантазий;
• Продолжение рода (в смысле здорового потомства);
2. Экономический.
• создание «экономической ячейки» общества;
• совместные расходы на семью;
• поддержка от детей в старости;
• поддержка родителей;
• экономическая независимость;
• совместная работа и отдых;
3. Социальный.
• создание прочной семьи;
• воспитание детей;
• образование детей;
• увеличение и улучшение качества «человеческого ресурса» в регионе;
• возрастание «расовой» и «национальной» самобытности населения;
• боязнь одиночества.

В соответствии этим мотивам ставится в соответствие целевая функция:

1. Выйти за красивого, сексуального мужчину;
2. Выйти за богатого жениха;
3. Выйти за семьянина;
4. Выйти за доброго, ласкового человека;
5. Выйти за умного, образованного мужчину;
6. Выйти за иностранца;
7. Выйти за кого угодно.

В принципе, нет «идеального» мужчины, который бы удовлетворял всем требованиям. Поэтому замужество – это всегда компромисс между желаниями и необходимостью. На прилагаемой интеллект карте выделено цветом соответствие основных требований к жениху и поставленным целям замужества. Единственный «неправильный» мотив замужества – это «боязнь одиночества» (на карте он выделен шрифтом и оранжевым цветом). В крайнем случае, можно воспользоваться «утешением» одной дамы: «Я хотела выйти замуж за рыжего мужчину. Вот я его и получила!».

Как видите, целевая функция в этом случае не ограничивается чисто экономическим выбором целевой функции. Однако при реализации целевой функции Вам также придется решать вопросы оптимизации этой функции, исходя из Ваших приоритетов. Просто, кроме «чисто экономического» фактора, Вам придется принимать во внимание и другие факторы (факторы восприятия, «эмоциональные» факторы и т.п.).

=== *** === *** ===

Таким образом, Вы можете видеть, что выбор целевой функции – не тривиальная задача, которая должна учитывать влияние и взаимодействие множества факторов, как экономических, так и других. Выбор целевой функции требует Вашей серьезной подготовки как специалиста в предметной области. Вы также должны обладать широким кругозором, экономическими, маркетинговыми и психологическими знаниями, навыками работы с людьми. Важно отметить, что выбор целевой функции – всегда «рациональная» задача, в которую не должны входить «чувственные» и «иррациональные» (страхи) субстанции. Если же Вам необходимо учитывать чувственные и иррациональные составляющие целевой функции, то максимально осмыслите и «рационализируйте» эти функции.

B.3.4. Формулировка целей и миссии.

Осуществив осознанный выбор целевой функции, Вам необходимо обозначить цель и миссию Вашей работы (аналитической записки, бизнес-плана и т.п.), по крайней мере, для себя.

Целью Вашего исследования могут быть вполне приземленные функции: получить максимальную прибыль, увеличить Ваши преимущества по сравнению с конкурентами, сделать успешные вложения средств в инвестиционный проект, снизить свои затраты без снижения конкурентоспособности продукта, «выгодно» выйти замуж, решить свои личные проблемы и т.п. Важно обозначить цель своего исследования (этих целей не должно быть больше трех), чтобы правильно написать документ после реализации датамайнинга.

Однако, помимо цели исследования, необходимо также указать его миссию. Да, цели Вашего исследования могут быть вполне приземленными. Однако Ваше исследование ничего не стоит, если Вы не рассмотрите и «миссию» вашего исследования. Миссия – это описание общественно значимой цели, ради которой Вы решили осуществить Ваше исследование. Да, Ваши цели исследования могут быть эгоистичными. Но миссия исследования должна быть всегда общественно значимой. Миссия не должна занимать более одного предложения, но должно явно показать общественную, «альтруистическую» природу Вашего исследования. Поэтому описание миссии обязательно включается в описание бизнес-плана.

При всей своей альтруистичности миссия обязана быть реальной и конкретной. Так, неприемлемы следующие миссии:

• «Проект поможет Вам избавится от всех Ваших проблем»;
• «Проект приведет к осуществлению всеобщего блага (мира во всем мире, всеобщего богатства) для человечества»;
• «Проект позволяет помочь большинству населения помочь в ...».

Эта миссия ассоциируется у автора с приемом наркотиков или проповедования «опиума для народа», «программы спасения нации и человечества» и другими пропагандистскими заявлениями. Чтобы правильно сформулировать миссию, необходимо ответить на два вопроса:

• Чем бы мне помогло это исследование, если бы я узнал бы о своем проекте совершенно случайно, от посторонних лиц?
• Как бы я прореагировал на исследование или его результаты, если бы я был посторонним лицом?

Эти вопросы необходимо «прочувствовать на себе», а уже потом писать миссию проекта и/или обоснования его необходимости.

B.3.5. Резюме.

В этом параграфе вы ознакомились с основными «рациональными» аспектами выбора целевой функции. Конечно же, одни эти аспекты не обеспечивают все многообразие вариантов выбора целевой функции для датамайнинга. Но в одном Вы убедились, кроме мотивации, необходимо учитывать множество факторов, которые напрямую влияют на выбор целевой функции, а значит – и на качество результатов датамайнинга.

Примером неправильно поставленных целей для датамайнинга может служить террористические акты 11 сентября 2001 года, которые приведены в [23]. В статье приводятся факты, что аналитики ЦРУ, исследуя данные из открытых источников, прежде всего Интернета, предупреждали о подобной угрозе. «К весне 2000 года, то есть за двадцать месяцев до трагедии, был составлен список лиц, потенциально представляющих опасность (среди сети Аль-Каида – примечание автора). И среди фигур, предположительно связанных с организаторами взрыва 1993 году во Всемирном торговом центре, в списке фигурировало четверо из тех людей, что впоследствии устроят теракт 9/11...». Этим данным не придали значения, поскольку не считали Аль-Каиду организацией, представляющую угрозу для безопасности США. Таким образом, информация, которая собиралась с 1999 года, и с помощью которой можно было предотвратить теракты, оказалась не востребованной

Другим примером неудачного выбора целевой функции для датамайнинга является подтасовка фактов о наличии у Ирака оружия массового поражения. Поскольку была установка на доказательство этого предположения, все факты подтасовывались, а иногда были вообще сфабрикованы. В результате Америка была втянута в одну из самых непопулярных войн с 60-х годов прошлого века.

И, наконец, надо помнить правило: «Нельзя оценивать и осуждать здесь и сейчас, что было там и тогда!» Это означает, что датамайнинг нужно вести с поправкой на время исследования и даты доступных материалов для исследования, а также учитывать территорию, на которой ведется исследования, национальные и местные особенности. Одной из причин неудачи реформ 90-х годов XX века явилось как раз то, что политические лидеры и ученые были не готовы проводить необходимые преобразования с учетом национальных особенностей и характера населения России, о чем впоследствии говорил мэр Москвы Ю.М. Лужков (в [лекции «Законы Паркинсона по-русски»]).

Надеюсь, читатель не совершит подобных ошибок, выбирая для целей датамайнинга целевую функцию.

B.4. Выбор целевой функции.

После рассмотрения всех моментов, касающихся мотивации выбора и собственно выбора целевой функции, необходимо рассмотреть вопрос: «А как меняется сама целевая функция при датамайнинге?». Этому вопросу и посвящен данный раздел.

В данном разделе используются термины: «классический датамайнинг» и «креативный датамайнинг». Хотя их определение дается только в разделе C, их использование начинается именно с этого момента, когда дается определение целевой функции. Понятие «целевая функция» первично. Если не будет целевой функции, то датамайнинг превратиться в банальный «Интернет серфинг», «развлекательное чтиво» или другие способы приятного, но бесполезного время препровождения. Вот почему взаимодействию целевой функции и датамайнингу посвящен целый раздел.

В данный раздел входит описание:

1. Методов классического датамайнинга.
2. Методов креативного датамайнинга.

В конце раздела приводится резюме по его пунктам.

B.4.1. Методы классического датамайнинга.

Вначале рассмотрим применение классического датамайнинга. Он применим в следующих случаях:

1. Модель изучаемого явления выбрана.
2. Целевая функция определена.
3. Необходимо только подобрать факты, которые подтверждают или опровергают данную модель, указывают на возможность применения к модели выбранной целевой функции и факты, позволяющие оптимизировать целевую функцию.

Заметим, что результатом классического датамайнинга является не создания прототипа и не разработка системы управления, а только определенная бумага: аналитическая и служебная записка, техническое задание, бизнес план и другие бумаги, с помощью которых можно принять решение и дать приказ на исполнение.

Классический датамайнинг должен включать в себя следующие этапы:

1. Анализ возможности реализации целевой функции;
2. Поиск информации;
3. Анализ достаточности информации, и;
4. Написание итогового документа.

В случае, если в п. 3 выявится недостаточность информации по модели, необходимо использование креативного датамайнинга (смотри раздел B.4.2.), с последующим возвращением к п. 1 (см. диаграмму «Соотношение классического и креативного датамайнинга»).

Рис. B.003. Соотношение классического и креативного датамайнинга.

B.4.1.1. Анализ возможности реализации целевой функции.

После выбора целевой функции для модели (см. п. B.3.) самое важное, что нужно проверить – это соответствие целевой функции модели. Тут возможны следующие варианты:

1. Модель выбрана правильно, но целевая функция выбрана неверно. Эта ситуация грозит тем, что имеющиеся материальные, людские и информационные ресурсы будут использоваться неэффективно;
2. Целевая функция – «правильная», но модель выбрана неправильно. Это тот случай, когда ставятся недостижимые цели, слова расходятся с делом, производятся работы, не подкрепленные ресурсами и т.п.;
3. И целевая функция, и модель выбраны неправильно. Это вообще нонсенс. Получается, что «правая рука не знает того, что делает левая». При таком раскладе поражение неизбежно;
4. Целевая функция и модель выбраны правильно. Если это так, то датамайнинг поможет Вам найти пути оптимизации целевой функции.

При анализе целевой функции используются следующие критерии:

• Полнота целевой функции;
• Непротиворечивость целевой функции;
• Соответствие целей и возможностей.

Рассмотрим эти критерии поподробнее.

Полнота целевой функции.

Полнота функции обозначает, что она охватывает и позволяет оптимизировать все существенные для модели параметры. Неполнота целевой функции обычно приводит к тому, что какое-нибудь свойство модели будет не оптимизировано, и в результате построенная по модели технология может принести Вам неприятный сюрприз. В технике это грозит неожиданной поломкой и аварией. В бизнесе – неожиданными убытками. В маркетинге это грозит отсутствием продажи товара. На любовном фронте – разочарование в партнере. И так далее.

Непротиворечивость целевой функции.

Помимо требования к полноте целевой функции, к ней предъявляются требования по непротиворечивости. Непротиворечивость – это отсутствие в функции «коллизий», противоположных требований, мешающих оптимизировать функцию. При больших количествах коллизий целевую функцию нельзя не только оптимизировать, но даже и использовать – она становится бесполезной для исследователя. Примеры коллизий следующие:

• В маркетинге – это снижение издержек и увеличение расходов на рекламу. Применение обоих этих методов позволяет увеличить прибыль от реализации товара. Однако при увеличении рекламного бюджете растут непроизводственные издержки на обслуживание товара. Чтобы «расшить» эту коллизию, необходимо разбить непроизводственные издержки по категориям, ограничить рекламу только одним сегментом рынка, контролировать возврат средств от рекламы. В общем, надо работать.
• В технике. При разработке механизма необходимо учитывать следующие, часто противоположные, технические характеристики: небольшой вес и размер, повышенная прочность, твердость и пластичность, стойкость к агрессивной среде и др. Чтобы удовлетворить этим условиям, необходимо использовать в конструкции разных материалов, «подгоняя» материал под необходимые требования изделия. Однако при этом может получиться очень дорогая технология изготовления изделия, даже из дешевых материалов. Поэтому при изготовлении технического изделия необходимо «оптимизировать» множество вариантов, чтобы выбрать нормальную целевую функцию. В этом состоит мастерство инженера.

=== *** === *** ===

При разработке целевой функции необходимо помнить основную логическую теорему Гёделя, которую он доказал для математических теорем:

«Любая теория, основанная на допущениях, принимаемых без доказательств, является либо неполной, либо противоречивой».

Следствие у этой теоремы следующее: «Чтобы доказать полноту либо не противоречивость общей теории, надо построить еще более общую теорию, для которой эта теория будет частным случаем». Таким образом, признается, что не бывает совершенных целевых функций, удовлетворяющей всех по полноте и непротиворечивости. Более того, не существует алгоритма создания такой функции. Её выбор – это Ваша забота и Ваша ответственность. Однако прежде чем Вы будете выбирать и оптимизировать целевую функцию, вспомните еще об одном свойстве целевой функции.

Соответствие целей и возможностей.

Допустим, с целевой функцией у Вас все в порядке – вы нашли баланс между полнотой и непротиворечивостью функции, несете проект начальству, и... Оно говорит Вам, что в таком виде это все ему не нужно. Приводим примеры.

• Вы проектируете пассажирский самолет. В результате Ваших исследований выяснилось, что оптимальным вариантом для самолета будет титановый корпус. Допустим, Вы даже нашли продавца, который Вам недорого поставит сырье – титановые заготовки. Однако при переходе с алюминия на титан полностью меняется технология изготовления. Необходимо переоснастить станочный парк, подготовить новых специалистов, конструкторским бюро необходимо пересчитать прочностные характеристики выпускаемых изделий. Короче говоря, Вам ради одного двух самолетов в год необходимо будет построить новый завод, с циклом от начала строительства до выхода готовой продукции – не менее 5 лет. Естественно, Ваш пыл никто не поддержит.
• Вы решили выйти замуж за иностранца? Если это так, то готовьтесь к тому, что список претендентов, доступных Вам из России, будет ограниченным. «Невесты» из России в основном ищут себе женихов по сайтам знакомств. Однако некоторые из этих сайтов пользуются дурной репутацией как сайты, на которых «неудачники ищут неудачников». В результате поиска Вы можете обнаружить, что Вами интересуется неквалифицированный рабочий, получающий 3 тыс. долларов в месяц. Кроме того, он любитель извращенного секса. Конечно, кому-то он может быть интересным... Но все-таки признайтесь – тот ли этот вариант, чтобы менять гражданство? Более-менее приемлемый вариант найти себе в мужья англичанина – уехать жить в Англию на полгода. Однако вопрос – а хватит ли у Вас финансов прожить в незнакомой стране полгода? А дадут ли Вам визу на такой долгий срок, если в графе «цель посещения» у Вас будет стоять прочерк? Как видите, возможности здесь накладывают ограничение на целевую функцию.

B.4.1.2. Поиск дополнительной информации.

Итак, тем или иным способом Вы, наконец-то, выбрали целевую функцию, которая удовлетворяет Вашей модели процесса. Уже в процессе выбора этой функции, а тем более на этапе её утверждения, необходимо проверить соответствие модели явления и выбранной для нее целевой функции происходящему процессу. Вот где Вам в полной мере пригодятся навыки классического датамайнинга! Но при поиске информации Вам нужно будет принять только достоверные факты, которые;

• опровергают данную модель, либо;
• аргументировано подтверждают Вашу модель.

Рассмотрим этот выбор поподробнее.

Факты, подтверждающие выбор модели.

Это самые важные для Вас факты. Без этих фактов Вы не сможете доказать остальным как верность своей модели, так и правильность выбора целевой функции. Однако, подбирая факты и доказательства, не будьте предвзяты. Посмотрите критически: а правильная Ваша аргументация? Не идете ли Вы на поводу чьего-то (пусть даже общераспространенного) мнения? Не тенденциозно ли подобраны Ваши факты? Насколько много в этих фактах Вашего «личного» мнения?

Факты, опровергающие выбор модели.

Если Вы в литературе, в частной беседе, из других источников узнали факты, которые противоречат Вашей модели или ставящие под сомнение Вашу целевую функцию, то Вам следует основательно задуматься. Конечно, эти факты могут быть Вам подкинуты из-за зависти к Вашим успехам, либо они отражают мнение «очень узкой» группы лиц и т.д. Часто эти факты появляются в результате того, что кто-то не принимает используемый Вами метод доказательства. В этом случае «по просьбе зрителей» приведите удобный для них способ доказательства (он обязательно имеется, если Ваши доводы правильны). В противном случае Вам следует немного (или не немного – это зависит от серьёзности возражений) подкорректировать Вашу модель.

Проверка фактов.

Из вышесказанного Вы убедились, какие факты нужно подбирать в процессе датамайнинга. Теперь коснемся вопроса, какие же факты нужно признавать достоверными. Сразу отметим: любой факт, даже произнесенный «с бодуна в пивной», может быть и полезным, и достоверным. Необходимо его только правильно законспектировать. Поэтому любой факт сразу следует проверять:

• на полноту;
• на непротиворечивость;
• на предвзятость.

Полнота фактов.

Любое суждение, особенно выбираемое для целей датамайнинга, должно быть полным. Нельзя в качестве доказательства использовать «цитатник из речей великих людей», оторвав их от ситуационного и временного контекста. Всё, что раньше считалось безусловным, сегодня может стать сомнительным (как, например, отношение к коллективизации, затеянной большевиками в 1930-е годы). И наоборот! Поэтому, подбирая материал, необходимо учитывать:

• ситуационный фактор (где это было сказано);
• временной фактор (когда это было сказано);
• контекстный фактор (как это было сказано);
• персоналии (кем это было сказано),

и, делая ссылки, необходимо указать все эти пункты. Дело в том, что высказывания одного и того же человека в разных местах в разное время (например, писателя А.Н. Толстого до и после возвращения в СССР после эмиграции) могут кардинально различаться!

На полноту высказываний влияет также формат их получений. Так, на пресс-конференции получить достоверную информацию сложнее, чем при персональном интервью. На материалах одной статьи труднее получить полную информацию, чем на материале подборки статей или монографии. Поэтому, найдя где-либо интересующий Вас факт, проверьте его по ссылкам на первоисточники, на результаты исследований, экспериментов, описание методик и т.п. Очень осторожно относитесь к фактам: «полученных из конфиденциальных источников» или «представляющих коммерческую тайну» (иначе говоря, просто «украденных» кое-кем у кое-кого), к различным «слухам» и т.п. Конечно же, «дыма без огня не бывает». Однако долго держать в секрете Важные данные тоже нелегко – «шила в мешке не утаишь». Поэтому такие факты надо проверять.

Непротиворечивость.

К сожалению (как это следует из теоремы Гёделя), «самые полные факты одновременно являются самыми противоречивыми». Примером этой противоречивости могут быть:

• библия (с ее советами: «око за око, зуб за зуб» и «если тебя ударили в правую щеку, подставь левую»);
• Капитал К. Маркса (с его безапелляционным заявлением, что «все товары продаются по их стоимости» и длинными, почти на три тома, исключениями из этого правила);

Однако такие «ляпы» говорят вовсе не об истинности или ложности учения, а лишь о том, что теория «переросла сама себя», «объяла необъятное», и ей на смену должна прийти новая теория. Как уже говорилось выше: «нельзя утверждать здесь и сейчас то, что было там и тогда». Поэтому «противоречивость» теории не более и не менее опасна, чем ее неполнота. Поэтому, встретившись с противоречиями, не отчаивайтесь – может быть, в процессе подбора фактов Вы обнаружите то, что верно «здесь и сейчас»!

Предвзятость информации.

Помимо полноты и противоречивости информации, необходимо проверять ее на предвзятость. Например, давно известна борьба разных научных школ и направлений. Их представители могут часами спорить о достоинствах и недостатках своих методик, о «достоверности» полученных ими фактами. Однако часто эти споры можно свести к классическому высказыванию: «как будем мерить нашего павиана: с головы до хвоста или с хвоста до головы?». Однако есть и более серьезные предвзятости, которые могут привести к серьезным искажениям фактов.

Примером может служить статистика, собиравшаяся «антагонистичными противниками»: СССР и США друг на друга. Вкратце она показывала одно: «как у них плохо и как у нас хорошо». При этом забывалось, что и те, и другие нуждались в технологиях друг друга, необходимо было развивать торговлю, а значит – собирать маркетинговую информацию. Наконец, надо было больше собирать информации друг о друге, даже с целью дальнейшей конфронтации. Автор склоняется к мысли (IMHO!), что одной из причин того, что рухнувший «железный занавес» убил СССР, было и отсутствие у широкой массы людей достоверной информации о западном мире.

Однако этот принцип продолжает действовать. Так, в современной России вместе с антиэстонской и антигрузинской (середина 2007 года) компанией ведется работа по «очернению» ситуации в этих странах, в том числе и деловой. Это больно ударило по российскому бизнесу в этих странах. В самом деле, будете ли Вы вкладывать деньги в то, что Вы не знаете или знаете с «плохой» стороны? В результате Россия и эти страны теряют тот «капитал доверия», который с большим трудом был собран нашими бизнесменами. Автор не обвиняет и не защищает ничью сторону. Просто замечание: «Давайте будем людьми!«

Итак, предвзятая информация – это, безусловно «неполная и противоречивая» по определению. Поэтому «надо знать врага в лицо», и, узнав «горячий» факт, представляющий для Вас интерес, задайте себе вопрос: «А кому выгоден «слив» этой информации?». Ответив на этот вопрос, изучайте эти факты далее.

B.4.1.3. Анализ достаточности информации.

Собрав необходимые для Вас данные, Вам следует решить:

• продолжать ли сбор информации?
• изменить ли модель, опираясь на известные факты?
• начать писать бумагу, которая является итогом проведенного датамайнинга.

Это можно определить, только проанализировав материал на его достаточность. Анализ на достаточность включает в себя три этапа:

• оценка адекватности данных модели;
• оценка систематической ошибки;
• оценка случайной ошибки.

Рассмотрим эти оценки поподробнее.

Оценка адекватности данных модели.

Здесь придется принимать решение, основанное на информации из предыдущего пункта. Необходимо оценить все факты «За» и «Против» используемой модели и принять решение об адекватности модели. По-существу, принятие этого решения – дело весьма субъективное. Однако есть некоторые математические правила, позволяющие оценить «точность» фактов и степень их соответствия модели. Здесь может быть полезна математическая статистика, которая позволяет найти «наиболее вероятные» значения и степень «отклонения их от среднего». Оценкой систематической и случайной ошибки будет сказано ниже. Отметим, что в сложных случаях (когда выражено два или более равновероятных значений), то об адекватности модели ничего нельзя сказать, и необходимо сразу перейти к креативному датамайнингу и коррекции модели.

Оценка случайной ошибки.

Допустим, Вы собрали в результате датамайнинга материал, который можно подать в численном виде. Сразу после сбора занесите его результаты в таблицу Excel и постройте столбчатую диаграмму. В этой диаграмме по оси абсцисс будет приведено значения Вашего параметра, а по оси ординат – частота появления параметра в опросе. В случае если диаграмма «рваная» (между столбцами есть значительные пробелы), попробуйте укрупнить диаграммы, объединив соседние, близлежащие столбцы диаграммы. В случае если материал нельзя представить в численном виде, расположите столбцы диаграммы по убыванию частоты ответов на вопросы. Если у Вас все получилось правильно, то у Вас должна появится либо «колокол» вокруг наиболее вероятного значения, либо «экспонента» от наиболее часто встречающихся до наименее часто встречающихся ответов. После того, как диаграмма построена, ее можно начать анализировать.

С практической точки зрения, интервал, содержащий случайную ошибку, должен находиться в пределах +/- 5% от максимального значения. Все остальные значения, не попадающие в интервал вероятности 95%, отбрасываются. В книгах по математической статистике есть специальные формулы, позволяющие подсчитать эту вероятность [24]. Таким образом, можно «научно» обосновать адекватность целевой функции модели.

Проблема может возникнуть либо тогда, когда-либо интервал случайной ошибки слишком широк, либо на столбчатой диаграмме имеется два «колокола», либо когда экспонента имеет слишком малое затухание. Это может свидетельствовать о том, что в Ваших данных присутствует систематическая ошибка. О ней мы поговорим ниже.

Оценка систематической ошибки.

Если «случайная» ошибка объясняется случайными флуктуациями в ходе эксперимента и характеризуется равным отклонением в ту или иную сторону, то «систематическая» ошибка «накладывается» на случайную и имеет всегда один и тот же знак. Систематическая ошибка может проявиться:

• в результате тенденциозного подбора источников информации:
• в результате неполноты собранных данных (данные надо собирать и у сторонников, и у противников Вашей модели);
• в результате неправильной выборки (неправильно поставленных вопросов);
• иногда в результате реального расслоения мнений на две равные части (как, например, при голосовании за президента Франции в 2007 году, где победитель определился перевесом в 3% голосов).

В случае если Вы видите систематическую ошибку в Ваших данных, или у Вас появились «тревожные симптомы», перепроверьте все Ваши данные и источники информации! Если же систематическая ошибка велика, попробуйте изменить модель. После чего займитесь креативным датамайнингом.

B.4.1.4. Создание систем реализации. Написание итогового документа.

После сбора всех фактов, подтверждающих выбранную модель, и оптимизации целевой функции начинается процесс создания системы реализации и написания итогового документа. В качестве документов, в котором подытоживается работа по датамайнингу, могут быть:

1. В коммерческих организациях:
• Аналитическая записка;
• Служебная записка;
• Маркетинговый паспорт;
• Бизнес план;
• Финансовый отчет;
2. В технических службах:
• Аналитическая записка (о новой технике/технологии);
• Задание на разработку устройства или узла;
• Техническое задание;
• Технический регламент;
• Регламент технического обслуживания;
3. Для студентов и преподавателей:
• План – программа курса (лекций, семинаров и т.д.);
• Курсовая работа;
• Дипломная работа;
• Планы исследований;
• План (набросок) научной статьи;
• Отчет по грантам или государственному финансированию;
4. Для обывателя:
• Варианты покупки дорогостоящего товара;
• Набросок брачного контракта;
• Справочник (база данных) телефонов и адресов магазинов, аптек, ремонтных мастерских и т.п.

Для написания таких работ существуют методические рекомендации. Эти рекомендации и правила меняются в разных организациях, поэтому автор советует изучить правила составления документов, принятых в Вашей организации.

B.4.2. Методы креативного датамайнинга.

В случае, если:

• собранные в результате датамайнинга факты противоречат выбранной в начале модели;
• существующими данными нельзя однозначно подтвердить или опровергнуть модель;
• выбранная целевая функция не поддается оптимизации;
• в процессе датамайнинга получены факты, не противоречащие модели, но и не укладывающиеся в первоначально выбранную модель события;

то самое время заняться креативным датамайнингом.

Креативный датамайнинг поможет Вам решить следующие проблемы:

• «подкорректировать» целевую функцию в случае очевидного несоответствия функции и выявленных в результате датамайнинга фактов;
• найти пути исправления модели явления в случае, если факты противоречат первоначально выбранной модели;
• определить некорректность модели либо целевой функции;
• выбрать новую модель и целевую функцию;
• дополнить целевую функцию новыми свойствами и особенностями, которые были проигнорированы при первоначальном выборе целевой функции.

Креативный датамайнинг включает в себя следующие этапы:

1. Анализ возможностей создания новой модели процесса.
2. «Мозговой штурм».
3. Целенаправленная переработка данных, собранных в ходе начальной реализации целевой функции.
4. Уточнение новой модели методами классического датамайнинга.

Рассмотрим эти этапы поподробнее.

B.4.2.1. Анализ возможностей создания новой модели процесса.

После того, как при использовании классического датамайнинга Вы выяснили некорректность первоначально поставленной модели или целевой функции, Вам нужно будет, прежде всего, обосновать принципиальную возможность использования для описания проблемы какой-либо из известных моделей. Также, в случае корректности модели, необходимо обосновать применимость к данной модели одной из стандартных целевых функций (см. раздел B.3.3.).

Приведем пример. Автор данной работы искал в Интернете конвертер текста между форматами HTML и Latex. Этот конвертер должен удовлетворять следующим условиям:

1. Быть бесплатным для некоммерческого использования;
2. Быть просто устанавливаемым и, желательно, быть реализованным в виде скомпилированного модуля;
3. Хорошо передавать функции форматирования текстов;
4. Должен быть способен корректно обрабатывать символы кириллицы;
5. Обладать удобным интерфейсом (или графическим, или командной строкой);

Попытка поиска функций с этими условиями в русском сегменте Интернета (при помощи поисковых систем Яндекс и Рамблер) не увенчалась успехом. Попытка поиска во всех сегментах Интернета (с помощью метапоисковой системы Nigma) увенчалась частичным успехом. Первому условию удовлетворяло 2/3 найденных программных продуктов. Однако одновременное выполнение всех условий для одного продукта также не наблюдалось. Автору пришлось снизить требования к продуктам: были отброшены условия графического интерфейса, комплектование с собственным инсталлятором, а также поставки продукта в скомпилированном виде. В результате автор остановился на продукте HTML2Latex, написанном на языке Perl [25]. Он отличался неудобным интерфейсом и некорректной поддержкой функций кириллицы. После корректировки файлов с исходным кодом, а также написания макроса для вставки инструкций поддержки кириллицы в конвертированный файл Latex и «ручной» инсталляции модулей модуль стал корректно работать, причем как в операционной системе Windows, так и в Linux.

Этот пример показывает, что, изменив немного целевую функцию и скорректировав требования к модели (в данном случае – модели пользования), можно получить приемлемый результат, даже если вначале целевая функция определена некорректно. Автор хочет отметить, что такие ситуации в работе с техникой, на инженерных должностях, в бизнесе и науке встречаются постоянно. И человек, занимающийся датамайнингом, должен быть непросто гуру в поиске данных – он также обязан разбираться в проблеме, обладать способностями моделирования ситуации и выбора целевой функции. При этом часто изменение и корректировка вида целевой функции происходит без участия «заказчика исследований» (начальника и т.п.), и исследователю необходимо на завершающем этапе обосновать изменение целевой функции.

B.4.2.2. «Мозговой штурм».

После определения принципиальной возможности построения модели для описываемого явления и возможности выбора целевой функции для ее оптимизации, начинается собственно «творческий процесс» создания новой целевой функции или адаптации известной целевой функции к полученным в результате датамайнинга данным.

Собственно творческий процесс не поддается строгой регламентации. Однако автор работы рекомендует для целей креативного датамайнинга использовать старый и уже зарекомендовавший себя метод «добычи идей» – мозговой штурм.

Метод «мозгового штурма» является достаточно разработанным и формализованным методом «генерации новых мыслей». Традиционно для него сложились «обстановка» – небольшая аудитория, в которой может разместиться группа аналитиков; его «инструменты» – интеллект-карты, лист ватмана или грифельная доска. Вкратце метод «мозгового штурма» представляется следующей схемой:

1. Вначале аналитики знакомятся с сутью проблемы. Суть формируется в кратком изложении, в виде тезисов и списка значимых идей. Аналитики знакомятся с этой «выжимкой мыслей», и, читают ее до полного усвоения поставленной проблемы (запоминания тезисов);
2. Затем происходит небольшая (5-10 минут) пауза, в течение которой эксперты, не выходя из аудитории, отдыхают, релаксируют, но не разговаривают и не обсуждают обозначенную проблему. За это время в коре головного мозга экспертов происходит «установление связей» между тезисами. Этот этап аналогичен явлению аутотренинга [Владимир Леви. Искусство быть собой], когда после небольшого, но интенсивного внушения, человек расслабляется, и усвоение внушения идет ускоренными темпами;
3. После этого каждый эксперт высказывает свои соображения, мысли, замечания по указанной проблеме. Эти замечания фиксируются, но не обсуждаются. Фиксация проблемы происходит либо путем записи на картах (как в иерархическом конспекте), либо записываются на диктофон, либо рисуются на листе ватмана или грифельной доске. Повторяем, что высказанные мысли вначале не обсуждаются, а сразу фиксируются, как только они «вынырнут из глубин подсознания». Это основное условие мозгового штурма!
4. Постепенно новые мысли иссякают, и начинается «повтор идей». Уловив этот момент, аналитики перестают «генерировать» новые мысли, а начинают устанавливать взаимосвязи между найденными мыслями и рисовать интеллект-карты.
5. В результате «мозгового штурма» работы аналитиков получается готовая интеллект-карта и/или иерархический конспект, который в графической форме и письменно раскрывает новые идеи и устанавливает взаимосвязи между новыми мыслями и уже сложившимися в процессе решения задачи фактами

Как правило, прочитав эту интеллект-карту, у человека, занимающегося датамайнингом, появляются новые возможности и направления дальнейшего поиска информации, а также выбора и оптимизации новой целевой функции.

В принципе, «мозговым штурмом» может заниматься и один человек, и не только в изолированной аудитории, но и на рабочем месте, перед компьютером. Принципиальны два условия:

1. После знакомства с сутью проблемы необходима релаксация;
2. Генерация идей должна происходить отдельно от их анализа. Желательно эти мысли сразу фиксировать на компьютере или листке бумаги, а, только после «генерации» всех мыслей переходить к их обработке.

Примером использования технологии «мозгового штурма», проводимым одним человеком – автором данной работы, при составление выпуска «Браузеры Интернета», является нарисованная ниже интеллект-карта.

Рис. B.004. Интеллект карта «Браузеры Интернета».

• Вначале автор поставил задачу описать проблему (браузеры Интернета). В результате появился центральный узел;
• Потом автор разделил описание всех браузеров на общие вопросы функционирования (ветвь «Все браузеры») и конкретного описания браузеров (в виде «Клиенты Windows» и «Клиенты Linux»);
• На узле «Все браузеры» автор выделил три составляющие браузеров: базовые элементы Интерфейса, службы Интернета, которые обслуживают браузеры, и технологии, поддерживаемые браузерами Интернета.
• Далее, разобравшись с узлом «Все браузеры», автор отметил, что хорошо бы описать и службы Интернета, которые не поддерживаются браузером. Так появились узлы «Клиенты» и «Расширения».
• Заполнив все узлы темами, которые автор хотел отразить в выпуске, автор принялся «разукрашивать» эту интеллект-карту.
• В результате появилась интеллект-карта, с помощью которой автор мог создать план выпуска и наполнить его тезисами.

B.4.2.3. Целенаправленная переработка данных, собранных в ходе начальной реализации целевой функции.

Итак, этап «мозгового штурма» пройден, новая целевая функция предложена, решение проблемы продвинуто еще на один этап. Однако прежде, чем применять новую целевую функцию и новую модель на практике, необходимо проверить: «А как укладываются данные, собранные на предыдущем этапе датамайнинга, с новыми функциями и моделями?» Предположим, в результате «мозгового штурма» у Вас появились несколько новых идей о путях продолжения работы по сбору данных. Прежде, чем выбирать какую-нибудь модель, какой бы «красивой» она не показалось, сначала надо убедиться, что она соответствует фактам, собранным на предыдущем этапе. Это укладывается в общую схему: «Выдвижение версий» -> «Сбор данных» -> «Формулировка гипотезы» -> «Проверка гипотезы» -> «Построение теории» (см. рисунок B.005.).

Рис. B.005. Схема превращения версии в теорию.

Иначе говоря, прежде чем начать «заново» собирать факты в процессе датамайнинга, необходимо строго и скрупулезно проверить денные на их соответствие новой целевой функции.

Примером целенаправленной переработки данных может служить написание дипломной работы студентом. Написание дипломной работы (в основе которой уклон в научную деятельность) проходит следующие этапы:

1. Дипломник получает от своего руководителя тему для дипломной работы. Как правило, студент еще не научился самостоятельно выбирать тему и направление работы, и в этом ему помогает его научный руководитель. Руководитель, кроме темы, также предлагает студенту и пути решения проблемы, поставленные в дипломе (т.н. первичные версии).
2. Далее дипломник идет в библиотеку, и по монографиям, статьям авторов прежних исследователей, первоисточникам, а также по своим конспектам он ищет факты, подтверждающие или опровергающие первоначальный взгляд своего преподавателя. Этот труд впоследствии будет помещен в раздел диплома: «литературный обзор».
3. После сбора данных дипломник беседует со своим научным руководителем, и в процессе беседы (аналога «мозгового штурма») появляется законченная гипотеза.
4. Далее идет процесс многократной проверки этой гипотезы на состоятельность. Сюда включается:
• постоянный и непрерывный мониторинг статей в журналах, связанных с темой диплома;
• проведение экспериментов;
• проведение научных расчетов и «математического моделирования» на компьютере.

В результате этого процесса накапливается оригинальная информация, которая может помочь подтвердить или опровергнуть выдвинутую гипотезу. В случае «отрицательных результатов» гипотеза корректируется.

5. Наконец, после накопления теоретического и экспериментального материала начинается писаться собственно дипломная работа.

Этапы написания дипломной работы по приведенной выше схеме представлены на рисунке B.006.

Рис. B.006. Блок-схема процесса создания дипломной работы.

B.4.2.4. Конец креативного датамайнинга. Уточнение новой модели методами классического датамайнинга.

Итак, креативный датамайнинг завершен. Вы обосновали необходимость смены целевой функции и саму возможность выбора этой функции, в результате «мозгового штурма» выдвинули новые идеи по изменению модели и целевой функции, проверили эту модель на соответствие ранее собранным фактам. На этом этап креативного датамайнинга завершен.

Но дальше возникает новая проблема. Ведь Вы собирали из открытых источников данные, которые должны были подтвердить, опровергнуть или оптимизировать «старую» целевую функцию. О возможности смены целевой функции речь в то время не шла. Таким образом, получается, что Вы собирали «не те», «не совсем те» или даже «совсем не те» данные для Вашего проекта! Чтобы исправить ситуацию необходимо провести повторно этап классического датамайнинга, с тем, чтобы подтвердить, оптимизировать или опровергнуть «новую» целевую функцию.

B.4.3. Резюме.

В этом разделе Вы познакомились с основами выбора, проверки и оптимизации целевой функции, применимой к объекту датамайнинга. Вы ознакомились с основами анализа модели и целевой функции, познакомились с основными этапами датамайнинга. На этом автор заканчивает вводную часть, посвященную теоретическим основам датамайнинга, и переходит к практической, «зрелищной» части – сбору, анализу, каталогизации и представление результатов датамайнинга, с наиболее современными его инструментами – компьютером и Интернетом.