Читаю про генеральный план Манхэттена. Интересна история этого. Когда европейцы только поселились на Манхэттене, они строили дома как придется. Тогда это были голландцы и они называли это место «Новый Амстердам». После получения независимости, в США массово поехали мигранты, и нужно было резко расширять город. В итоге власти в 1806 году создали коммиссию из трех человек (Morris, Rutherfurd, De Witt) и дали им четыре года на то, чтобы придумать план города. Все заранее решили, что любой их план будет финальным. Эта комиссия три года из четырех буквально не делала ничего. Потом стали шевелиться, встретились за несколько месяцев до дедлайна для ключевых решений. И придумали сетку (см картинку). По-английски такое называется gridiron. Почему они придумали именно сетку, они нигде не объясняли. Просто через несколько месяцев был дедлайн, наверное, потому.
Интересно, как потом реализовывали план. Чтобы нанести сетку на землю, установили почти 1600 указателей — в основном квадратные мраморные «памятники» с номером улицы, расположенные на каждом перекрестке. Там, где камни не позволяли использовать мраморные маркеры, они взрывали камни, вставляли железные болты и заливали их расплавленным свинцом. В общей сложности они установили 1549 мраморных маркеров и 98 железных болтов, чтобы обозначить рисунок сетки. Землевладельцы, не согласные с тем, чтобы по их полям проходил город, все это выкапывали.
Знаменитый центральный парк, как оказалось, появился позже, через 70 лет, в 1876. На карте вы видите The Parade — это южнее, но идея была изначально не застраивать это место, а использовать его как открытое пространство, предназначенное для военных учений и использования в качестве пункта сбора в случае, если в город будет вторжение. В то время думали, что этот Гранд-Парад может стать «центральным парком» города, но с течением времени территория постепенно уменьшалась, пока не остался нынешний парк Мэдисон-сквер. Ну так, минуточку, с 97 гектар до 2.8 уменьшился. Оптимизировали. Ну хотя бы центральный парк все-таки появился (341 гектар).
Бродвей объединил несколько улиц, которые исторически шли супротив сетке (Блуминдейл и другие).
Полезное использование ChatGPT в быту! Просто фотографируете полку магазина и задаете любые вопросы по товарам. Например, на первом скриншоте я сфоткал витрину Walmart с маслом и спросил у ChatGPT какое из представленных масел меньше всего похоже на маргарин. Я лично думаю что они все похожи, но по ощущениям ответ ChatGPT недалек от истины, перечислив марки, которые стоят дороже остальных и в которых, наверное, есть остатки сливочного масла. Я также задал вопрос, какое из представленных масел самое дорогое, и какое самое дешевое, и ChatGPT корректно вытащил цену с ценников под пачками.
Там же в Walmart я сделал еще несколько тестов. Например, я намеренно положил витамин С среди кучи упаковок с обезболивающими и жаропонижающими и спросил у ChatGPT, что из представленного не является лекарствами? Он очень точно указал на витамин С, перечислив некоторое из того, что медикаментами является.
Вторым тестом было определение книг из груды. Обратите внимание, что книги разбросаны как попало, названия в перспективе, перевернутые, частично закрытые. ChatGPT за пару секунд вытащил названия книг, но, к сожалению, все-таки недостаточно точно. Многие книжки додуманы на неполной информации, так как часть названий скрыты. Например, на книжке написано «BY NY TIMES BESTSELLER AUTHOR OF WHISPER NETWORK», из чего ChatGPT сделал вывод, что это и есть та книжка. Но в случае фотографирований корешков книг все должно быть сильно лучше. Попробую при случае, когда буду в книжном.
Я также сфотографировал одну из полок под углом, в перспективе, и попросил найти все мыла (soap bars). Справился! Обратите внимание, насколько низкое качество исходного изображения в дальней части полки.
Отдельно все выше доказывает, что ChatGPT не выполняет даунскейлинг изображения, и распознавание идет с полного разрешения, которое дает камера телефона.
Другими словами, в магазине ChatGPT очень полезен. Кроме того, что он может помочь выбрать между разными брендами и типами товаров, так еще и объяснить различия между ними, опираясь только на фото. Не нужно ничего печатать, кроме вопроса. Очень круто!
Досмотрел сериал «Сёгун» (Shōgun). Очень неплохо. Сейчас гуглю, там и тут пролетает фраза, что «сериал основан на реальных событиях». Читаю википедию. Выясняется, что автор Джеймс Клавелл вдохновился строчкой из книги, которую он читал дочери: «В 1600 году англичанин отправился в Японию и стал самураем». Джеймс пошел и развил эту строчку в роман размером в 2300 страниц. Потом его немного сократили.
«Самурай без меча — это как самурай с мечом. Только без меча» (Ямамото Мусаси)
Из сложностей — после 10 часов просмотра я в итоге кроме англичанина Джона могу вспомнить только имя одного из центральных феодалов —Торанаги… и еще леди Марико. За остальными нужно лезть в интернет.
Очень рекомендую, очень красиво и познавательно про разницу культур. Сложно сказать, насколько исторически достоверно, но, по крайней мере, красиво.
Как же удобно сейчас стало работать с книжками. В субботу ко мне приедет Alla Prima II художника Ричарда Шмида. Но еще до покупки я не удержался и нашел в сети 500Мб книжку в PDF, и уже прочел 50 страниц. И подумал, а вот если мне захочется извлечь всех упоминаемых художников в книге, смогу ли я это сделать?
Оказалось довольно просто.
1) разбиваем PDF на отдельные страницы через pdfseparate . Получается 332 PDF общим объемом 472 Мб. Занимает несколько минут.
2) переводим отдельные PDF в JPG с помощью pdftoppm -jpeg . Получается 332 JPG. Занимает несколько минут.
3) распознаем текст с помощью tesseract . Этот процесс занимает минут 10.
4) передаем каждый текст страницы локальной llama3, и просим вытащить из текста имена художников из текста с каждой из 332 страниц (то есть 332 запроса). На моем маке это заняло 12 минут. В итоге получилось 953 строчки.
llama3 туповатая, но справляется в целом неплохо. Выдает кучу «шума» тоже типа «Based on the provided text, here are the extracted names of painters» или «I’m happy to help!». Выходной текст после обработки 332 страниц небольшой, всего 953 строчки. Сортируем его, удаляем дубликаты (стало 556). Удаляем все больше трех слов и меньше двух слов через cat names.txt | awk ‘NF>=2 && NF<=4’. Получилось 139 строчек. Среди них все еще есть некоторый шум, например, туда попали «Cobalt Blue», «What an interesting text!» и «Sherlock Holmes» как имена художников. Для того, чтобы их вычистить, используем уже openai, который умнее. Просим оставить только художников и убрать все остальное. Получился список.
Alfred Sisley, Alphonse Mucha, Anders Zorn, Andrew Loomis, Anton Sterba, Antonio Mancini, Arthur Rackham, Berthe Morisot, Bill Mosby, Cecilia Beaux, Charles Hunter, Claude Monet, Dan Gerhartz, Dean Mitchell, Diego Velazquez, Donald Llanuza, Edmund Tarbell, Edouard Manet, Edouard Vuillard, Edward Atkinson Hornel, Eliot Goldfinger, Elizabeth Sparhawk-Jones, Frank Duveneck, Frank Vincent DuMond, Franz Hals, Frederic Remington, Gene Byrnes, George Bridgman, Georges Seurat, Gilbert Stuart, Giovanni Boldini, Grace Arnold, Hans Holbein, Harry Anderson, Heinrich Kley, Henri de Toulouse-Lautrec, Howard Pyle, Ilya Repin, Isaac Levitan, J. W. Waterhouse, J. C. Leyendecker, J.H. Vanderpoel, James M. Dunlop, Jean Dagnan-Bouveret, Jeremy Lipking, Jessie H. Vanderpoel, Joaquin Sorolla, John Gannam, John Singer Sargent, John Singleton Copley, John Twachtman, Katie Swatland, Marcus Thomas, Mary Cassatt, Michael Wilcox, N. C. Wyeth, Nancy Guzik, Nicolai Fechin, Norman Rockwell, Paolo Michetti, Paul Mullally, Peter Paul Rubens, Philip Andreevich Maliavin, Ralph Mayer, Richard Schmid, Robert Henri, Rose Frantzen, Scott Burdick, Shannon Two, Stephen Rogers Peck, Susan Lyon, Thomas Eakins, Thomas Wilmer Dewing, Valentin Serov, Vincent Van Gogh, Wayman Adams, William H. Mosby, William Harnett, William Merritt Chase
5) засылаем теперь этот список в openai опять, и спрашиваем, есть ли среди этих имен не-художники. Оказалось, что все норм, все из них — художники.
6) для надежности еще спрашиваем у openai, есть ли имена из этого «чистого» списка, которых не было в изначальном («грязном»), чтобы проверить, не придумал ли имен художников openai, когда его просили вытащить из «грязного» списка. Отлично, не придумал.
вуаля! чуть больше полчаса, и у меня есть список художников, упомянутых в книге.
7) просим openai разбить список на группы и дать краткую характеристику
РЕЗУЛЬТАТ
Импрессионисты и Постимпрессионисты
=================================
* Alfred Sisley — Французский импрессионист, известный своими пейзажами.
* Claude Monet — Основатель импрессионизма, знаменит своими водяными лилиями и сериями пейзажей.
* Berthe Morisot — Французская импрессионистка, известная своими портретами и сценами из повседневной жизни.
* Edouard Manet — Французский художник, предшественник импрессионизма, известный своими портретами и сценами из жизни Парижа.
* Georges Seurat — Французский постимпрессионист, основатель пуантилизма.
* Vincent Van Gogh — Нидерландский постимпрессионист, известный своими яркими и эмоциональными картинами.
Реализм и Академическая живопись
=============================
* Edouard Vuillard — Французский художник, участник группы Наби, известный своими интерьерами и фигуративными композициями.
* Anders Zorn — Шведский художник, известный своими портретами и жанровыми сценами.
* Cecilia Beaux — Американская портретистка, работавшая в стиле академического реализма.
* Diego Velazquez — Испанский барочный художник, известный своими портретами и историческими сценами.
* Edmund Tarbell — Американский художник, известный своими импрессионистскими портретами и жанровыми сценами.
* Franz Hals — Нидерландский портретист, один из величайших художников золотого века Голландии.
* Frederic Remington — Американский художник и скульптор, специализировавшийся на сценах Дикого Запада.
* Gilbert Stuart — Американский художник, известный своими портретами, включая изображение Джорджа Вашингтона.
* Hans Holbein — Немецкий ренессансный художник, известный своими портретами и религиозными картинами.
* Ilya Repin — Русский реалистический художник, известный своими историческими и жанровыми картинами.
* Isaac Levitan — Русский пейзажист, мастер лирического пейзажа.
* John Singer Sargent — Американский портретист, известный своими изысканными и элегантными портретами.
* Thomas Eakins — Американский реалист, известный своими портретами и жанровыми сценами.
* Valentin Serov — Русский портретист, один из крупнейших представителей русской реалистической школы.
Арт Нуво и Иллюстрация
=================================
* Alphonse Mucha — Чешский художник, ключевая фигура Арт Нуво, известный своими декоративными постерами.
* Arthur Rackham — Британский иллюстратор, известный своими волшебными и фантастическими изображениями.
* Howard Pyle — Американский иллюстратор, основатель Брэндивинской школы иллюстрации.
* J. C. Leyendecker — Американский иллюстратор, известный своими рекламными и журнальными обложками.
* N. C. Wyeth — Американский иллюстратор и художник, известный своими работами для классических приключенческих романов.
* Norman Rockwell — Американский художник и иллюстратор, известный своими идеализированными изображениями американской жизни.
* Frank Vincent DuMond — Американский художник и педагог, известный своими пейзажами и жанровыми сценами.
Портретисты и Жанровые художники
=============================
* Cecilia Beaux — Американская портретистка, работавшая в стиле академического реализма.
* Diego Velazquez — Испанский барочный художник, известный своими портретами и историческими сценами.
* Franz Hals — Нидерландский портретист, один из величайших художников золотого века Голландии.
* John Singer Sargent — Американский портретист, известный своими изысканными и элегантными портретами.
* Thomas Eakins — Американский реалист, известный своими портретами и жанровыми сценами.
* Valentin Serov — Русский портретист, один из крупнейших представителей русской реалистической школы.
* Jean Dagnan-Bouveret — Французский академический художник, известный своими жанровыми сценами и портретами.
* Joaquin Sorolla — Испанский художник, мастер света, известный своими портретами и пляжными сценами.
* John Singleton Copley — Американский колониальный художник, известный своими портретами.
Мастера Пейзажа
==============
* Alfred Sisley — Французский импрессионист, известный своими пейзажами.
* Claude Monet — Основатель импрессионизма, знаменит своими водяными лилиями и сериями пейзажей.
* Isaac Levitan — Русский пейзажист, мастер лирического пейзажа.
* John Twachtman — Американский импрессионист, известный своими лирическими пейзажами.
* Dan Gerhartz — Современный американский художник, известный своими атмосферными пейзажами и фигуративными работами.
* Dean Mitchell — Американский художник, известный своими акварельными пейзажами и городскими сценами.
Современные Художники
====================
* Dan Gerhartz — Современный американский художник, известный своими атмосферными пейзажами и фигуративными работами.
* Dean Mitchell — Американский художник, известный своими акварельными пейзажами и городскими сценами.
* Jeremy Lipking — Современный американский художник, известный своими портретами и фигуративными работами.
* Nancy Guzik — Современная американская художница, известная своими лирическими и романтическими фигуративными работами.
* Richard Schmid — Американский художник и педагог, мастер фигуративной живописи.
Прочие Известные Художники
========================
* J. W. Waterhouse — Британский художник, известный своими картинами на мифологические и литературные темы.
* Paolo Michetti — Итальянский художник, работавший в жанре реализма и символизма.
* Peter Paul Rubens — Фламандский барочный художник, известный своими аллегорическими и мифологическими картинами.
* Gilbert Stuart — Американский художник, известный своими портретами, включая изображение Джорджа Вашингтона.
* Giovanni Boldini — Итальянский портретист, известный своими элегантными и динамичными портретами.
* Henri de Toulouse-Lautrec — Французский постимпрессионист, известный своими афишами и сценами парижской жизни.
* Howard Pyle — Американский иллюстратор, основатель Брэндивинской школы иллюстрации.
* Franz Hals — Нидерландский портретист, один из величайших художников золотого века Голландии.
* Frederic Remington — Американский художник и скульптор, специализировавшийся на сценах Дикого Запада.
* Hans Holbein — Немецкий ренессансный художник, известный своими портретами и религиозными картинами.
Кроме этого, у меня есть заготовленный скрипт для openai embeddings. Где-то минут пять они создаются. После этого можно искать по книжке любыми вопросами. Результат выдается в виде текста страницы с максимально близким содержимым.
Как можно много сейчас сделать на компе с информацией!
Читаю сейчас Лю Цысинь «Темный лес», и понял, что я не понимаю, как про себя произносить китайские имена, записанные латинницей, как Quang. Пошел образовываться по этой теме и кое-что нарыл. Ниже небольшая справка для таких же любопытных, как я, но кому было лень разбираться.
Для транскрипции на русский язык есть система Палладия (гуглите). В целом, все ниже — оттуда и из системы Pinyin (система романизации китайского).
В целом, большинство букв можно произносить плюс-минус как в английском алфавите, разве что глухие p,t,k (например) идут с придыханием, но есть исключения:
* q — произносится как русская «ч» или английское «ch» (как в слове cheese) с легким придыханием. Например, Qiang читается как «Ч’ань». Другие имена: Qing, Qin.
* x — напоминает мягкую русскую «ш/щ» или английские sh/sch. Например, Xia читается как «Ща». Другие имена: Xin, Xiu
* r — напоминает что-то между r и zh/ж. В системе Палладия ran предписано читать как жань (zhan’), а rang как жан (zhan), а rao как жао (zhao). В Pinyin написано, что r читается как в red с легким оттенком zh.
* z — как «ds» в слове «reads»
* c — как русская «ts» как в «cats»
Поэтому Xi Jinping читается как Си Цзиньпин. А Dèng Xiǎopíng киррилизуется как Дэн Сяопин.
Кстати, в китайских именах сначала идет фамилия, затем имя. Например, в имени «Li Wei» «Li» — фамилия, а «Wei» — имя. Мао Цзэдун (Máo Zédōng), тут имя — Цзедун, а не Mao. или Дэн Сяопин (Dèng Xiǎopíng), тут имя Сяопин. У автора книжки Dark Forest Liu Cixin имя — Cixin.
Но при этом пишут, что обращаться по полному имени к китайцам невежливо и даже грубо. По китайскому этикету (в Китае) принято обращаться по фамилии, прибавляя название социального статуса/должности (инженер, доктор, профессор, академик, посол, учитель, мастер, бригадир, директор и т.п.) или общее обращение (господин, товарищ, госпожа). Например, господин У (по-китайски: У сяньшэн), госпожа Чжан (по-китайски: Чжан нюйши). Но это там, в Китае. В случае международных команд, где какой-ниудь Li Wei — фронтэнд разработчик, то, конечно, норм писать «Hi Wei». Но не «Hi Li».
Кстати, китайцы очень часто меняют имена при переезде из Китая. Джеки Чан, например, на родине был 成龙 (Chéng Lóng), Брюс Ли был 李小龙 (Lǐ Xiǎolóng),
Ричард Шмид (Richard Schmid) — потрясающий современный художник, книги которого (конкретно Alla Prima II) я периодически тянусь купить, но ценник кусается даже для б/у опций (~$150-200), и все еще не купил, для меня это пока еще очень дорого. В книге Alla Prima II, кстати, он показывает процесс их создания слой за слоем.
Напоминаю, что подобные посты группируются по тегу
#artrauflikes, а на beinginamerica.com в разделе «Art Rauf Likes» есть все 59 (на данный момент) штуки (в отличие от Facebook, который забывает (забивает на) почти половину)
Экспериментирую с LLAMA 3 от Facebook. Есть ее модификация llama3-gradient:8b-instruct-1048k-q6_K, у которой контекстное окно в 1М токенов (это где-то 2 мегабайта). Есть и больше. Я скармливаю туда всю книжку про Элона Маска (рекомендую, кстати!) и она выдает неплохой саммари — причем быстро выдает, вот любой текст со скриншота генерится где-то за 40-60 секунд. При этом это еще относительно слабая модель (8B), у фейсбука есть 70B. Но тут главная фишка, что все это работает локально на ноутбуке. Не нужно платить за API, работает довольно быстро, скрипт маленький, помещается на экране.
Пока все-таки есть некоторые шероховатости — например, на прямые вопросы по тексту (вопросы, на которые я точно знаю ответы), система не всегда уверенно дает ответы. Когда отправляешь текст сильно меньше, то все работает.
Есть кто-нибудь, кто читал? Я начал смотреть сериал на нетфликсе, но спустя несколько серий больше не мог выносить дикие упрощения в ущерб здравой логике, ну и остальные нетфликсоспецифичные штуки по чеклисту. Там Eiza Gonzalez хорошая, да, может норм причина глянуть пару серий. Не выдержал всего этого, перестал смотреть, заказал книжку. Прочитал четверть. Пока очень интересно — такая твёрдая научная фантастика, вполне в духе привычной от Азимова и Кларка. В книжке и близко нет ореола супергероев в стиле Марвел. Поначалу бросалось в глаза то, что перевод с китайского, и в итоге английский там странный. Как появилась эта мысль, стал внимательнее искать примеры, а их нет. То ли это начало было такое, то ли предрассудки. Ну еще посмотрим, 3/4 осталось. Если кто читал, скажите как вам (но не спойлирите). Это вообще трилогия, так что ещё два тома на очереди.
Being in America 