Недвижимость в этой компании до сих пор на вторых ролях. Автомобили — это бизнес; недвижимость — то, во что мы начали вникать, потому что инфраструктура для скрейпинга уже была готова, и никто не смог устоять перед искушением посмотреть, что ещё она умеет вытягивать. Основная часть этого датасета по недвижимости — это одна страна, Япония, причём в таком масштабе, что всё остальное выглядит статистической погрешностью. Но даже погрешность — это около 13 000 объявлений, и три недели назад я решил наконец их прочитать, а не просто считать.
15 сентября. Взял выборку по Египту, Германии и Шри-Ланке — это единственные три региона кроме Японии, где набирается достаточно строк, чтобы назвать это «рынком», а не заглушкой. В данных сидят ещё четыре страны (Гватемала, Никарагуа, Панама, Сальвадор), каждая заморожена ровно на 80 объявлениях — это отдельная история, которую я здесь не буду пересказывать: это лист ожидания, а не живой рынок, и он не трогался с момента заморозки экспансии. На этот раз меня интересовали именно те три, которые реально сканируются на постоянной основе.
Первое впечатление: объявления по Египту читаются так, будто страна носит одну кожу на две разные рыночные реальности. Квартирные объявления из Каира и Александрии, плотные и явно транзакционные, сидят в той же выгрузке, что и шале на Северном побережье и Красном море, которые явно ценятся как вторая недвижимость для отдыха и почти целиком описываются через расстояние до пляжа. В данных по автомобилям ничего подобного нет — у подержанного Hyundai не бывает раздвоения личности в зависимости от того, в каком городе он припаркован.
19 сентября. Германия удивила меня больше всех, и не в хорошем смысле. Я ожидал, что в немецких объявлениях о недвижимости будут доминировать продажи — немцы, как известно, нация арендаторов, конечно, но источники, которые мы скрейпим, в основном брокерские, и я предположил, что это значит продажное предложение. Ошибся. Заметная часть того, что мы вытягиваем, — это Mietwohnung, арендные квартиры, вперемешку с объявлениями о продаже так, что если мы когда-нибудь будем строить ценовую модель по немецкой недвижимости на этих данных, понадобится отдельный фильтр, прежде чем доверять хоть одной цифре оттуда. Сейчас сырая выгрузка не разделяет аренду и продажу настолько чисто, чтобы я мог спокойно назвать что-то «типичной ценой».
24 сентября. На Шри-Ланку ушло больше времени, потому что объявления там действительно разнообразнее на душу населения, чем в Египте или Германии. Кондоминиумы в Коломбо, колониальные бунгало в глубине острова, участки на побережье на юге — это небольшой датасет (4006 объявлений), который охватывает страну с совершенно разными архетипами недвижимости в зависимости от региона, и при таком размере выборки это разнообразие выглядит скорее шумом, чем сигналом. В тот день я написал в заметках: «это тот случай, где я меньше всего доверюсь модели и больше всего — человеку». Это до сих пор верно.
29 сентября. Вернулся к сырым цифрам, чтобы проверить своё качественное впечатление на соответствие реальным числам, потому что три недели наблюдений могут убедить тебя в истории, которой на самом деле нет. Египет: 4427. Германия: 4230. Шри-Ланка: 4006. Настолько близко друг к другу, что ни одну из трёх нельзя назвать «главной», а остальные — довеском: они идут практически вровень, что не было очевидно просто при просмотре, поскольку объявлений по Египту на глаз казалось больше.
Посмотрите на этот график в сочетании с тем, что одна только Япония обеспечивает 588 644 строки из наших 601 702 общих строк по недвижимости — и вы получите честную картину этого направления на сегодня: один огромный, зрелый рынок, который мы по-настоящему измеряем, три небольших, но реальных рынка, которые мы только начинаем понимать, и четыре заглушки, ждущие, пока кто-нибудь решит, что их стоит развивать. Это не жалоба — автомобили прошли через точно такую же воронку, просто за более долгий срок и с гораздо большим числом источников.
3 октября. Последняя запись перед тем, как сесть писать этот текст. Я искал одну конкретную вещь: указывают ли объявления по Египту, Германии и Шри-Ланке цену в местной валюте последовательно, или там есть та же путаница с разметкой валют, которая не раз кусала нас на стороне автомобилей (у нас уже бывали источники, которые молча указывали цену не в той единице, и это стоило нам баг с тысячекратным искажением парсинга цены на автомобилях ранее в этом году). Короткий ответ: в основном последовательно, но в объявлениях об аренде в Германии иногда встречается месячная сумма рядом с общей ценой продажи, и в сыром тексте ничто не различает эти два случая, кроме контекста, который заметит человек, но не парсер. Это следующая реальная инженерная задача здесь, а не новая страна.
| Рынок | Объявления | Что выделяется |
|---|---|---|
| Египет | 4427 | Раздвоенная идентичность: городские квартиры vs. прибрежная вторая недвижимость |
| Германия | 4230 | Объявления об аренде и продаже смешаны в одной выгрузке |
| Шри-Ланка | 4006 | Высокая вариативность архетипов на одно объявление — от кондоминиума до колониального бунгало и земельного участка |
Ничто из этого пока не готово для ценовой модели так, как готово наше ценообразование по автомобилям в ОАЭ. Но три недели назад я не знал, были ли эти три страны настоящими рынками или просто шумом, который случайно перешагнул порог по количеству строк. Теперь я знаю, что они настоящие, знаю, в чём они примерно расходятся друг с другом по структуре, и знаю единственное исправление — разделить аренду и продажу в немецкой выгрузке, — которое должно произойти, прежде чем всё это станет чем-то большим, чем упражнение в просмотре. Дневники в основном полезны именно этим: не тем, что находят ответ, а тем, что находят следующий вопрос, который стоит задать.
