Сто из ста
У клиента корпоративный Битрикс стал работать на iPhone через раз. Сервер был доступен и исправен, обычные проверки ничего не показывали. Чтобы разобраться, пришлось разработать специальное приложение для IOS. Вскоре выяснилось, что по дороге к серверу бесследно исчезают 158 байт. Но это было только начало.
В этой истории
Семь попыток. Четыре успешных подключения. Три ошибки.
Такие результаты показало небольшое приложение, которое инженеры специально написали для iPhone. Затем они изменили путь, по которому телефон соединялся с сервером, и повторили испытание.
На этот раз приложение подключилось сто раз подряд. Без единой ошибки.
И все же до окончания этой истории оставалось довольно далеко.
Сбой, который возникал только на iPhone
Началась она с обычной жалобы. У клиента вдруг нормально открываться Битрикс на iPhone. Не полностью, а временами. В одну минуту можно было попасть в портал с первой попытки, в следующую — получить ошибку, а потом снова войти как ни в чем не бывало.
Особенно раздражает в таких случаях не сама неисправность, а ее плавающий характер. Когда что-то не работает совсем, диагностика становится понятной. А по диагностике уже видно причину. Когда проблема появляется хаотично, гораздо труднее даже установить, что именно происходит.
Битрикс у клиента находился на собственном сервере.
Поначалу все выглядело совершенно исправным. Сервер был включен, программа работала, защищенное соединение было настроено правильно. Обычные проверки не выявляли ничего такого, что могло бы объяснить случайные отказы. И, что самое странное - на устройствах Android все работало отлично.
Начали разбираться глубже.
Проблема состояла еще и в том, что iPhone не слишком охотно делится подробностями своей сетевой жизни. Пользователь видит результат: страница открылась или нет. Но что именно телефон отправил, что получил в ответ и в какой момент все пошло не так — узнать значительно сложнее.
Обычных инструментов для этого оказалось недостаточно.
Собственное приложение для диагностики
В конце концов инженеры решили написать собственное диагностическое приложение для iPhone. Никакого интерфейса для пользователей, полезных функций или перспектив коммерческого применения. Его назначение было предельно узким: воспроизводить подключения к серверу в одинаковых условиях и фиксировать результаты каждой попытки.
Целое приложение ради выяснения причин одной неисправности.
Но и этого было недостаточно. Нужно было увидеть, что происходит с данными по дороге. Поэтому телефон подключили к компьютеру и организовали одновременную запись сетевого обмена на двух концах соединения — на iPhone и на сервере.
Теперь можно было сравнить то, что один отправил, с тем, что другой действительно получил.
Выяснилось любопытное обстоятельство.
Куда исчезли 158 байт
Перед началом защищенного соединения телефон отправлял серверу небольшое служебное сообщение. В одной из неудачных попыток оно состояло из 1546 байт. До сервера дошли только 1388.
Куда делись остальные 158, было неизвестно.
Объем ничтожный — несколько строк обычного текста. Но сообщение требовалось целиком. Почти полное сообщение здесь было столь же бесполезно, как почти правильный пароль.
В других случаях происходило обратное: сервер отправлял ответ, а телефон его не получал.
Наконец обнаружилось хоть что-то определенное. Проблема возникала не внутри Битрикс. Часть информации терялась по дороге.
Оставался вопрос — где именно.
Между телефоном и сервером находилось множество чужого оборудования: сеть мобильного оператора, промежуточные узлы, сеть провайдера. У каждого участника этого путешествия были собственные правила и настройки. Выяснить, кто из них терял данные, оказалось нереальным.
Проверили все, что могло иметь отношение к передаче информации. Нашли несколько обстоятельств, заслуживавших внимания, но ни одного убедительного виновника.
В какой-то момент стало понятно, что поиски можно продолжать довольно долго. А Битрикс клиенту нужен не после окончания расследования, а сейчас.
Другой маршрут к Битрикс
Тогда и появилась идея попробовать другую дорогу.
В нашей инфраструктуре имелся сервер, через который можно было организовать дополнительный доступ к порталу. Он находился в другой сети и пользовался другим интернет-подключением.
Сам Битрикс трогать не требовалось. Ни переносить его, ни переустанавливать, ни менять привычный адрес для остальных сотрудников.
Для начала решили проверить, есть ли вообще смысл в таком обходе.
Здесь и пригодилось написанное специально для iPhone приложение. Оно позволяло проводить одну проверку за другой, не полагаясь на ощущения пользователя и случайные попытки открыть страницу в браузере.
Так появились те самые семь попыток по обычному маршруту и сто успешных подключений по альтернативному.
Результат был достаточно убедительным, чтобы продолжить работу. Хотя он ничего не говорил о том, кто именно виноват в первоначальных потерях. Зато показывал, что сервер прекрасно справляется с запросами, если они до него доходят.
Организовали дополнительный адрес для входа в Битрикс. Настроили маршруты так, чтобы запросы приходили через нового провайдера и ответы возвращались той же дорогой.
Вскоре портал открылся.
Правда, при открытии "поехала" вся верстка.
Вместо привычной страницы Битрикс браузер показал сломанную форму с полями для входа. Словно программа, которую привыкли видеть в современном офисе, внезапно решила вернуться лет на пятнадцать назад.
Это было неожиданно, но объяснялось довольно просто.
Битрикс знал свой привычный адрес. А теперь к нему обращались по новому. Сервер не понимал, что именно, в каком виде и куда он должен отправить, и поступал так, как счел возможным.
Пришлось настроить промежуточный сервер так, чтобы внутри все выглядело как обращение по привычному адресу.
Оформление вернулось. Страница входа заработала. В браузере новый путь к Битрикс теперь выглядел как обычный.
Новый адрес и чужой пропуск
Оставалось мобильное приложение.
Оно тоже приняло новый адрес, начало загружать данные и остановилось на слове «Соединение…».
Ситуация приобрела некоторую иронию. Сначала телефон не мог достучаться до сервера. Теперь он до него добирался, сервер отвечал, но приложение все равно считало, что подключение не закончено.
По журналам было видно, что обмен информацией шел штатноо. Телефон загружал картинки, запрашивал сведения из календаря, обращался к мессенджеру. Одни запросы выполнялись успешно, другие получали отказ. Примерно каждые десять секунд приложение повторяло попытку.
Сервер не молчал. Он просто не не видел некоторые запросы телефона.
Пришлось исследовать уже не сеть, а то, как Битрикс запоминает вошедшего пользователя.
Изучили настройки сервера, журналы запросов и то, как сама программа проверяет, кто к ней обращается. Постепенно выяснилось, что дело, вероятно, не в пароле и даже не в самом подключении. Сервер и телефон по-разному понимали, на каком сайте находится пользователь.
Причина обнаружилась в небольшой служебной записи, которую Битрикс выдавал телефону после входа. Она нужна, чтобы при каждом следующем обращении программа не спрашивала заново, кто перед ней. Можно представить ее как временный пропуск.
Но у этого пропуска обнаружилось одно неприятное свойство.
На нем значился не тот адрес.
Телефон входил через новый адрес, а Битрикс, которому промежуточный сервер представлялся под старым именем, выписывал пропуск для основного адреса портала.
Правила безопасности не позволяли телефону использовать такой пропуск на другом сайте.
В результате получалась странная последовательность. Приложение попадало на сервер, начинало работу, а при следующих запросах снова сталкивалось с отказом. Оно пыталось восстановить подключение, получало очередные ответы и вновь возвращалось к «Соединение…».
Чтобы исправить ситуацию, не понадобилось менять сам Битрикс.
На промежуточном сервере добавили одно правило: когда ответ предназначен пользователю, пришедшему через дополнительный адрес, пропуск должен быть оформлен именно для этого адреса.
После изменения мобильное приложение заработало.
Две неисправности с одним симптомом
В ходе расследования выяснилось, что две совершенно разные неисправности способны выглядеть для пользователя почти одинаково.
Сначала телефон отправлял информацию, которая не доходила до сервера целиком. Потом информация стала доходить, но сервер выдавал телефону пропуск, которым тот не мог воспользоваться.
Между этими открытиями были десятки проверок, неудачные предположения, написанное специально для расследования приложение и немало настроек, которые не дали результата.
А вопрос о том, где именно на первоначальном маршруте исчезали данные, так и остался открытым.
Впрочем, теперь у клиента появился дополнительный способ добраться до собственного портала.
Сам Битрикс оставался на прежнем сервере. Его не переносили и не переустанавливали.
Телефон тоже остался прежним.
Изменилось только то, каким путем они находили друг друга и под каким именем знакомились.