Podlodka: QA

Если вы когда-нибудь задавались вопросом “А кто тестит мои тесты?”, то этот выпуск точно для вас. Мы дружно пытаем нашего гостя, Алексея Денисова, на тему того, что такое мутационное тестирование, и пытаемся придумать, как его встроить в процесс разработки софта. Ну и, конечно, обсуждаем Mull - инструмент для создания и расстрела мутантов для LLVM.

Содержание:
- 00:00 - Приветствие
- 00:58 - Знакомство с гостем этого выпуска, Алексеем Денисовым
- 06:10 - Про Code Coverage
- 21:35 - Что такое мутационное тестирование
- 39:10 - Длительность мутационного тестирования
- 43:00 - Оптимизация мутационного тестирования
- 47:30 - LLVM
- 49:38 - Использование Mull в iOS разработке
- 59:18 - Continuous Mutation Testing
- 01:05:14 - Планы развития Mull
- 1:14:00 - Последние новости: Android O, Apple Clips.
- 1:24:55 - Ответы на вопросы слушателей из нашего чата: про софт, который используют ведущие, и снова про карьерную лестницу.

Полезные ссылки:
- Блог Алексея Денисова
  https://lowlevelbits.org 
- Доклад про мутационное тестирование на FOSDEM
  https://www.youtube.com/watch?v=YEgiyiICkpQ 
- Репозиторий Mull
  https://github.com/mull-project/mull 
- LLVM-based Mutation Testing System. Request For Comments
  http://lowlevelbits.org/llvm-based-mutation-testing-system/ 
- Новая версия Android O
  https://tproger.ru/news/android-o-developer-preview/ 
- Приложение Apple Clips
  http://www.apple.com/clips/

Podlodka #4 - Мутационное тестирование

На что нужно писать тесты и зачем это делать? Дорого ли обходится поддержка кодовой базы вместе с тестами? Как продать процесс разработки через тестирование своей команде или руководству?

В 11 выпуске подкаста про мобильную разработку подлодку мы обсудили тему тестирования в целом и TDD в частности. Выпуск получился длинным, но очень информативным и весёлым. Спасибо большое Андрею Мишанину (ex-team lead Яндекс) за участие в выпуске!

Присоединяйтесь к обсуждению этого и других выпусков в нашем Telegram-канале: https://t.me/podlodka

Содержание:
00:00:18 - О госте и теме выпуска
00:03:25 - Что, когда и зачем тестировать
00:32:35 - Модульные тесты
00:45:40 - Интеграционные тесты
01:08:04 - Принципы FIRST для модульных тестов
01:40:00 - TDD
02:03:00 - Как прогонять модульные тесты за несколько секунд
02:14:30 - Что такое тестируемость
02:25:00 - Заблуждения о тестах
02:34:45 - Как продавать тестирование
02:45:30 - Что почитать по теме

Полезные ссылки:
https://cleancoders.com/
https://pragprog.com/magazines/2012-01/unit-tests-are-first
https://www.amazon.com/Clean-Code-Handbook-Software-Craftsmanship/dp/0132350882/
https://www.amazon.com/Growing-Object-Oriented-Software-Guided-Tests/dp/0321503627/
https://www.amazon.com/Working-Effectively-Legacy-Michael-Feathers/dp/0131177052/

Podlodka #11 - Test Driven Development

Анастасия Войтова, Mobile Tech Lead в Cossack Labs, рассказала нам, почему нужно постоянно думать о защите информации, какие угрозы и инструменты защиты от них есть на рынке. На закуску разобрали кучу вопросов от наших слушателей, начиная от того, как защищаются банковские приложения, и закачивая сервисами обфускации.

Поддержи лучший подкаст про мобильную разработку:
www.patreon.com/podlodka 

Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! 
Telegram-чат: t.me/podlodka 
Страница в Facebook: www.facebook.com/podlodkacast/ 
Twitter-аккаунт: twitter.com/PodlodkaPodcast 

Полезные ссылки:
- Статистика iOS устройств с jailbreak’ом
  https://www.quora.com/What-percentage-of-iPhones-have-been-jailbroken
- Блог с обучающими материалами по исследованию безопасности приложений
  http://highaltitudehacks.com 
- Обфускация строк от Стаса
  https://gist.github.com/DevAlloy/88e218729afd556205ed 
- Про Pegasus
  https://www.lookout.com/trident-pegasus-enterprise-discovery

Podlodka #21 – Безопасность мобильных приложений

Как избежать перевернутой пирамиды тестирования? Чем отличаются quality assurance и quality control? Должны ли тестировщики писать unit-тесты? Эти вопросы, как и множество других, мы обсудили вместе с Александром Хозей, ответственным за все ручное нативное мобильное тестирование в Badoo.

Поддержи лучший подкаст про мобильную разработку:
www.patreon.com/podlodka 

Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! 
Telegram-чат: https://t.me/podlodka  
Telegram-канал: https://t.me/podlodkanews 
Страница в Facebook: www.facebook.com/podlodkacast/ 
Twitter-аккаунт: https://twitter.com/PodlodkaPodcast  

Содержание:
- 00:00:45 - Знакомство с гостем
- 00:05:15 - В чем состоит работа тестировщика
- 00:08:30 - Виды, типы и уровни тестирования
- 00:29:28 - Белый, серый и черный ящики
- 00:33:45 - Закапываем рекордеры UI тестов
- 00:37:50 - Пирамида тестирования в Badoo, Тинькофф, Avito и Туту.ру
- 01:00:48 - Quality Assurance и Quality Control
- 01:23:35 - Особенности мобильного тестирования
- 01:40:19 - Подведение черты

Полезные ссылки:
- Тестирование мобильных приложений: tips & tricks
  https://habrahabr.ru/company/badoo/blog/269189/
- Обзор и сравнение инструментов автоматизации
  https://habrahabr.ru/company/badoo/blog/347986/
- Tap into mobile application testing
  https://leanpub.com/testmobileapps
- Mindmap’ы по мобильному тестированию
  https://www.pinterest.com/rosiesherry/testing-mindmaps/
  http://apps.testinsane.com/mindmaps
- OWASP Mobile Security Project
  https://www.owasp.org/index.php/OWASP_Mobile_Security_Project#tab=Home
- Удобная карта с распределением iOS/Android/WP по континентам
  https://www.kantarworldpanel.com/global/smartphone-os-market-share/
- Про тестирование геолокации
  https://www.youtube.com/watch?v=AiRGHjxaVf0&index=1&list=PL3xVZC4USRNSy5I6oikQaQtBKMzmPwYW7
- Тестирование в Badoo «с высоты птичьего полёта» 
  https://habrahabr.ru/company/badoo/blog/334034/
- Блог про XCUITest
  https://alexilyenko.github.io/

Podlodka #45 – QA в мобильной разработке

Как бороться с техническим долгом? Чем осознанный техдолг отличается от неосознанного? Как продать необходимость рефакторинга бизнесу? Чем персики лучше лимончиков? На все эти будоражащие вопросы дал ответ Александр Бындю, IT архитектор и специалист по Agile и Lean практикам, повидавший на своем нелегком консалтерском веку множество долгов разной степени тяжести.

Поддержи лучший подкаст про мобильную разработку:
www.patreon.com/podlodka 

Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! 
Telegram-чат: https://t.me/podlodka  
Telegram-канал: https://t.me/podlodkanews 
Страница в Facebook: www.facebook.com/podlodkacast/ 
Twitter-аккаунт: https://twitter.com/PodlodkaPodcast  

Содержание:
- 00:00:45 - Про регулярный опрос слушателей
- 00:01:57 - Знакомство с гостем
- 00:06:05 - Что такое технический долг
- 00:07:05 - Что не является техдолгом
- 00:08:27 - Виды технического долга
- 00:09:20 - Осознанный краткосрочный техдолг
- 00:19:45 - Осознанный долгосрочный техдолг
- 00:24:12 - Неосознанный краткосрочный техдолг
- 00:35:25 - Неосознанный долгосрочный техдолг
- 00:39:55 - На что влияет наличие технического долга
- 00:54:00 - Как бороться с техдолгом
- 01:09:30 - Как продать техдолг бизнесу
- 01:20:12 - Подведение черты

Полезные ссылки:
- Опрос слушателей подкаста
  https://goo.gl/forms/tlIpyIFa1du1fhRZ2 
- Технический долг в Википедии
  https://en.wikipedia.org/wiki/Technical_debt
- Technical Debt
  http://wiki.c2.com/?TechnicalDebt
- Технические долги, статья Александра Бындю
  https://blog.byndyu.ru/2008/12/blog-post.html

Podlodka #77 – Технический долг

Погружаемся в мир информационной безопасности уже во второй раз! Юрий Шабалин из Swordfish Security помог нам обширно охватить тему анализа защищенности мобильных приложений: разобрались, что такое пентест и как его проводят; прошлись по всем категориям из OWASP Mobile Top-10; ознакомились с инструментарием пентестера и в догонку поговорили о процессах, объединяющих разработку и информационную безопасность. В этом выпуске мы не обошли вниманием Android (и конечно посравнивали обе платофрмы), а вишенкой на торте стало несколько удивительных историй от гостя о веселых (и не очень) уязвимостях из мира мобилок.

Поддержи лучший подкаст про разработку:
www.patreon.com/podlodka

Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! 
Telegram-чат: t.me/podlodka 
Telegram-канал: t.me/podlodkanews 
Страница в Facebook: www.facebook.com/podlodkacast/ 
Twitter-аккаунт: twitter.com/PodlodkaPodcast

Содержание:
00:08:42 - Знакомство с гостем
00:13:42 - Чем отличается пентест от анализа безопасности
00:18:56 - Безопасность в мире мобильной разработки сегодня
00:21:19 - Сравнение iOS/Android в разрезе ИБ
00:40:47 - Разбор OWASP Mobile top10
01:29:00 - Как составить чек-лист для пентеста
01:38:00 - Туллинг пентестера
02:01:10 - Основные этапы пентеса
02:13:40 - Как работать с результатом пентеса
02:18:00 - Интеграция ИБ в процессы разработки
02:30:32 - Как мобильному разработчику стать инженером ИБ?
02:34:40 - Подводим черту

Ссылки гостя:
OWASP Mobile - https://www.owasp.org/index.php/OWASP_Mobile_Security_Testing_Guide
Инструменты для анализа Android - https://github.com/ashishb/android-security-awesome
Инструменты для анализа iOS - https://github.com/ashishb/osx-and-ios-security-awesome
Книги: 
“The Mobile Application Hackers Handbook” 
“Android Hacker’s Handbook ”
“iOS Hacker’s Handbook”

Podlodka #85 – Пентест мобильных приложений

Забота о производительности своего продукта – отличительная черта хорошего инженера или менеджера. К этому вопросу мы решили подойти фундаментально и позвали сразу четырёх экспертов, каждый из которых помог раскрыть один из аспектов перфоманса. Денис Мишунов объяснил, почему производительность важна, как ее воспринимает мозг человека и показал варианты решения проблем этого восприятия. Александр Тоболь провел краткий экскурс в то, как работают различные сетевые протоколы и их клиентские реализации и открыл целую область для оптимизаций. Артур Василов и Николай Лихогруд копнули в оптимизацию перфоманса клиентского кода Android и iOS приложений соответственно. Короче говоря, если вы не знаете, как и зачем сделать свой продукт быстрым – этот выпуск однозначно для вас!

Наш партнер
Бесплатный онлайн-марафон от Skillbox — https://clck.ru/EpFJu 

Поддержи лучший подкаст про мобильную разработку:
www.patreon.com/podlodka 

Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! 
Telegram-чат: https://t.me/podlodka  
Telegram-канал: https://t.me/podlodkanews 
Страница в Facebook: www.facebook.com/podlodkacast/ 
Twitter-аккаунт: https://twitter.com/PodlodkaPodcast  

Содержание:
- 00:01:58 - Ментальное восприятие перфоманса с Денисом Мишуновым
- 01:09:00 - Ускорение сети с Александром Тоболем
- 01:55:28 - Оптимизация перфоманса в Android с Артуром Василовым
- 02:41:12 - Оптимизация перфоманса в iOS с Николаем Лихогрудом

Полезные ссылки:
- "Designing and Engineering Time"
  https://www.amazon.com/Designing-Engineering-Time-Psychology-Perception/dp/0321509188
- Серия статей Дениса Мишунова по теме
  https://www.smashingmagazine.com/search/?q=why%20performance%20matters 
- Перевод серии статей на русский язык
  https://habr.com/company/jugru/blog/343484/ 
  https://habr.com/company/jugru/blog/343922/ 
  https://habr.com/company/jugru/blog/343974/ 
- Видео доклада Дениса Мишунова по теме 
  https://vimeo.com/214097105 
- Введение в performance в Android
  https://www.amazon.com/High-Performance-Android-Apps-Optimizations/dp/1491912510 
- Документация Android по профилированию
  https://developer.android.com/studio/profile/ 
- Systrace 
  https://source.android.com/devices/tech/debug/systrace 
- IdleHandler для отложенного выполнения задач в MainThread
  https://developer.android.com/reference/android/os/MessageQueue.IdleHandler 
- Оптимизации ProGuard
  https://www.guardsquare.com/en/products/proguard/manual/usage/optimizations 
- Redex 
  https://github.com/facebook/redex 
- AsyncLayoutInflater
  https://developer.android.com/reference/android/support/v4/view/AsyncLayoutInflater 
- PrecomputedText 
  https://developer.android.com/reference/android/text/PrecomputedText
  https://medium.com/androiddevelopers/prefetch-text-layout-in-recyclerview-4acf9103f438 
- Litho 
  https://github.com/facebook/litho 
- Презентация с доклада Артура, где есть большая часть про оптимизацию сетевых запросов   
  https://speakerdeck.com/arturvasilov/how-do-we-speedup-yandex-on-android

Podlodka #89 – Производительность приложений

В выпуске мы обсудили такую важную тему accessibility, наш гость – аналитик команды Особенного банка из Сбербанка Валерия Курмак, рассказала о том как сделать ваши сайты и приложения более доступными для людей с особенными потребностями. Разобрали не только важность, но и то, какими способами можно ее достичь. Также Валерия поделилась ссылкой на гайдлайн, который может помочь вам сделать первые шаги в этом направлении.

Поддержи лучший подкаст про мобильную разработку:
www.patreon.com/podlodka 

Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! 
Telegram-чат: https://t.me/podlodka  
Telegram-канал: https://t.me/podlodkanews 
Страница в Facebook: www.facebook.com/podlodkacast/ 
Twitter-аккаунт: https://twitter.com/PodlodkaPodcast  


Полезные ссылки:
https://www.youtube.com/watch?v=c0nvdiRdehw&t=6s
http://specialbank.ru/guide/
https://www.w3.org/TR/WCAG21/
https://www.w3.org/TR/mobile-accessibility-mapping/
Инструменты, практические кейсы и теория инклюзивного проектирования в блоге:
t.me/neiskluchenie
facebook.com/neiskluchenie
vk.com/neisluchenie

5 минутные видео о том, кто такие люди с инвалидностью и как не создавать барьеры:
https://www.youtube.com/playlist?list=PLQQ2oZWvIQCghnNH_yE94k8zi2Rs3rmqB

Podlodka #90 – Accessibility

Факапы – это не страшно, если с ними правильно работать. В этом выпуске Алексей Кирпичников учит нас практикам реагирования на инциденты, их обработке, поиску корневых причин и распространению инженерной культуры. Прослушав выпуск, вы сможете спокойно пойти и внедрить этот процесс в своей компании, независимо от ее структуры и размера.

Поддержи лучший подкаст про мобильную разработку:
www.patreon.com/podlodka 

Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! 
Telegram-чат: https://t.me/podlodka  
Telegram-канал: https://t.me/podlodkanews 
Страница в Facebook: www.facebook.com/podlodkacast/ 
Twitter-аккаунт: https://twitter.com/PodlodkaPodcast  

Полезные ссылки:
- Learning from Failure at Etsy
  https://www.kitchensoap.com/2013/09/30/learning-from-failure-at-etsy/
- Incident postmortems
  https://www.atlassian.com/software/jira/ops/handbook/incident-postmortems 
- Post-Mortem Process at PagerDuty
  https://response.pagerduty.com/after/post_mortem_process/
- Google SRE. Postmortem Culture: Learning from Failure
  https://landing.google.com/sre/sre-book/chapters/postmortem-culture/
- “Аварии помогают учиться”, Алексей Кирпичников
  https://2019.codefest.ru/lecture/1470 
- Jira Ops
  https://ru.atlassian.com/software/jira/ops

Podlodka #105 – Инцидент-менеджмент

Не так важно, насколько качественно написан код, какая используется архитектура и какие под капотом крутятся технологии, если фича в итоге не доедет до пользователя. Алексей Шпирко, руководитель юнита Speed в Авито, рассказал, как запустить релизный поезд для мобильных приложений и монолитного сайта. В процессе мы обсудили, как часто нужно выкатывать мобильные приложения, сколько программистов потребовалось, чтобы сделать ненужными восемь автоматизаторов, почему end-2-end тесты – это не слишком хорошо, а канареечные выкатки – просто замечательно. Короче говоря, максимально прикладной выпуск, который можно смело использовать как справочник полезных советов для начинающих релиз-менеджеров.

Поддержи лучший подкаст про мобильную разработку:
www.patreon.com/podlodka 

Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях! 
Telegram-чат: https://t.me/podlodka  
Telegram-канал: https://t.me/podlodkanews 
Страница в Facebook: www.facebook.com/podlodkacast/ 
Twitter-аккаунт: https://twitter.com/PodlodkaPodcast  

Полезные ссылки:
- Fresh apps: an empirical study of frequently-updated
mobile apps in the Google play store
https://sail.cs.queensu.ca/Downloads/EMSE2015_FreshApps_AnEmpiricalStudyofFrequently-updated.pdf 
- Causal Impact Analysis Applied to App Releases in Google Play and
Windows Phone Store
http://www.cs.ucl.ac.uk/fileadmin/UCL-CS/research/Research_Notes/RN_15_07.pdf
- iOS UI тесты в Авито
https://www.youtube.com/watch?v=xqRfyt1SEZQ 
- Инфраструктура UI-тестов в Авито
https://www.youtube.com/watch?v=aBcJI8ObSeU
- Релизы мобильных приложений в Avito
https://www.youtube.com/watch?v=r3rUedCbe7Q
- Автотесты в Авито. Зачем они, как помогают, сколько стоят
https://youtu.be/25EO8E3DMPw

Podlodka #113 – Релиз-менеджмент

Тестирование — неотъемлемая часть разработки, и за 130 выпусков мы не раз касались разных аспектов этой темы. Но полного погружения в индустрию еще не было, и этот выпуск призван исправить эту несправедливость! С Никитой Макаровым, ex. руководителем отдела тестирования Одноклассников мы обсудили тестирование со всех возможных сторон: начали с терминологии, разобрались, наконец, чем тестирование отличается от QA, копнули в историю, похоливарили про ручное тестирование, покопались в современном инструментарии автоматизации и пофилософствовали о карьерном развитии QA инженера. Цитата выпуска (и черновое название) — "мясо автоматизаторов", а еще мы вернулись к истокам и кое-что уверенно закопали 😉 Хочешь знать, что именно? Ответ найдешь в выпуске!

5-6 декабря в Москве состоится конференция по тестированию #Heisenbug 2019 Moscow!
И у нас есть промокод для слушателей подкаста: heisenbug2019mskPODLODKApc 
Вводить на странице: https://heisenbug-moscow.ru/registration/personal/ 

Поддержи лучший подкаст про IT: www.patreon.com/podlodka

Также ждем вас, ваши лайки, репосты и комменты в мессенджерах и соцсетях!
Telegram-чат: t.me/podlodka 
Telegram-канал: t.me/podlodkanews 
Страница в Facebook: www.facebook.com/podlodkacast/ 
Twitter-аккаунт: twitter.com/PodlodkaPodcast

Ведущие в выпуске: Евгений Кателла, Катя Петрова, Егор Толстой

Полезные ссылки:
- Блог
http://test-failed.blogspot.com/
- Летопись тестирования
http://www.testingreferences.com/testinghistory.php
- Modern Testing Principles by Alan Page 
https://www.angryweasel.com/ABTesting/modern-testing-principles/

Podlodka #130 – Тестирование

Podlodka – это еженедельное аудио-шоу про IT и все, что с ним связано. Формат наших выпусков - это полное погружение в тему вместе с приглашенным гостем. В каждый выпуск мы зовём интересных и именитых профессионалов в разных областях.

Мы любим обсуждать архитектуру, делиться опытом промышленной разработки и спорить на горячие темы.

Подкаст Подлодка ведут четверо весёлых и опытных инженеров с примесями менеджеров:
- Егор Толстой (Kotlin Project Lead, JetBrains)
- Стас Цыганов (Product Manager, Kotlin team в JetBrains)
- Катя Петрова (Product Marketing Manager, Kotlin team в JetBrains)
- Женя Кателла (Staff Developer, Shopify)

Podlodka: QA

Podlodka Podcast