sabe o que é isso aqui isso aqui é lit code Cara isso aqui é entrevista de código que as bigtech adoram né e muitos de nós a gente fala nossa isso aqui é o aperto de mão secreto na nossa área tu quer ganhar 00.000 por ano num numa na meta na Microsoft no Google cara basta aprender como apertar as mãos e muitas vezes isso é ordenar a árvore binária é navegar num grafo né e muitos de vocês não querem aprender isso não sabem nem inverter uma palavra usando dois ponteiros que que resta para nós hum
usar I né quando a gente não sabe a gente não estuda a gente rouba a gente a gente trapassa na entrevista e hoje em dia as entrevistas são tudo remoto certo então fica muito mais fácil meu Tu abre o chat IPT numa nova aba Tu abre num outro monitor tu usa dois computador que seja tanto faz tu dá um jeito e aí a gente se questiona Será que as empresas elas não percebem que o cara tá roubando na entrevista mente não E aparentemente elas não se importam então eu trouxe aqui alguns estudos para vocês o
primeiro deles é esse aqui onde onde foi analisado o quão difícil é trapassar entrevistas técnicas com chat PT eles fizeram Esse experimento também trouxe esse caso aqui onde o amigo o amigo que roubou na entrevista foi promovido então o cara entra na empresa rouba na entrevista e ainda assim é promovido Então vamos começar pelo artigo e depois a gente volta aqui para ver esse caso aqui aqui que é de indignar beleza Ah então o atat PT revolucionou o trabalho como conhecemos desde ajudar Pequenas Empresas a automatizar suas tarefas administrativas até codificar componentes react inteiros para
desenvolvedores web sua utilidade é difícil de exagerar E aí aqui no interview em doio eles pensaram Ah muito sobre como chat PT mudará as entrevistas técnicas né uma grande questão é o chat PT facilita trapassa entrevistas essa é uma ótima pergunta eu acredito que sim ah e Acredito que muitos de vocês já devem ter utilizado né as respostas iniciais ao software de trapassa ã foram bem parecidas com o que você esperaria o a galera lá no Reddit afirmaram que o chat GPT é o fim da codificação como conhecemos YouTubers anunciam que a engenharia de software
está morta o chat PT a matou e o ex o antigo Twitter questiona se o chat IPT significa o fim das entrevistas de lit code parece claro que chat IPT pode ajudar as pessoas durante suas entrevistas mas queríamos saber vamos lá quanto isso pode ajudar é fácil trapassar e escapar IMP pune e as empresas que fazem perguntas ao lit code né de lit code precisarão fazer mudanças significativas em seu processo de entrevista cara eu me deparei assim eu não sei muitos de vocês devem se questionar cara mas como é que a empresa não percebe que
o cara tá copiando abrindo chat P tem outra aba é óbvio que o entrevistador sabe que tu tá roubando aí eu tenho uma coisa para te dizer cara tu é Júnior não só por não saber lit C mas porque tu nem sabe roubar tu é Júnior intra passear na entrevista tem vários softwares por aí cara um deles que eu achei recentemente foi o interview coder aqui onde basicamente Tu tem uma janela flutuante que ela fica escondida a Outras aplicações Então tá ligado que tipo assim no Mac OS no Windows tu pode quando vai compartilhar tua
tela tu consegue esconder algumas aplicações para outros aplicativos Então se tu tiver no Google Chrome numa num Hangout se tiver no Zoom tu consegue fazer com que a tela flutuante aqui que vai te ajudar a roubar na entrevista ela não apareça pro entrevistador ó então aqui é um exemplo né O cara tá com esse aqui é o Code cod Wars lit code esse aqui é o lit code né E aí ele vai responder aqui e basicamente com uma talha ó toda essa essa janela aqui flutuante o entrevistador não vê entendeu E aí tu consegue tirar
um screenshot e quando tu tira o screenshot o screenshot vai direto para um modelo e o modelo vai te ajudar a responder o que tá na tela então tem várias formas agora que tu pode colar na entrevista essa é uma delas tu pode até mesmo tu mesmo criar a é muito fácil criar essas aplicações na para responder a essas perguntas recrutamos alguns de nossos entrevistadores profissionais e usuários para o experimento da trapassa Então como é que eles fizeram Ah eles têm uma plataforma aqui prática de entrevista vamos lá os entrevistadores os entrevistadores vieram do nosso
grupo de entrevistadores profissionais Eles foram divididos em três grupos com cada grupo fazendo um tipo de pergunta os entrevistadores não tinham ideia de que o experimento era sobre o chat IPT ou ultrapassa dissemos a eles Este estudo de pesquisa Visa entender as tendências na previsibilidade das decisões de um entrevistador ao longo do tempo especialmente ao fazer perguntas de entrevistas padrão versus não padrão vamos lá Quais são os três tipos de perguntas que tu acaba recebendo numa entrevista dessas São perguntas literais do lit code então perguntas retiradas diretamente do site lit code ou do harer Hank
a critério do entrevistador sem modificação na na pergunta né então isso aqui pessoal eu já já participei de empresas que até possibilitavam a gente fazer isso offline remoto sem estar com entrevistador ali então o primeiro teste que eu fiz foi responde essas três esses três algoritmos tu tem meia hora para fazer e e basicamente isso tá então não tinha nenhum entrevistador ali basicamente entra no hacker han entra no lit code essas plataformas normalmente tem um um login específico para as empresas poderem aplicar as entrevistas então às vezes as empresas fazem isso então um exemplo de
pergunta é classificar cores do lit code é feita exatamente como tá lá então não sei se vocês já fizeram essa aqui é sort colors é um algoritmo bem simples de fazer tá Easy e as empresas aplicam esse tipo de de pergunta né perguntas lit code modificadas então perguntas retiradas do lit code E então modificadas para serem semelhantes a às originais mas ainda notavelmente diferente delas um exemplo aqui é a pergunta do classificar cores só que ao invés de usar três inteiros tu usa quat então só D uma modificadas que são as perguntas personalizadas perguntas que
não estão diretamente vinculadas a nenhuma pergunta existente online então um exemplo que eu peguei quando eu fiz uma entrevista era um sistema de buc de de hotéis e basicamente tipo assim a gente tinha que encontrar a os hotéis mais perto ã daquele hotel que o usuário tava pesquisando para fazer a sugestão então basicamente tu tem tu vai ter um grafo tu vai ter a distância entre os nós só que a pergunta ela era muito mais voltada no domínio de negócio da empresa que eu tava fazendo entrevista tá então às vezes as empresas vão personalizar tu
vai lembrar do colégio cara tu lembra do colégio quando tu estudava pra prova de matemática pra prova de física tu decorava todas as fórmulas aí tu Lia a questão e tu não sabia qual fórmula tu tinha tu tinha que aplicar ali Às vezes as empresas fazem isso também com a entrevista de lit code né tu tem que e tentar entender o do que que se trata aquela entrevista é uma árvore binária é um grafo é simplesmente um ar reito Tem que criar uma fila Tem que criar uma uma uma queue uma stack né uma pilha
os entrevistados vamos lá qual qual que foi o grupo entrevistad os entrevistados vieram do nosso grupo de usuários ativos e foram convidados a participar de Uma Breve pesquisa selecionamos entrevistados que estávamos procurando estavam procurando ativamente por emprego no mercado atual tinha mais de 4 anos de experiência e estava se candidatando a cargos de nível Sênior classificaram sua familiaridade com chat PT durante a codificação como moderada e alta e identificaram-se como alguém que pensava que poderia trapassar em uma entrevista sem ser pego Ok então eles pegaram aqui os entrevistados São pessoas que cara sabem dessas manhas
de como usar a ia para roubar numa entrevista né então eles selecionaram esse grupo e eles disseram aos entrevistados que eles tinham que usar o chat PT na vista e o objetivo era testar a capacidade dele de trapassar com chat PT então foi feito de propósito tá o entrevistador aqui não sabia que ele tava participando dessa pesquisa dessa e desse experimento e os entrevistados sabiam e eles tinham que dar o máximo possível para esconder que tava usando o chat PT e usar o chat chpt então 11 deles foram 37 entrevistas tá Ah 32 eles tiveram
que remover cinco porque o participante Não seguiu as instruções 11 com trat ento de verb que seria direto do lit code né nove um lit code modificado e 12 algo Mega personalizado uma um rápido aviso como Nossa plataforma permite Anonimato nossas entrevistas T áudio mas não vídeo beleza após as entrevistas tanto os entrevistadores quanto os entrevistados eu não sei porque fica pulando lá para cima quant os entrevistados tiveram que complementar uma pesquisa de saída perguntamos ao entrevistado sobre as dificuldades de usar o chat IPT Durante a entrevista beleza vamos ver os resultados após remover entrevistas
em que os participantes não seguiram as instruções obtivemos os seguintes resultados Então vamos ver os resultados aqui eles tinham um grupo de controle 53% desse grupo passou e nesse grupo os entrevistados eles não usaram chat PT e 53% deles passaram quando foi dado a eles uma pergunta aleatória beleza aí tem o grupo de verbin nesse grupo de verbin seria aquelas algoritmos que foram pegos direto do site do lit code 73% passaram pessoal aqui a gente tá dizendo passaram quer dizer que também Conseguiu enganar o entrevistador o entrevistador não sabia que essa pessoa tava usando chat
PT Então pode ver aqui que sim os a i a aumenta as tuas chances né Ah então usando chat PT 73% passaram na entrevista com algoritmos modificados 67% passaram na entrevista tu pode ver que às vezes aqui será que até o a ia se atrapalha um pouco Pode ser então os entrevistados aqui usando chpt 67% passaram quando a pergunta era modificada e quando a pergunta era customizada apenas 25% passaram Ok então aparentemente as empresas podem começar a aplicar essas perguntas mais customizadas por qu eu acho que o maior problema aqui é quem tá usando a
ia não tem noção nenhuma de do que que se trata aquele problema porque se tu der mais contexto para ia e explicar se aquilo é um grafo se tu quer usar uma árvore binária Como que tu quer implementar Mas tu só não quer ter o trabalho de pensar muito a fundo ou tu esqueceu Qual que é o Big notation daquilo tudo bem mas no momento que tu tá numa entrevista compartilhando tua tela é difícil tu passar contexto para I certo eu acho que esse é o pulo do gato aqui das empresas de aplicar esse tipo
de pergunta mais customizada que a ia provavelmente saberia fazer mas que ela precisaria de mais texto Então perguntas literais como era de se esperar o grupo eh verbatim teve o melhor desempenho passando em 73% das entrevistas os entrevistados relataram que obtiveram a solução perfeita do chat PT o comentário mais notável da pesquisa pós entrevista para esse grupo está abaixo É difícil determinar se o candidato passou pela questão porque ele é realmente bom ou se ele já ouviu essa pergunta antes normalmente eu adiciono um duas reviravoltas únicas ao problema para verificar a diferença interessante normalmente esse
entrevistador teria feito uma pergunta modificada para obter mais sinal Então vamos examinar o próximo grupo o modificado para ver se o os entrevistadores realmente obtiveram mais sinal ao adicionar uma reviravolta em suas perguntas então perguntas modificadas lembre-se esse grupo pode ter tido uma pergunta do litco dada a eles que era padrão mas modificada de uma forma que não estava diretamente disponível online Isso significa que o chat PT não poderia ter uma resposta direta para essa pergunta portanto os entrevistados eram muito mais dependentes das habilidades reais de resolução de problemas conforme previsto os resultados para esse
grupo não foram muito diferentes do grupo verbem com 67% dos candidatos passando nas entrevistas interessante 67 então mesmo com a modificada é melhor tu utilizar do que não utilizar né tem mais chances de passar interessante o que mais se destacou aqui nas entrevistas né perguntas que são retiradas diretamente do lit code não foram problema algum uma pergunta de acompanhamento que não fosse tão diretamente no estilo do lit code foi muito mais difícil de fazer o chat PT responder perguntas personal personalizadas né como esperado o grupo de perguntas desse tipo apenas 25% dos candidatos foram aprovados
não só eh estatisticamente significativamente menor do que os outros dois grupos de tratamento como é significativ amente menor do que o controle Ah isso é interessante Cara isso quer dizer que numa pergunta customizada quem tentou usar o chat IPT acabou se ferrando mais do que quem fez esse tipo de pergunta no geral aqui né hum não sei se a gente pode assumir isso na verdade Eles teriam que ter o grupo de controle dividido também em verbat modified e Custom aí a gente saberia se é melhor numa customizada tu nem tentar o chat ept porque é
capaz de tu se embananar ou não então isso isso ficou unclear aqui para nós quando você faz perguntas totalmente personal personalizadas aos candidatos eles têm um desempenho pior do que quando não estão trapassando e recebendo perguntas no estilo do litco é mas é seguinte se tu não me mostrar no controle se eles também no controle estavam recebendo perguntas customizadas fica difícil a gente deduzir né Observe que esse número quando calculado inicialmente era marginalmente maior mas após revisar as perguntas personalizadas em detalhes descobrimos um problema com esse tipo de pergunta que não havíamos previsto Hum o
que havia distorcido os resultados ligeiramente em direção a uma taxa de aprovação mais alta lei a sessão abaixo ninguém foi pego ultrapassando então a galera era boa mesmo em em roubar a entrevista cara e nosso experimento os entrevistadores não sabiam que os entrevistados estavam sendo solicitados a trapassar como você se lembra né depois de cada entrevista pedimos aos entrevistadores que completassem uma pesquisa no qual na qual tinham que descrever o quão confiantes estava em suas avaliações dos candidatos cara a confiança dos entrevistadores na correção de sua avaliação era alta com 72 dizendo que estavam confiantes
em sua decisão de contratação o candidato teve um ótimo desempenho e demonstrou o conhecimento de uma de o candidato demonstrou aqui o conhecimento de um forte Amazon L6 ou Google L5 que seria os níveis aqui dentro do Google né de software engineer e também pode ser considerado entrevistador mentor cara o cara assim não esse cara é bom isso é muita confiança depois de apenas uma entrevista provavelmente demais ah tinha que fazer o vetting desses teus entrevistadores aí né Há muito tempo sabemos que os engenheiros são ruins em avaliar seu próprio desempenho então talvez não seja
um choque descobrir que os entrevistadores também superestimam a eficácia das perguntas que fazem interessante cara dos entrevistadores que que raiva meu dos entrevistadores que não estavam confiantes em sua escolha de contratação 28% perguntamos a eles o porquê e essa foi a distribuição de frequência de seu motivo então 44% dos que falaram que cara eu não não não acho que esse cara deveria entrar 44% foi porque a solução não era óptima né não era a melhor solução 34% a pessoa esqueceu de Ed cases 33% o código era um espaguete 17 19% ele não falou em voz
alta o que tava pensando e 16% encontrou aqui outros problemas né no geral ou seja nenhum deles que rodou então a gente viu ali o percentual que passou o Percal que rodou não foi porque o entrevistador achou que eles estavam roubando cara foi por outros motivos isso é muito interessante cara além de terem a oportunidade de denunciar a trapassa os entrevistadores foram solicitad três vezes adicionais a anotar quaisquer outras preocupações que tivessem com a entrevista cara então Os caras não desconfiaram o candidato não parecia preparado para nenhuma pergunta sobre o lit cod a abordagem do
candidato não tinha clareza e eles começaram a codificar muito cedo Ah aqui fica a dica para ti que vai roubar os usando o aa cara não começa a codar porque aa já te deu código dá um rodeio meu Faz uma pergunta pensa no problema outro pode até mesmo fica a dica antes de passar pra ia o problema já instrui a ia a fazer questionamentos antes de te dar a resposta porque daí quando ela te dá a resposta tu já lê do questionamento até a solução fica dica aí para vocês então quem relatou preocupações sobre trapassa
e quem foi pego acontece que nenhum entrevistador mencionou preocupações sobre qualquer um dos candidatos estarem trapassando Cara eu acho que o seguinte ó ah bom aqui vem o qu preocupado os entrevistados estavam né do entrevistador perceber mas eu acho que uma das coisas que a gente pode falar cara é que as empresas não dão tanta bola para isso sabe por quê Porque depois de um de uma entrevista dessa sempre tem uma entrevista on boarding sempre tem uma sempre tem uma entrevista pessoalmente né então provavelmente tu faz as primeiras remotas mas em alguma hora tu vai
ter que ir lá pessoalmente fazer a última entrevista então eles já conseguem filtrar aí né pode ser só vai aumentar muito o fluxo de pessoas que passam né então como realmente criar boas perguntas personalizadas daí aqui o seguinte eu acho que a saída é criar pergunta personalizada e depois chamar o cara para fazer a entrevista pessoalmente conversa real para quem procura emprego no momento estamos em um estado liminar em que os processos das empresas não alcançaram não alcançaram a realid ade eles o farão em breve seja se afastando completamente do uso de perguntas literais do
lit code ou retornando aos presenciais ah ah então é isso cara é É ou presencial Ou eles vão fazer mais pergunta customizada interessante cara o artigo aqui Ah bom vamos ver esse caso aqui agora do amigo que trapaceou na entrevista e foi promovido o cara ficou bravo não é amigo tinha que ficar feliz pelo pelo pelo pelo amigo tá ó vamos ver esse caso aqui o meu amigo que trapaceou na entrevista está sendo promovido nós sabemos que o processo de entrevista tá quebrado quebrada todo mundo sabe disso para ter o emprego tu só precisa fazer
o que tá sendo pedido né O que é requisito ou melhor para conseguir o emprego tu só precisa para manter o teu emprego tu só precisa fazer o que tá sendo solicitado mas para conseguir um emprego tu precisa cara de grinding tá ligado tu precisa estudar tu precisa se virar cinco dos meus amigos tá que do Masters deles né daí ele colocou aqui da Universidade de Dallas Entraram na Amazon trapassando nas entrevistas todo mundo sabe que as entrevistas na Amazon para graduados são basicamente baseadas em trapaças eu tava tipo assim I was like with então
o cara falou assim cara eu tava certo que em dois anos todos esses meus amigos que passaram nas entrevistas roubando eles seriam demitidos né estariam ferrados guess What né imagina o que aconteceu com todos eles eles receberam um aumento salarial e agora estão ganhando de 250 a 270 mil Cara eu tô achando esse cara meio meio trouxa tá ligado cara que cara babaca meu os amigos deles Entraram na na entrevista na empresa trapacearam na entrevista mas Cara o que que tem que eles trapassar a entrevista dentro da empresa os caras desempenharam um papel que conseguiu
eles promoção Ou seja a entrevista não mediu o quão bom eles eram então tipo assim se o cara atrapa na entrevista e tu acha que ele não era bom para entrar como é que ele entrou e ainda conseguiu promoção cara porque ele entregou tá ligado então tipo tu tá aqui se remoendo Nossa eles estão ganhando 250 270.000 por ano e eles entraram lá trapassando cara eles são melhor que tu cala a boquinha cara nossa deixa de ser Deixa de ser invejoso meu uma criatura invejosa outro amigo meu também né roubou trapaceou numa entrevista na Sales
Force ela tinha um computador um segundo computador do lado aberto e pesquisou no Google a questão palmas para ela cara porque ela não usou nem ia ela pesquisou no Google a solução e tu tá aí reclamando cara caracas meu e agora ela enfim agora ela também pelo jeito foi promovido aqui tá ganhando um salário de 200 230.000 no mínimo e aí masc carinha de de de de triste cara que cara que cara idiota cara P esse esse esse esse op aqui é muito idiota mesu What a Clown show que que palhaçada né Essas entrevistas se
tornaram tipo What the fuck cara é é tipo é toda a tua inveja tu tá botando a tua inveja aqui em pessoas que tu acha que são tuas amigas tá ligado imagina imagina ter tu como inimigo sério a gente precisa Ah se livrar dessas entrevistas virtuais e Fly candidates né trazer os candidatos de fora no site para fazer a entrevista e riscar fora tirar essa galera que são os meus amigos aí né meus antigos amigos que entraram trapassando Caracas meu Olha só que loucura meu que cara invejoso o cara é muito invejoso meu para aqueles
que estão se questionando como que ela conseguiu né trapassar com o segundo computador o computador o primeiro computador tava sendo ali aonde ele ela tava fazendo entrevista e o segundo tava conectada com keyboard pro Bluetooth cara na Apple se tu tiver dois computador com o mesmo iCloud até o teu mouse e o keyboard tu consegue arrastar ele ir de um pro outro tá ligado então provavelmente ela ela fez isso mas enfim cara o que eu tô mais impressionado é o quão invejoso é essa criatura aqui meu sério não seja assim meu tipo assim eu acho
eu acho como entrevistador é o meu papel entrevistar alguém e ter certeza aquela pessoa ela é ela vai ser um bom Fit pra empresa Tecnicamente e também pessoalmente certo primeiro a gente sempre avalia Tecnicamente então tipo assim a gente aplica ainda mais numa entrevista de lit code então o que que a gente tem que fazer do nosso lado como entrevistador a gente tem que ter certeza que a pessoa sabe o que que ela tá fazendo e cara é muito fácil tu pegar alguém que que que simplesmente copiou do chat IPT então assim cara eu acho
que não é o peso não tem que ser no candidato que ultrapassou E tu vai lá e quer se o Justiceiro principalmente se esse cara que trapaceou entrou na empresa e cresceu na empresa foi promovido ou seja isso diz muito mais sobre o processo de entrevista bosta que a gente tem do que o candidato porque o candidato quando entrar na empresa provavelmente vai usar ia né então tipo assim é meio hipocrisia é até o cara lá o ce do do Cloud lá da da antropic ele falou que nossa ele não quer que os candidatos usem
a ia para responder perguntas na entrevista só que o cara tipo uma empresa que faça uma então fica tipo enfim eu queria saber de vocês o que que vocês acham vocês T alguma técnica para roubar a entrevista e tu como entrevistador que que tu faz para pegar o candidato que tá roubando cara comenta aí
